后设评鉴理论研究与实务

《后设评鉴理论研究与实务》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、後設評鑑理論研究與實務國立台北科技大學技術及職業教育研究所曾淑惠9/2/20211台北科大技職所曾淑惠重要的議題後設評鑑理論的推演當前後設評鑑實務上的問題「後設評鑑」理論與實務的奠基與前進9/2/20212台北科大技職所曾淑惠起源後設評鑑的概念，最早源自於一九四O年Orata提出的「評鑑的評鑑」Scriven(1969)在一份針對評鑑教育產出所擬定的評鑑計畫中首用「metaevaluation」一詞9/2/20213台北科大技職所曾淑惠定義「對評鑑、評鑑系統或評鑑機制的評鑑」(Scriven,1974)「針對評鑑技術的效用性(utility)、實務性(

2、practicality)、倫理性(ethics)、及適切性(propriety)，進行描述、獲取、和使用敘述性及判斷性資料的過程，以便於指引評鑑的實施，並公開報告評鑑的優缺點」(Stufflebeam,1981)9/2/20214台北科大技職所曾淑惠操作型定義依據相關的標準─包含評鑑的適切性、可行性、精確性與效用性，以及系統化的本質、正直、尊敬人們、社會責任能力的實踐等─描述、獲取及應用敘述性與判斷性資訊，指引評鑑並報告評鑑的優缺點9/2/20215台北科大技職所曾淑惠對後設評鑑有需求的人(一)評鑑專業人員提供改善個別評鑑、發展評鑑取向與工具的方向獲

3、得並維持對委託人與其他評鑑人員服務的信用消費者幫助做成對需取用產品或服務之決定建立對使用評鑑結果與發現的信心9/2/20216台北科大技職所曾淑惠對後設評鑑有需求的人(二)對非專業人員的評鑑系統掌管者確定其機構所提供的評鑑服務符合倫理的、務實的、可用的、及時的、值得投資的等規準對評鑑的客體確保原級評鑑品質與用途，並確認評鑑的影響確認原級評鑑的人員資格、經驗、能力、績效等，符合個人或學生評鑑標準9/2/20217台北科大技職所曾淑惠後設評鑑的功能評估評鑑工作的品質、影響及運用，降低評鑑結果的不確定性評估評鑑取向的實用性說明及控制評鑑實施時的偏差提供並確保

4、評鑑的績效責任探討評鑑過程的性質，用以獲得另一種觀點和評鑑獨立的精神突破學術本位的限制，建立科技整合的研究糾正對評鑑可能發生的誤用提供多層面的訓練功能整體評估各種原始評鑑的效果促成知識的累積和多元資料的應用增進評鑑專業的能力9/2/20218台北科大技職所曾淑惠後設評鑑的特點任何評鑑工作都可以受到評鑑後設評鑑的方法與一般評鑑中的方法並無不同後設評鑑進行的過程中，通常會以「教育評鑑標準聯合委員會」所發展的評鑑標準作為評估的基礎後設評鑑的使用時機必須在評鑑方案實施前、實施中、及實施後分別進行。形成性後設評鑑可以在造成無法復原的錯誤之前改善評鑑的研究總結性後

5、設評鑑則可增加評鑑最後成果的可靠性9/2/20219台北科大技職所曾淑惠後設評鑑的型式(一)次級資料分析(secondarydataanalysis)依據一套參考標準將評鑑定出等第(ratingsofevaluationagainstasetofcriteria)對研究加以研究(researchonresearch)9/2/202110台北科大技職所曾淑惠後設評鑑的型式(二)在原級評鑑之後進行不處理資料單一資料組對一個評鑑報告進行評語式評論多元資料組對一個特定評鑑的文獻進行評論處理資料單一資料組對一個評鑑進行實證性評鑑多元資料組對一個評鑑的多組資料進行

6、實證性評鑑與原級評鑑同步進行不處理資料單一或多元資料組諮詢式後設評鑑處理資料單一資料組同步進行原始資料的次級分析多元資料組多組的獨立評鑑9/2/202111台北科大技職所曾淑惠常用的後設評鑑標準方案評鑑標準人員評鑑標準學生評鑑標準效用性（Utility)適切性（propriety可行性（Feasibility)精確性（accuracy)9/2/202112台北科大技職所曾淑惠不同評鑑階段實施後設評鑑之焦點評鑑功能評鑑設計階段評鑑過程階段評鑑完成階段決定評鑑的焦點評估及協助改善評鑑之目的及問題，並調查及確定受評對象。確定是否對所選之問題及目的進行評鑑，並

7、評估其價值。評估評鑑目的及問題的健全和價值程度。設計評鑑評估及協助改良評鑑設計的策略，並提供設計所需之訊息及選擇。評估評鑑設計實施的效果，並在必要時提供監控及修正資訊。確定評鑑設計是完美的，並透過適當的實施而對參與者產生助益。蒐集資訊評估及協助選擇工具及資訊蒐集之策略。觀察及評估資料蒐集工作。評估資料蒐集的資訊和所使用方法之品質與相關性。分析資訊引導原級評鑑者選擇合適之分析策略，並考慮資訊之呈現及說明。評估資料分析的過程是否有效率的分析、整合、分類等。評估資料分析的方法使用的適切性及精確性。報告資訊評估評鑑報告之呈現形式及內涵。詳讀並評估評鑑報告的初稿

8、，討論及提供將評鑑報告改進成專業性報告建議。評估評鑑是否以有平衡性的、有時效性的報導，以及是否