评监概论.ppt

2001/3/1 台北科大 技職所 曾淑惠 評鑑概論 前言 何謂評鑑? 評鑑的範疇 評鑑的倫理考量 哲學的考量 對評鑑的誤解 問題討論 前言 評鑑是一項生存的技能，也是一項競爭的優勢 Evaluation is something we do all the time, several times a day, and have done since before language development. No practical activity proceeds without evaluation Sources: /lectures/intro 何謂評鑑 對不同人來說，評鑑有不同的意義 有許多途徑來概念化評鑑這個名詞：從哲學、目的、功能或方法，大多數的評鑑定義包含兩種以上的向度，但卻沒有一個定義以全方位的向度，涵蓋整體的概念。 何謂評鑑 從評鑑的本質而言 評鑑是一個比較應然面(如參考準則)與實然面(現況資料)，以評定受評者的優點或價值(Steele, 1991) 評鑑是包含定義、說明、可辨證的參考準則等，以決定評鑑標的物的價值、品質、有效性或重要性(Worthen, Sanders Fitzpatrick, 1997) 評鑑是由外部評鑑人員依契約作系統性的檢驗，以確定方案的成果----EHR 何謂評鑑 從評鑑的目的而言 評鑑是決定優點、價值、或重要性的程序(Michael Scriven, 1991) 評鑑是評估一些事物的優點或價值(Stufflebeam, 1985) 評鑑是一個用來決定方案的設計與實施是否有效能，及與運作結果是否相符的過程(Caffarella, 1994) 評鑑是提供決策者關於方案運作或效能的可信、有效、相關且有用的資訊(McLaughlin, 1990) Not to prove, but to improve(Stufflebeam, et. al., 1979) 何謂評鑑 從評鑑的功能而言 評鑑在決定方案的目標是否達成 評鑑用來證明方案的效能 評鑑在判斷方案的優缺點 評鑑在提供訊息以幫助重要決策 評鑑的價值在作為改進方案的指引 何謂評鑑 評鑑是一個持續的詢問過程 詢問有關社會、經濟、環境條件與方案內部發展環境的過程(如背景評鑑或計畫評鑑) 詢問有關方案如何設計、及方案傳遞給觀眾的意圖等問題(如投入評鑑或過程評鑑) 詢問有關方案欲產生成果相關的問題(如outcome評鑑、product評鑑或impact評鑑) 評鑑是涉及系統化地蒐集、分析、及報告一些可以用來改變態度或改進方案運作資料等的活動，其中系統化是指評鑑必須經過規劃(Alkin, 1990) 探討範圍 Program evaluation Project evaluation School evaluation Personnel evaluation Policy evaluation Stuff evaluation Performance evaluation Curriculum evaluation ………… 相關名詞 評鑑 訪視 評量 視導 評鑑研究 (成效)評估 評鑑的倫理考量 受評者必需出於自願，受評者必須瞭解他們在評鑑中自由參與，可以隨時抽離，而不用在現在或將來交付違約金，或損失方案的服務與利益 必需給與將要受評者有關評鑑的資訊，包含目的、受評時間長短、程序、利益、可能的危機或不便，讓他們自由選擇要不要參與 評鑑的倫理考量 不會因為參與評鑑而有物質上、情感上、精神上的傷害 要保護全部有關受評者的敏感資訊，包括：以匿名方式呈現資訊；當無法匿名時，以數字或編碼的方式，從評鑑資料中隔離個人的識別資訊 有關個人隱私的主題，更進一步受到不要蒐集或報導的保護，避免資料被評鑑委員以外的任何人，識別這些個人資訊 評鑑的倫理考量 必須確保受評對象的觀點與看法、好惡、建議與意見，可以受到祕密的對待，而且只有與評鑑最密切的人可以得到此資訊 哲學的觀點 評鑑的政策、倫理與個人觀點(Michale Patton, 1995) 不管評鑑結果顯示方案執行的真實性如何，都不是絕對且單一向度的，而是相對且可作多重解釋的 方案評鑑受到執行評鑑者的哲學信念極大的影響，而執行評鑑者所作的決策包括：評鑑什麼、如何評鑑、誰參與評鑑、以及反應其關切信仰的評鑑問題 哲學的觀點 執行評鑑者、受評對象、財務支援者等，在方案的理念、評鑑執行程序、蒐集的資訊、量測的方法等看法上，或許會有所不同 哲學的觀點 方案評鑑應有的態度與觀念 接受「評鑑是整體方案中的一部份，是有用的活動」的觀念 要做些什麼事才能反應組織的要求 相信評鑑是一個可以幫助個人發展與專業化的過程，特別是在滿足公眾對績效責任的要求時 對評鑑的誤解 問題討論 Evaluation vs. research