学校方案评鉴.ppt

2003/2/14 台北科大技職所曾淑惠 學校方案評鑑 曾淑惠 國立台北科技大學技術及職業教育研究所 From: Sanders .J .R.（2000）,Evaluating school programs ： An educations guide （2nd ed）Thousand Oaks：Corwin . Press. 學校方案評鑑 可能的焦點 評鑑的發起 形成評鑑的組織 蒐集資訊 ＜實施測驗的指引＞ ＜實施問卷調查的指引＞ ＜訪談的指引＞ ＜蒐集資訊的實務指引＞ 組織並分析資訊 報告資訊 管理評鑑 可能的焦點 方案需求評估：建立方案的目標與目的。 個人需求評估：提供對個別學習者教學需求的洞察力。 資源配置：提供設定預算優先順序的指引。 提供服務給學習者的過程或策略。(ex:課程設計、課程處理、教材、教師效能、學習環境等) 教育成果：提供有關學生達成為其所設定之目標與目的程度的洞察力。 評鑑的發起 通常由某人或某群體關切學校正在進行中的方案開始。 校長必須開始進行評鑑，並指派一組教職員率先執行，或由年級或科系部門委員會開始進行評鑑。 必須要先共同考量一些問題。 為何要評鑑方案？為什麼做成這樣的決策？評鑑的目的是什麼？ 誰會使用評鑑的結果？他們會如何使用結果？還有誰會參與評鑑並看到結果？ 方案是什麼？包含及不包含的範圍有那些？是今年過去幾年,未來幾年要做的評鑑？在什麼年級？由那些老師來執行？這是這個方案第一次評鑑嗎？ 你有多少時間與金錢來做評鑑？誰要來做？你有向其他人提及評鑑嗎？他們支持嗎？ 形成評鑑的組織 選擇一位協同主持人 評鑑的關係人 界定評鑑的範圍 說明評鑑的方式 尋找可用的資源 誰來執行評鑑？ 誰是評鑑的關係人？ 何者要接受評鑑？ 評鑑中有何可用的資源或人員？ 蒐集資訊 資訊來源： 學生、教師、校長或方案主持人、學校董事會成員、州教育行政人員、家長、大學校院專家、專業學會。 對方案的直接觀察、圖書及公開文件（報告、教科書、學位論文）、學校檔案及記錄。 方法與工具： 調查 測驗（常模參照測驗、標準參照測驗） 問卷 面談（訪談） 態度量表 觀察檢核表 文件分析 蒐集資訊(續) 效度與信度： 建構效度、同時效度、預測效度、內容效度 信度 誰在何時蒐集資訊： 時程 蒐集資訊的實務指引 定義每個評鑑問題的資訊來源 選擇適切的評鑑方法 資訊蒐集的排程 指派評鑑成員蒐集資訊的任務 蒐集資訊的指引 實施測驗的指引 清楚地確定你想要測量的內容。 發展測驗的藍圖－測驗中有列出涵蓋內容領域的主題、以及布魯姆的目標分類。 選擇題目的格式，以符合你想要學生做到的行為。 使用清楚的指示說明。 允許足夠的時間完成試卷。 保持試題閱讀難易度的適切性。 小心測驗題項不要給予另一個題目的答案有暗示的效果。 避免語意模糊、避免繁瑣。 當心如「從未」、「常常」等特定語調的使用。 當心經由反應選項的長度，獲得正確答案的暗示。 確定只有一個正確答案或清楚的最佳答案。 發展比你所想要的試題量還要多的試題，實施預試，並選擇最佳的組合。 蒐集資訊的指引(續) 實施問卷調查的指引 提供清楚的指示說明，包含截止日期。 不要詢問引導性的問題。 依據主題將問題群組化。 不要假定填答者擁有太多知識。 從簡單，非個人的問題開始問起。 訪談的指引 保持使用的語言可讓受訪者理解。 從簡單，非個人的問題著手，建立和睦的關係。 避免長的問題。 避免語意模糊的字詞。 一個問題限於一個概念。 不要假定有太多的知識。 蒐集資訊的指引(續) 蒐集資訊的實務指引 當你遇到不合作或人們不嚴謹地蒐集資料時怎麼辦？ 以事前溝通獲得支持來避免此問題，若遇到此問題可以謀求另一位工作者，以訪談或問卷等方式補充資訊，提示較佳的資料蒐集範例。要能預見潛在問題或在問題一發生時就解決。 資料蒐集時易犯的錯 誤解導引，並做出不適切的反應（以預試排除之） 蒐集大量的非預期資料（訓練資料蒐集人員、校正資料蒐集程序） 資訊遺失（建立原始資料存取規則、資料備份） 資訊不正確地記錄（資料紀錄的交叉檢核） 蒐集資訊時花些時間說明目的及結果可能對他們的影響。 選擇一個愉快的登錄資料蒐集環境。 資訊完成蒐集後，對所有參與證明，提供資訊，或輔助評鑑的人表示感謝。 組織並分析資訊 分析質化資訊 確定所有的資訊都蒐集到了。 複製一份後安全地收藏起來，以便能在備份稿上書寫、剪裁、與剪貼。 將資料加以組織。 在資料蒐集過程中及結束時，檢討所發現的資料。 繪製結論的草圖，並以所蒐集的資訊為你的發現做最好的支持。 藉由與其他有關人員的互動來驗證發現。 分析量化資訊 測驗－平均數、頻率分布、變異數、標準差等。 調查問卷或訪談－次數、百分比、相關係數等。 態度量表－平均數、