后设分析在教育研究上的应用创造性思考教学-暨南大学课程.ppt

後設分析在教育研究上的應用:以創造性思考教學之學習成效為例 國立台灣師範大學教育系 廖遠光 引 言 A study, even a well-designed one with a large sample size, will become more useful if its results are examined in the context of others in the field (Kulik, J. A., Kulik, C. C. 1989). 大 綱 後設分析的起源 後設分析的意義 後設分析的特色 傳統文獻分析的缺失 後設分析的種類 後設分析的優點 後設分析的批評 後設分析的發展 後設分析的步驟 後設分析（Meta-analysis）的起源 後設分析的技術最早是運用於農業生產方面，其目的是為了探討兩個變項間的關係(Rosenthal,1991)。 有系統的著手社會科學文獻的整理工作始於1950年代的美國心理學家Glass及其研究伙伴 。 1976年Glass將多年的研究成果以一個較為嚴謹的研究統整方式發表，並將此一方式命名為「Meta-analysis」 後經Cooper (1984), Hedges and Olkin (1983; 1985), Hunter, Schmidt, and Jackson (1982), Jackson (1980), Light and Pillemer (1982), and Rosenthal (1976),等人大力倡導，使得各領域研究結果之整合方法更有系統、更明確也更具體化。 後設分析的意義 字面意義：研究的研究。 「meta-analysis」的其它幾種譯名：統合分析、綜合分析。 後設分析也是量化的文獻探討： 研究者蒐集相同議題的研究，將各研究所發表之研究數據，重新以統計公式加以量化，運用計量分析技巧，將某領域現有的研究結果的數據整合為一。。 後設分析也可提供新的研究方向 後設分析可以透過對調節變項的分析，使研究者更加留意文獻不足之處，並進而尋找新的研究方向，有助於瞭解個別研究無法發現的趨勢。 傳統文獻分析的缺失 文獻的選擇易流於主觀，文獻評論者常依其主觀標準選擇文獻； 對於研究結果有不同的主觀解釋，以致不同的文獻評論者所得到的結論往往是相衝突、相矛盾的； 對研究發現可能產生錯誤的詮釋(misleading interpretations)； 對於所收集的個別研究中持續出現的某些共同特性未能作深入的檢驗； 未能探討中介變項與研究發現間的關係 (Wolf 1986) 。 後設分析之類型 在一個研究議題下，以蒐集到的文獻作為樣本去推論該議題所有文獻中（含未收集到及尚未做的研究）特定變項間關係的可能性。 PSYCHOMETRIC META-ANALYSIS - Hunter and Schmidt 在一個研究議題下，以蒐集到的文獻作為母群體，探究特定變項間關係的結果。 CLASSIC OR GLASSIAN META-ANALYSIS - Gene Glass STUDY EFFECT META-ANALYSIS – Kulik Bangert-Drowns 特別強調同質性的檢定 TESTS OF HOMOGENEITY – Hedges Olkin 後設分析之特色 後設分析雖為量化之方法，卻也相當仰賴質性之詮釋 後設分析主要是從大量的數據來組織和摘取訊息，並且利用統計的方式，來詮釋大部份研究的結果與訊息，然而卻也相當仰賴質性之詮釋。 後設分析不因研究品質而對研究發現預做判定 在描述性的文獻探討中，一些被認為在方法上有問題的研究（例如不良的設計、不佳的測量工具等），通常會被主觀地排除；在後設分析中，會紀錄每一項研究在方法上的缺失，並探討其與研究發現之間的關聯性。 後設分析試圖尋找一般性的結論 不同於初探性研究中研究者對未知的變項做探測性的發現，或是如實驗設計般可以得到明確的因果關連。研究者並不希冀自後設分析的結果中得到驚人之發現或突破性結論，僅被動式的蒐集資料予以分析後找出共同結論（彭瓊慧，2002）。 Glass、McGaw, Smith（1981） 後設分析的優點 Abrami, Bernard (2006)歸納其他學者的意見列出後設分析的優點如下： 回答了關於效果值(effect size)的問題; 有系統地探索了效果值中變異的來源; 將重心放在研究的比較而不是聚焦在一個個別的研究，因此能有效控制研究的內在效度； 因為目的是統整一大群的個別研究，因此研究結果具外在效度或推論性； 當大量的個別研究被分析時，後設分析增進了統計力(statistical power)； 後設分析的優點 每一效果值的