2011年12月12日 星期一

第一部分:簡介

後設分析(meta-analysis)研究法簡介

一、定義與緣起

meta-analysis是一種量的綜合研究,它使用很多評估和統計分析的技巧去統整巨大和不同的研究發現,換言之是用統計的概念與方法,去收集、整理與分析之前學者專家針對某個主題所做的眾多實證研究,希望能夠找出該問題或所關切的變數之間的明確關係模式。

與人有關的研究(如心理學、個人與組織行為、管理學、醫學等),經常會發生不同的研究得到不同的結果,讓人莫衷一是。於是,在研讀或撰寫研究論文的時候,我們有時候會在該篇文章的重要性與貢獻的章節看到這樣的描述:「雖然該問題已經有許多人做過實證探討,可是這些研究結果相當分歧,以致目前尚無明確的結論。這份研究可以藉由進一步的探索,找到更明確的證據,提供給相關決策者做為依據。」但當我們仔細去看以上的陳述,很容易發現這是有問題的。如果前面已經有許多研究得到迥然不同的結果,那再多這一份研究也只是在眾多分歧的研究發現中添入其中某一種發現而已,事實上並無法扭轉整個結論,也無法只憑這份研究就讓我們更清楚問題的真相或全貌。

因此,meta-analysis可能要比一般的實證研究更為困難與繁瑣,花費更多的時間。其中有兩個主要的原因:第一是要廣泛收集相關主題的研究文獻,另一個是分析資料的擷取與整理。一份meta-analysis在確定研究的問題或主題之後,必須進行之前相同主題實證研究的地毯式搜尋,範圍不只是發表在期刊上的研究文獻,還要盡可能包括博碩士的論文、政府機關或研究機構的報告、學術或專業研討會所發表的文章,甚至直接向相關領域的專家請教等等。之所以要如此廣泛收集研究文獻的主要原因,除了是愈多研究文獻累積起來的樣本數愈大,對meta-analysis的結論的強度有正面的貢獻。另一個原因是要避免研究論文的「刊登偏差」(publication bias)。由於研究論文的結論若是呈現統計上顯著性,通常比較會被期刊接受並刊登出來。所以若研究人員只拿期刊上研究文獻來進行meta-analysis,結果會被高估。因此meta-analysis花很多心血去探討各種研究文獻的收集方法。

傳統的文獻整理與敘述分析方法(narrative review)經常是將之前已經發表的針對相關主題的研究結果直接加以整理與比較,所採取的方式主要是去算有幾篇研究所得到的結果是顯著的正相關,有幾篇文章得到是顯著的負相關,然後比較看那一種結論比較多,就拿來當整體的結論。這種方法有一些缺點:首先是每一份研究的條件其實都不一樣,有些樣本多,有些樣本少,所探討的情境也不一定相同,因此每一份研究的結論事實上基礎並不一致,把它們加總起來並做比較會有問題。此外,這種方式所得到的結論頂多告訴我們所探討的關係的方向(正相關或負相關),研究者無從得知關係的強度或深度大小。

從二十世紀初開始,就有著名的統計學者如Pearson (1904)與Fisher (1932)用統計的方法去分析與整合個別研究的結論。更在1976年,有位學者Gene Glass 首次使用Meta-analysis的名稱,來代表透過統計分析去整合與分析眾多相同主題的實證研究,以獲得最有代表性的結論的過程與方法。

二、特性

Glass 等人(1981)歸納後設分析特徵有三:(一)後設分析是數量的(二)後設分析不以品質來預判研究發現(三)後設分析旨在尋找一般性總結論。後設分析是一種異於傳統文獻分析的方法,它從個別的研究結果中運用統計的過程,收集實證性的資料,探討變項間關聯的強度,也可以對研究變項間關係,提供更清楚的了解。
因此,後設分析研究理論的演進會更具一般化與可行性,而非以往採用數個研究的組合分析。它可以達到以下兩點:

1.可以計算實驗處理的效果,而非只了解統計的顯著性而已。
2.在研究中許多不同變項的假設可以被驗證,例如新移民與本國籍子女在學習成效的諸篇論文比較中有什麼樣的差異?

三、優點

Wampler(1982)認為使用後設分析的優點是:

(一)它可提供廣泛的、客觀的、有利的數據以判斷實驗處理的效果,是科學化、系統化、客觀化的方法。其採用科學與精確之統計方法,避免一般文獻綜述法所衍生的主觀判斷與選擇偏頗問題。

(二)可對多個有相同的假設性或實徵性研究加以統計分析,並可系統化分析結果不一致的數個研究,可在權衡諸多研究的正負效果中獲得一個「實驗處理是否有效」的大體結論。

(三)單一研究報告的實驗處理效果無論是正值、負值,高顯著或不顯著都會被列入分析考慮,參加效果的總評估。

(四)不需以原始的調查資料作分析,並且可避免重複執行曾經做過的研究。

以上資料彙整自下列網站:
http://thchou.blogspot.com/2008/05/meta-analysis.html
http://www.nc.hcc.edu.tw/ezcatfiles/nc/img/img/742/98003.pdf

第二部分:任務

        後設分析冀求的是研究者能針對已經既有的研究主題作量的統計分析,目的作為比較該論文主題研究成果之異同。因此,請您試著運用您的專業知識和豐富的經驗,快速思考並搜集資料,同時可與小組各成員商議,彙整您們的成果。

1)挑選一個教育類的研究主題,進行文獻的搜尋與整理,
2)思考是否具有後設分析的價值與意義,
3)並嘗試找到前人的後設分析研究成果。

  舉例來說,就「電腦輔助教學」對「智能障礙學生」的學習成效研究,以蔡昆瀛、戴佑祝、陳佳宜(2010)電腦輔助教學對智能障礙學生學習成效研究文獻之後設分析,目前已有24篇研究文獻與此主題相關。而本篇後設分析的成果,則匯集出幾項結論:

1.電腦輔助教學能增進智能障礙學生在語文、數學、生活、社會適應和職業方面的能力。
2.以電腦輔助教學介入智能障礙者學習的實驗教材領域多集中在語文教學,尤以識字成效的探討居多,建議在語文領域部份亦可嘗試延伸至其它部分。

  請試以參考上述案例,完成這項任務!

第三部分:過程

後設分析的基本流程包括六大步驟,以下分別敘述之:

步驟:系統性文獻搜尋
步驟:單位換算
步驟:同質性檢定
步驟:數據運算與合併
步驟:概括結果呈現
步驟:形成結論幫助臨床解讀與運用

第四部分:資源

你也可以連結網站資源哦!

http://thchou.blogspot.com/2008/05/meta-analysis.html
http://kc.kshs.kh.edu.tw/93kc/share-93/flash/share_03/share_03-4.swf
http://tw.myblog.yahoo.com/da_sanlin/article?mid=1974

學習障礙學生與普通學生能力比較之後設分析http://nhcuer.lib.nhcue.edu.tw/bitstream/392440000Q/1032/1/19941935-200912-201004210030-201004210030-42-56.pdf
近五年來傳播學界博碩士論文使用網路問卷研究方法之後設分析http://nhcuer.lib.nhcue.edu.tw/bitstream/392440000Q/1032/1/19941935-200912-201004210030-201004210030-42-56.pdf
電子化政府在公共行政研究的定位與價值:議題連結的初探性分析http://www2.scu.edu.tw/politics/journal/doc/j22/3.pdf
社會故事對廣泛自閉症者介入成效之分析
http://www.sped.nutn.edu.tw/web-SE/%E5%85%B6%E5%AE%83%E8%B3%87%E6%96%99/1-%E6%95%85%E4%BA%8B%E5%B0%8D%E5%BB%A3%E6%B3%9B%E8%87%AA%E9%96%89%E7%97%87%E8%80%85%E4%BB%8B%E5%85%A5%E6%88%90%E6%95%88%E4%B9%8B%E5%88%86%E6%9E%90.pdf
社經地位和學生學業成就關係之後設分析
http://www.naer.edu.tw/mediafile/editor_file/261/%E7%A4%BE%E7%B6%93%E5%9C%B0%E4%BD%8D%E5%92%8C%E5%AD%B8%E7%94%9F%E5%AD%B8%E6%A5%AD%E6%88%90%E5%B0%B1%E9%97%9C%E4%BF%82%E4%B9%8B%E5%BE%8C%E8%A8%AD%E5%88%86%E6%9E%90.pdf

以Flash電腦動畫輔助教學促進國三學生電流概念改變
http://phys5.ncue.edu.tw/physedu/article/6-1/3.pdf
教育行政研究的回顧與前瞻http://web.ed.ntnu.edu.tw/~minfei/educationaladministrationresearch/991curriculumreference-1.pdf
鷹架類型與先備知識對高職電腦軟體應用課程之成效探討
http://ijdlt.org/download.php?dir=papers&filename=00052040-01-010-%e9%b7%b9%e6%9e%b6%e9%a1%9e%e5%9e%8b%e8%88%87%e5%85%88%e5%82%99%e7%9f%a5%e8%ad%98%e5%b0%8d%e9%ab%98%e8%81%b7%e9%9b%bb%e8%85%a6%e8%bb%9f%e9%ab%94%e6%87%89%e7%94%a8%e8%aa%b2%e7%a8%8b%e4%b9%8b%e6%88%90%e6%95%88%e6%8e%a2%e8%a8%8e-R2.pdf
音樂教育科技歷史發展之回顧與再思
http://www.npue.edu.tw/adm/research/%E5%AD%B8%E5%A0%B1/33/33_E/13_%E6%9B%BE%E5%96%84%E7%BE%8E.pdf

國小階段識字教學成效之後設分析---以單一受試實驗研究法為例http://www.cse.ndhu.edu.tw/ezfiles/75/1075/img/237/east9-2.pdf
網路正、負面資訊對組織吸引力影響之探討The Influence of Web-Based Information in Organizational Attraction(http://thesis.topco-global.com/TopcoTRC/2010_Thesis/E0012.pdf)
高職學校自我評鑑能力建立策略之研究http://192.192.169.230/edu_paper/data_image/g0000468/0n48/20070300/p0000151.pdf

第五部分:評估


達成項目/分數

5
3
1
文獻主題
l   符合教育類
l   文獻完整清晰
l   尚符合教育類
l   文獻尚完整清晰
l   不符合教育類
l   文獻不夠完整清晰
文獻整理
l   文獻豐富
l   文獻相關性強
l   文獻尚豐富
l   文獻相關性尚可
l   文獻不夠豐富
l   文獻相關性低
歸納文獻價值
l   具有研究價值
l   具有研究影響力
l   尚有研究價值
l   尚有研究影響力
l   不具有研究價值
l   不具有研究影響力
找到前人後設分析的結果
l   資料豐富
l   整理出結果
l   資料稍有不足
l   稍有整理出結果
l   資料不足
l   未整理出結果
互相評分


68%-100%投票率
35%-67%投票率
6%-34%投票率

第六部分:總結

完成後設分析法的工作後,對相關領域曾經做過的研究,重新作系統化的分析;亦可說是是一種將過去個別研究之結果綜合起來進行統計分析的技術,可以學到到高度的統計技巧。
參考網址:
http://plog.tcc.edu.tw/post/3068/48124