http://blog.udn.com/mobile/nilnimest/84404190

8427bd911dc57b9c7df47af941a439b5-768x511.jpg

昨天寫了心理學家的小抽屜,印象中我是在「這才是心理學」這本超棒好書裡面讀到的,沒記錯的話,書中用的詞是「scientist's drawer」,科學家的小抽屜,專門用來塞那些不利於發表的研究結果

showLargeImage.jpg

然後這個拋磚引來超大的一塊玉,文中討論統計學中p值的陷阱,使用cherry picking(摘櫻桃)這個可愛的詞,和小抽屜剛好是相對應的概念,能夠發表的論文,能夠被拿去賣的櫻桃,都是具有上架資格的,但是有多少剩餘被塞進抽屜呢?不曉得。

我把全文看完了,太深入的統計學我也不懂,但是有點意思,所以把一點心得再貼一遍。

---------------------------------------------------------------------------

為了發表論文,做出統計上有顯著的結果,研究者經常小小的東改西改,一如文章提到的「改一下model,加一個變數、減一個變數,或是把一個變數平方,或是把一個變數取log,或者把樣本除去一些,增加一些,這樣慢慢去試驗,最後終於得到一個顯著的結果了!」然後好高興可以發表了!

但是,作者說,如果這樣的model20種,每一個檢定的Type I error 控制在0.05(差不多變成約定俗成了),測試了20次,那麼整體來說,20model裡面最少有一個顯著的或然率是多少?是 0.64!超過一半啊!根本不是只發表的那一篇說小於5%

後面接著透過班傑明奇幻旅程的電影延伸到政大門口的車禍,假設門口只有一輛車衝過去,被撞到的機率一樣是先設定5%,但是如果是20輛車衝過去呢?那跟上面一樣,有64%的機會被撞到啊!

我也舉個例子,如果我開槍打空中的飛鳥,只發射一顆子彈,命中的機率是5%,但是如果我用散彈槍一擊20發,命中機率可提升到64%

後面他還有提一個樂透的例子也是類似的。

這部分主要就是要去說明,一般研究只看最後結果,卻忽略prior(先驗條件)的現象,因為研究發表只會發表最後的那個結果啊,那可能是試過了20model之後的成果。就像我一槍20發子彈,結果人家以為我是一發擊中咧。機率差很多。

我在研究所待過,也知道並使用過這樣的方式哈哈。

深入的統計方法學我也無法全部看懂,那個貝式統計學我就沒學過了。

我覺得這篇文章對於專業的人來說,就是去鑽研統計方法學的學問,對於一般人而言,就是要提醒自己看到某件事情的後果時,要更多去思考其他的部分,避免太快下結論。就像文中提到的政策制定、醫療檢查,都應該再謹慎一點。

站在研究的立場,真的很慶幸自己已經畢業了

我入學那時候,遇到論文格式APA5轉換到APA6的時期,被小整了一下。然後學SPSS之外還要再進階SEM

近期我知道的是,很多研究都要將計畫送去給IRB(研究倫理計畫委員會)審查,尤其是使用到實驗介入或是想要未來改寫發表的,那又是一筆時間金錢的開銷啊。

如果照這教授的說法(已經過一年了),萬一以後論文通過與否的統計標準有改,學生們要學的東西一定會更多,說不定我從沒碰過的貝式統計學以後會變成標準配備。

學海無涯。

     如果你/妳是研究生或身邊還有研究生同儕,除非深愛學術路線,不然趕快去把論文寫完畢業啦。

文章標籤
創作者介紹
創作者 時淵--諮商心理師 的頭像
時淵--諮商心理師

六度˙時淵

時淵--諮商心理師 發表在 痞客邦 留言(0) 人氣()