書中描述高爾頓的紀錄習慣,以及作者父親記錄成功擊球與失誤。重點是系統觀察,不是只記戲劇性結果。
讓樣本可見
「八次成功」欠完整:總共十次、五十次還是一千次?觀察合資格應因符合預定條件,不因結果有趣。
應用例子
十次中八次成功是80%,四十次中八次是20%。記得的成功數相同,證據卻很不同。
案例連繫
把嘗試過的重複驗證與成功個案一起報告,才看得到分母。
心理學研究重複驗證計劃
事實
研究人員嘗試重複驗證100項心理學發現;36%在相同方向上達到統計顯著水平。
背景
已發表發現回答的是一項研究中的問題。心理學重複驗證計劃追問:獨立重做後,證據能否支持所選的已發表發現?
結果
計劃揭示可重現性的疑問。不達顯著不自動證明原主張錯誤或涉及造假;仍須檢查方法、精確度及條件。
- 研究人員嘗試重複驗證100項心理學發現。
- 他們比較新舊證據,包括方向、顯著程度及效應大小。
- 開放科學中心記錄:36%在同一方向達到統計顯著,重複驗證的效應約為原來一半。
案例分析
同樣仔細記嘗試總數與達標數,再交代標準:同方向顯著不等於證明底層理論。分母令摘要可理解,分類規則令讀者知道數了甚麼。解讀成功率前兩者都需要。
試一試
就一項小型日常主張,記一星期所有合資格個案,包括不符合預期的結果。
