因果推斷
因果推論是一種研究因果關係的科學方法,旨在確定某個現象(因)對另一個現象(果)的獨立影響。與傳統的相關性分析不同,因果推論專注於探究當原應變量發生變化時,結果變量的具體響應。[1][2] 這一領域在人工智能、醫學、社會科學和經濟學中得到了廣泛應用。[3]
因果推論的核心任務是通過數據分析揭示隱藏的因果關係。它不僅需要構建因果模型,還必須滿足特定假設,以確保推斷結果的可靠性。這些假設包括無混雜變量假設(不存在未觀測的混雜因素)、共同支持假設(不同處理方式的分佈具備可比性)、以及穩定性假設(個體間的治療效果互不干擾)。
因果推論起源於早期專家系統的推斷引擎,但當時的系統依賴預設規則,難以實現數據驅動的智能推斷。隨着統計學和人工智能的發展,因果推論逐漸形成了系統的方法論,並在醫療、經濟政策評估和社會實驗設計等領域展現了巨大潛力。
因果推論的最大挑戰在於反事實分析:我們無法同時觀察同一個體在不同處理方案下的結果。這一問題被稱為「因果推論的基本問題」。科學家只能依賴對照組和實驗組數據,通過統計推論間接估算因果關係。此外,因果推論對模型的假設依賴較高,若假設不成立,結果可能具有偏差。
儘管如此,因果推論近年來取得了顯著進展。其廣泛適用性和理論創新,使其成為人工智能、醫療診斷和政策制定等領域不可或缺的工具。
定義
編輯推斷原因的過程可描述為:
方法論
編輯通用方法
編輯當系統的一個變量可能影響另一個變量時,可以進行因果推斷。因果推理是根據科學方法進行的。因果推斷的第一步是制定一個可證偽的虛無假設,隨後用統計方法對其進行檢驗。頻率學派推斷利用統計方法確定數據在零假設下偶然出現的概率:用貝葉斯推斷確定自變量的影響。一般而言,統計推斷可用於區分出原始數據變量的變化是出自隨機浮動,抑或是明確的因果機制的影響。[6]注意,相關不蘊涵因果,因此對因果關係的研究,以及對潛在因果機制(例如中介變項的存在性)的研究,都需要同樣關注數據之間的變化。[來源請求]因果推斷研究經常希望進行隨機對照試驗,其中干擾因素全部維持不變。此為推斷因果的一個標準方法。因果推斷中最消耗精力的部分往往在於試圖複製實驗條件。
流行病學研究採用不同的流行病學方法來收集和測量危險因子和結果的數據,以及使用不同方法刻劃這種關聯性。2020年一份對因果推斷方法的綜述發現,要將現有文獻用於臨床培訓將會很有挑戰性。這是因為這些已發表的文章通常預設讀者有深厚的技術背景,它們可能從統計學、流行病學、計算機科學、哲學的角度切入;而且各種不同方法論的方法繼續迅速擴展;此外,因果推斷的許多角度在文獻中篇幅有限。 [7]
因果推理的常見框架是結構方程模型和魯賓因果模型。[來源請求]
實驗方法
編輯實驗方法可以驗證因果機制。實驗是為了有目的地操縱感興趣的變量,同時保持其他實驗變量不變。僅操縱某變量的情況下,若對實驗結果產生了統計上顯著的影響,則有理由相信該變量引發了一定的因果效應(但需同時假設實驗設計滿足了一定的標準)。
準實驗方法
編輯當傳統的實驗方法不可用時,可以對因果機制進行準實驗驗證。這可能是由於實驗的成本過高,或者實驗本身就不可能進行,例如研究大型系統(如與選舉制度相關的經濟學)的實驗,或可能對測試對象造成危害的試驗。出於法律原因無法收集資訊的情況下,也可能進行準實驗。
流行病學方法
編輯流行病學研究特定生物群體的健康和疾病模式,以推斷起因和結果。假定的危險因子與疾病之間的相關性可能提示了因果,但並不等同於因果,因為相關不蘊涵因果。從歷史上看,柯霍氏法則自19世紀以來一直被用於確定微生物是否是疾病的起因。在20世紀1965年總結出的希爾準則[8]則早已用於評估微生物學以外的因果關係,但這些標準也不是確定因果關係僅有的方法。
在分子流行病學中,研究現象屬分子生物學層級。其中遺傳學層面的生物標記可以是因果關係的證據。
最近的趨勢[何時?]是在新興的分子病理流行病學(MPE)的跨學科領域中,在分子病理學層面上確定風險因子對於患病組織或細胞的影響的證據。將因子與疾病的分子病理特徵聯繫起來可以幫助評估因果關係。[需要第三方來源]生物醫學和公共衛生科學的研究趨勢也包括研究特定疾病內在的異質性、「獨特疾病原理」(unique disease principle,即不同病人有不同病程[9])、疾病表型和亞型,亦體現在個體化醫療和精準醫學上。[需要第三方來源]
計算機科學方法
編輯對某些模型而言,從兩個時間獨立變量(例如X和Y)的聯合觀測數據中,可以根據X → Y(表示X是Y的原因,下同)和Y → X兩個方向的數據之間的不對稱性確定其因果關係。主要方法基於算法資訊論模型和噪聲模型。[來源請求]
噪聲模型
編輯在模型中加入一個獨立的噪聲項來比較兩個方向的數據。
以下是在假設Y → X下,引入噪聲E的一些噪聲模型:
這些模型中的共同假設是:
- 不存在Y的其他原因(前置項)。
- X和E沒有共同的原因。
- 原因的分佈獨立於因果機制。
直觀的想法是,將聯合分佈P(原因, 結果)分解為P(原因)*P(結果|原因)的總複雜度通常會低於分解為P(結果)*P(原因|效果)。此處「複雜度」的概念儘管在直覺上很有吸引力,卻沒有明顯的精確定義。[13] 另一系列的方法則試圖從大量標記數據中發現因果「足跡」,從而預測更靈活的因果關係。 [14]
社會科學方法
編輯社會科學
編輯總體上,社會科學越來越傾於在因果評估中引入定量框架。很多這樣的研究為社會科學方法論提供了更嚴格的手段。1994年Gary King、Robert Keohane和Sidney Verba出版的《社會研究的設計》對政治學影響深遠。King、Keohane和Verba建議研究人員同時應用定量和定性方法,並採用統計推斷的語言來更清楚地瞭解他們感興趣的主題和分析單位。 [15] [16]定量方法的支持者也越來越常採用唐納德·魯賓開發的潛在結果模型作為推斷因果關係的標準。[來源請求]
儘管社會科學仍然大部分着重於在潛在結果框架中進行統計推斷,方法論者開發了新工具,同時使用定性和定量方法,進行因果推斷,有時稱為「混合方法」方法。[17] [18]使用多元方法的倡導者認為,不同的方法論適用於不同研究主題。社會學家Herbert Smith和政治學家James Mahoney、Gary Goertz引用了統計學家Paul Holland的觀察(1986年文章〈統計和因果推斷〉[19]的作者):統計推斷最適合評估「原因的影響」而不是「影響的原因」。[20] [21]定性方法論者認為,因果關係的形式化模型,包括過程追蹤和模糊集理論,能藉識別案例研究中的關鍵因素,或藉比較幾個案例研究,而提供推斷因果的機會。 [16]在可觀察量有限,或存在混雜變量的情況下,統計推斷的適用性會受限,但此時前述方法仍很有價值。[來源請求]
經濟學和政治科學
編輯經濟學和政治科學中,由於現實世界中經濟和政治的複雜性,以及許多大規模現象無法在受控實驗中重現,因果推斷通常很困難。由於社會科學家可用的技術提高,加之有更多社會科學家和更多研究,社會科學的因果推理方法又有普遍改進,所以經濟和政治科學中的因果推理在方法論和嚴謹性方面繼續得到改進。[22]
儘管確定經濟系統中的因果關係本質上很困難,在這些領域中存在幾種廣泛採用的方法。
理論方法
編輯經濟學家和政治學家可以使用理論(通常在理論驅動的計量經濟學)來估計在他們認為存在因果關係的情況下,所謂的因果關係的大小。[23]理論家可以預設一個因果機制,並使用數據分析來描述其影響,以證明他們提出的理論是合理的。例如,理論家可以使用邏輯來構建模型,例如假說降雨會導致經濟生產力波動,但反之則不然。[24]然而,不提供任何預測見解的純理論主張被稱為「前科學」,因為沒有方法預測假定的因果關係的影響。[25]值得重申的是,社會科學中的回歸分析本質上並不意味着因果關係,因為僅考慮短期或特定數據集時,可能許多現象表現相關,但在其他時間段或其他數據集並無相關性。因此,若無明確定義的合理因果機制,就斷言相關屬性具有因果屬性,為時過早。
輔助變量
編輯輔助變量(IV)技術是一種確定因果關係的方法。該方法可以消除模型內某解釋變量與模型的誤差項之間的相關性。這是基於以下原理:如果模型的誤差項與另一個變量的變化密切相關,則模型的誤差項可能是該解釋變量變化的影響。通過引入新的工具變量來消除這種相關性,就能減少整個模型中存在的誤差。 [26]
模型指定
編輯模型指定即是選擇用於數據分析的模型。社會科學家(實際上,所有科學家)必須正確地選用模型,因為不同的模型擅長估計不同的關係。[27]
指定特定模型可用於確定緩慢出現的因果關係,其中一個時期內某項行動的結果只能在以後的時期出現。值得記住的是,相關性僅衡量兩個變量是否具有相似的變化,而非其中一個變量是否單向影響另一個變量;因此,不能僅根據相關性來確定因果關係的方向。因為相信先有因再有果,社會科學家會用模型來專門尋找一段時間內一個變量對另一個變量的影響。這導致計量經濟學中,較早發生的現象的變量被視為治理手段(treatment),計量測試則用於尋找數據中此類治理導致的後期變化。若數據中,前期治理手段中有意義的區別緊接着後期結果的有意義的區別,則可能表明治理和變化之間的因果關係(例如,格蘭傑因果檢驗)。此類研究是時間序列分析的示例。[28]
敏感度分析
編輯在同一模型的不同實現中,可能包含或排除不同的變量(回歸分析中稱為回歸量),以區分研究不同的變化來源。這是敏感性分析的一種形式:它研究模型的實現對於添加新變量的敏感性。[29]
使用敏感性分析的主要動機是希望發現干擾因子。干擾因子對統計檢驗的結果有很大影響,但不是因果推斷試圖研究的變量。干擾因子可能會導致回歸量在一個實現中顯得很重要,但在另一種實現中則不然。
多重共線性
編輯另一使用敏感性分析的原因是用於偵測多重共線性。多重共線性是兩個變量相關性非常高的現象。兩變量間的高度相關性可以劇烈地影響統計分析的結果——高度相關的數據中,細小的變化可能將某個變量的正面影響反轉成負面影響,反之亦然。這是方差檢驗的內稟性質。在敏感性分析中,發現多重共線性很有用,因為在不同的模型實現中刪去高度相關變量,就可以避免這些變量帶來的劇烈變化。[30]
然而,在預防多重共線性的危害這方面,敏感性分析並不是萬能的,尤其是在系統複雜的社會科學中。因為若系統足夠複雜,則理論上已不可能考慮所有干擾因子,遑論測量該些因子,所以計量經濟學模型容易出現共因謬誤,即總結出錯誤的變量因果關係,而早在原始數據已遺漏正確的變量(共因)。這是一個未能考慮干擾因子的例子。[31]
基於設計的計量經濟學
編輯最近,基於設計的計量經濟學方法得到改進,令自然實驗和準實驗研究設計更廣泛用於識別因果機制。[32]
因果推斷的不端行為
編輯儘管用於確定因果關係的方法的發展取得了進步,但這些方法仍然存在重大缺陷。這些弱點一方面源於確定複雜系統中因果關係的內稟困難,另一方面則源於科學不端行為事件。
撇開因果推斷的困難,在一些大的社會科學家群體中,存在大量社會科學家從事非科學的方法論。在經濟學和社會學領域內,不乏對於科學家將描述性研究冒充成因果研究的批評。 [25]
科學不端和有缺陷的方法論
編輯在科學領域,尤其是社會科學,學者們擔心科學不端行為廣泛存在。 因為科學研究主題廣泛,即使不是研究者的過錯,理論上仍有無限的方式去推翻一個因果關係。但是,科學家仍然疑慮,可能有很多研究者推斷因果時,沒有履行基本職責,或是沒有實踐足夠多元的方法。[33][34][35] [36]
常見的非因果方法的突出例子是將相關屬性錯誤地假設為因果屬性。相關現象中不必然有內在的因果關係。回歸模型旨在測量數據中相對於理論模型的變化:即使數據有很高的協方差,也不代表之間有任何有意義的關係(除非已同時提出具有預測特性的因果機制或隨機分配治理)。缺陷方法的使用被認為是普遍存在的,這種不當行為的常見例子是過度使用相關模型,尤其是過度使用回歸模型,特別地,線性回歸模型。 [25]兩個相關現象具有內在相關性的假設是一種稱為虛假相關性的邏輯謬誤。一些社會科學家聲稱,將虛假相關性視為因果的方法論若被廣泛使用,將有損社會科學界的誠信,不過他們亦注意到更好的方法論帶來了改進。 [32]
若科學研究將相關性與因果關係混為一談,則可能產生更多無法獲第三方重現的科學結論。這種不可重復性是可預見的,因為該些結論所謂的因果機制,只是將相關性暫時過度概括而成,並無內在因果關係,而新數據不包含之前原始數據的特殊相關性。有關不端行為及因果推斷的固有困難的影響的爭論仍進行中。[37]批評這些廣泛使用的方法論的人認為,研究人員使用統計學的操縱手段來發表文章,而該些文章據稱證明因果關係,但實際上只是將虛假相關吹捧為因果關係的證據。這種行為被稱為P-hacking。[38]為了防止這種情況,一些人主張,研究人員要在研究之前預先註冊他們的研究設計。這樣,即使他們在數據分析過程中,在原先調查主題之外,發現其他數據在統計上顯著,也不能過分強調該些發現。這些發現往往不可重復。[39]
參見
編輯參考資料
編輯- ^ Pearl, Judea. Causal inference in statistics: An overview (PDF). Statistics Surveys. 1 January 2009, 3: 96–146 [2021-07-21]. doi:10.1214/09-SS057 . (原始內容存檔 (PDF)於2010-08-06).
- ^ Morgan, Stephen; Winship, Chris. Counterfactuals and Causal inference. Cambridge University Press. 2007. ISBN 978-0-521-67193-4.
- ^ Svetovidov, Andrei; Rahman, Abdul; Batarseh, Feras A. 8 - AI assurance using causal inference: application to public policy. Batarseh, Feras A.; Freeman, Laura J. (編). AI Assurance. Academic Press. 2023-01-01: 293–319. ISBN 978-0-323-91919-7.
- ^ causal inference. Encyclopædia Britannica, Inc. [24 August 2014]. (原始內容存檔於2015-05-03).
- ^ John Shaughnessy; Eugene Zechmeister; Jeanne Zechmeister. Research Methods in Psychology. McGraw-Hill Humanities/Social Sciences/Languages. 2000: Chapter 1 : Introduction [24 August 2014]. ISBN 978-0077825362. (原始內容存檔於2014-10-15).
- ^ Schrodt, Philip A. Seven deadly sins of contemporary quantitative political analysis. Journal of Peace Research. 2014-03-01, 51 (2): 287–300 [2021-07-21]. ISSN 0022-3433. S2CID 197658213. doi:10.1177/0022343313499597. (原始內容存檔於2021-08-15) (英語).
- ^ Landsittel, Douglas; Srivastava, Avantika; Kropf, Kristin. A Narrative Review of Methods for Causal Inference and Associated Educational Resources. Quality Management in Health Care. 2020, 29 (4): 260–269 [2021-07-21]. ISSN 1063-8628. PMID 32991545. S2CID 222146291. doi:10.1097/QMH.0000000000000276. (原始內容存檔於2021-08-15) (英語).
- ^ Hill, Austin Bradford. The Environment and Disease: Association or Causation?. Proceedings of the Royal Society of Medicine. 1965, 58 (5): 295–300 [2021-07-21]. PMC 1898525 . PMID 14283879. doi:10.1177/003591576505800503. (原始內容存檔於2021-02-19).
- ^ Ogino S, Lochhead P, Chan AT, Nishihara R, Cho E, Wolpin BM, et al. Molecular pathological epidemiology of epigenetics: emerging integrative science to analyze environment, host, and disease. review. Modern Pathology. April 2013, 26 (4): 465–84. PMC 3637979 . PMID 23307060. doi:10.1038/modpathol.2012.214.
- ^ Hoyer, Patrik O., et al. "Nonlinear causal discovery with additive noise models (頁面存檔備份,存於互聯網檔案館)." NIPS. Vol. 21. 2008.
- ^ Shimizu, Shohei; et al. DirectLiNGAM: A direct method for learning a linear non-Gaussian structural equation model (PDF). The Journal of Machine Learning Research. 2011, 12: 1225–1248 [2021-07-21]. arXiv:1101.2489 . (原始內容存檔 (PDF)於2021-07-23).
- ^ Zhang, Kun, and Aapo Hyvärinen. "On the identifiability of the post-nonlinear causal model." Proceedings of the Twenty-Fifth Conference on Uncertainty in Artificial Intelligence. AUAI Press, 2009.
- ^ 13.0 13.1 Mooij, Joris M., et al. "Probabilistic latent variable models for distinguishing between cause and effect (頁面存檔備份,存於互聯網檔案館)." NIPS. 2010. 引用錯誤:帶有name屬性「Mooij」的
<ref>
標籤用不同內容定義了多次 - ^ Lopez-Paz, David, et al. "Towards a learning theory of cause-effect inference (頁面存檔備份,存於互聯網檔案館)" ICML. 2015
- ^ King, Gary. Designing social inquiry : scientific inference in qualitative research. Princeton Univ. Press. 2012. ISBN 978-0691034713. OCLC 754613241.
- ^ 16.0 16.1 Mahoney, James. After KKV. World Politics. January 2010, 62 (1): 120–147. JSTOR 40646193. doi:10.1017/S0043887109990220.
- ^ Creswell, John W.; Clark, Vicki L. Plano. Designing and Conducting Mixed Methods Research. SAGE Publications. 2011 [2021-07-21]. ISBN 9781412975179. (原始內容存檔於2021-07-21) (英語).
- ^ Seawright, Jason. Multi-Method Social Science by Jason Seawright. Cambridge Core. September 2016 [2019-04-18]. ISBN 9781316160831. doi:10.1017/CBO9781316160831. (原始內容存檔於2021-07-21) (英語).
- ^ Holland, Paul. Statistics and Causal Inference. Journal of the American Statistical Association. 1986, 81 (396): 945–960 [2021-07-23]. doi:10.2307/2289064. (原始內容存檔於2021-08-01) (英語).
- ^ Smith, Herbert L. Effects of Causes and Causes of Effects: Some Remarks from the Sociological Side. Sociological Methods and Research. 10 February 2014, 43 (3): 406–415. PMC 4251584 . PMID 25477697. doi:10.1177/0049124114521149.
- ^ Goertz, Gary; Mahoney, James. A Tale of Two Cultures: Contrasting Quantitative and Qualitative Research. Political Analysis. 2006, 14 (3): 227–249. ISSN 1047-1987. doi:10.1093/pan/mpj017 (英語).
- ^ Angrist, Joshua D.; Pischke, Jörn-Steffen. The Credibility Revolution in Empirical Economics: How Better Research Design Is Taking the Con out of Econometrics. Journal of Economic Perspectives. June 2010, 24 (2): 3–30 [2021-08-15]. ISSN 0895-3309. doi:10.1257/jep.24.2.3. (原始內容存檔於2021-07-05) (英語).
- ^ University, Carnegie Mellon. Theory of Causation - Department of Philosophy - Dietrich College of Humanities and Social Sciences - Carnegie Mellon University. www.cmu.edu. [2021-02-16]. (原始內容存檔於2021-07-11) (英語).
- ^ Simon, Herbert. Models of Discovery. Dordrecht: Springer. 1977: 52.
- ^ 25.0 25.1 25.2 Schrodt, Philip A. Seven deadly sins of contemporary quantitative political analysis. Journal of Peace Research. 2014-03-01, 51 (2): 287–300 [2021-07-21]. ISSN 0022-3433. doi:10.1177/0022343313499597. (原始內容存檔於2021-08-15) (英語). 引用錯誤:帶有name屬性「:1」的
<ref>
標籤用不同內容定義了多次 - ^ Angrist, Joshua D.; Krueger, Alan B. Instrumental Variables and the Search for Identification: From Supply and Demand to Natural Experiments. Journal of Economic Perspectives. 2001, 15 (4): 69–85 [2021-07-21]. doi:10.1257/jep.15.4.69. (原始內容存檔於2021-05-06).
- ^ Allen, Michael Patrick (編), Model specification in regression analysis, Understanding Regression Analysis (Boston, MA: Springer US), 1997: 166–170 [2021-02-16], ISBN 978-0-585-25657-3, doi:10.1007/978-0-585-25657-3_35, (原始內容存檔於2021-08-15) (英語)
- ^ Maziarz, Mariusz. The Philosophy of Causality in Economics: Causal Inferences and Policy Proposals. New York: Routledge. 2020.
- ^ Salciccioli, Justin D.; Crutain, Yves; Komorowski, Matthieu; Marshall, Dominic C., MIT Critical Data , 編, Sensitivity Analysis and Model Validation, Secondary Analysis of Electronic Health Records (Cham: Springer International Publishing), 2016: 263–271, ISBN 978-3-319-43742-2, PMID 31314264, doi:10.1007/978-3-319-43742-2_17 (英語)
- ^ Illowsky, Barbara. Introductory Statistics. openstax.org. 2013 [2021-02-16]. (原始內容存檔於2021-07-21).
- ^ Henschen, Tobias. The in-principle inconclusiveness of causal evidence in macroeconomics. European Journal for Philosophy of Science. 2018, 8 (3): 709–733. doi:10.1007/s13194-018-0207-7.
- ^ 32.0 32.1 Angrist Joshua & Pischke Jörn-Steffen. Mostly Harmless Econometrics: An Empiricist's Companion. Princeton: Princeton University Press. 2008.
- ^ Achen, Christopher H. Toward a new political methodology: Microfoundations and ART. Annual Review of Political Science. June 2002, 5 (1): 423–450 [2021-07-21]. ISSN 1094-2939. doi:10.1146/annurev.polisci.5.112801.080943. (原始內容存檔於2021-08-12) (英語).
- ^ Angrist, Joshua D.; Pischke, Jörn-Steffen. The Credibility Revolution in Empirical Economics: How Better Research Design Is Taking the Con out of Econometrics. Journal of Economic Perspectives. June 2010, 24 (2): 3–30 [2021-08-15]. ISSN 0895-3309. doi:10.1257/jep.24.2.3. (原始內容存檔於2021-07-05) (英語).
- ^ Dawes, Robyn M. The robust beauty of improper linear models in decision making. American Psychologist. 1979, 34 (7): 571–582 [2021-07-21]. doi:10.1037/0003-066X.34.7.571. (原始內容存檔於2021-07-21).
- ^ Vandenbroucke, Jan P; Broadbent, Alex; Pearce, Neil. Causality and causal inference in epidemiology: the need for a pluralistic approach. International Journal of Epidemiology. December 2016, 45 (6): 1776–1786. ISSN 0300-5771. PMC 5841832 . PMID 26800751. doi:10.1093/ije/dyv341.
- ^ Greenland, Sander. For and Against Methodologies: Some Perspectives on Recent Causal and Statistical Inference Debates. European Journal of Epidemiology. January 2017, 32 (1): 3–20 [2021-07-21]. ISSN 1573-7284. PMID 28220361. doi:10.1007/s10654-017-0230-6. (原始內容存檔於2021-07-21).
- ^ Dominus, Susan. When the Revolution Came for Amy Cuddy. The New York Times. 18 October 2017 [2019-03-02]. ISSN 0362-4331. (原始內容存檔於2020-01-03) (美國英語).
- ^ The Statistical Crisis in Science. American Scientist. 6 February 2017 [2019-04-18]. (原始內容存檔於2021-08-13) (英語).
參考書目
編輯- Hernán, MA; Robins, JM. Causal Inference: What If. Barnsley: Boca Raton: Chapman & Hall/CRC. 2020-01-21 [2021-07-21]. (原始內容存檔於2021-08-22).