Automated Fact-Checking of Climate Change Claims with Large Language Models

要約

この論文では、気候変動に関する主張の事実確認を自動化するために設計された新しい AI ベースのツールである Climinator について紹介します。
IPCC 報告書や査読済みの科学文献などの信頼できる情報源から情報を得た一連の大規模言語モデル (LLM) を利用して、Climinator は革新的な Mediator-Advocate フレームワークを採用しています。
この設計により、Climinator はさまざまな科学的観点を効果的に統合し、堅牢で証拠に基づいた評価を行うことができます。
私たちのモデルは、気候フィードバックと懐疑的な科学から収集された主張をテストする際に、驚くべき精度を示しています。
特に、私たちのフレームワークに気候科学否定の視点を持つ擁護者を統合すると、クリミネーターの反復的な議論のプロセスは確実に科学的合意に収束し、多様な視点を科学に基づいた事実に基づく結論に調整するその巧みさを強調します。
私たちの研究には一定の制限があり、慎重な解釈が必要ですが、私たちのアプローチには大きな可能性が秘められています。
私たちはさらなる研究を促進し、政治的事実確認や法的領域を含む他の状況での適用可能性の探求を奨励したいと考えています。

要約(オリジナル)

This paper presents Climinator, a novel AI-based tool designed to automate the fact-checking of climate change claims. Utilizing an array of Large Language Models (LLMs) informed by authoritative sources like the IPCC reports and peer-reviewed scientific literature, Climinator employs an innovative Mediator-Advocate framework. This design allows Climinator to effectively synthesize varying scientific perspectives, leading to robust, evidence-based evaluations. Our model demonstrates remarkable accuracy when testing claims collected from Climate Feedback and Skeptical Science. Notably, when integrating an advocate with a climate science denial perspective in our framework, Climinator’s iterative debate process reliably converges towards scientific consensus, underscoring its adeptness at reconciling diverse viewpoints into science-based, factual conclusions. While our research is subject to certain limitations and necessitates careful interpretation, our approach holds significant potential. We hope to stimulate further research and encourage exploring its applicability in other contexts, including political fact-checking and legal domains.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google