QACHECK: A Demonstration System for Question-Guided Multi-Hop Fact-Checking

要約

現実世界の主張を事実確認するには、主張を支持または反駁する直接的な証拠がないため、多くの場合、複雑で多段階の推論が必要になります。
しかし、既存のファクトチェックシステムは意思決定の透明性を欠いていることが多く、ユーザーが推論プロセスを理解することが困難になっています。
これに対処するために、私たちは、主張を検証するために重要な一連の質問をすることによってモデルの推論プロセスをガイドする、質問ガイド付きマルチホップ ファクト チェック (QACHECK) システムを提案します。
QACHECK には、クレーム検証モジュール、質問生成モジュール、質問応答モジュール、QA 検証モジュール、推論モジュールという 5 つの主要なモジュールがあります。
ユーザーは主張を QACHECK に入力すると、その主張の真実性を予測し、一連の (質問と回答) ペアに基づいてその推論プロセスを詳細に説明する包括的なレポートを提供します。
QACHECK は、各質問を裏付ける証拠のソースも提供し、透明性があり、説明可能で、ユーザーフレンドリーな事実確認プロセスを促進します。
QACHECK の録画ビデオは https://www.youtube.com/watch?v=ju8kxSldM64 にあります。

要約(オリジナル)

Fact-checking real-world claims often requires complex, multi-step reasoning due to the absence of direct evidence to support or refute them. However, existing fact-checking systems often lack transparency in their decision-making, making it challenging for users to comprehend their reasoning process. To address this, we propose the Question-guided Multi-hop Fact-Checking (QACHECK) system, which guides the model’s reasoning process by asking a series of questions critical for verifying a claim. QACHECK has five key modules: a claim verifier, a question generator, a question-answering module, a QA validator, and a reasoner. Users can input a claim into QACHECK, which then predicts its veracity and provides a comprehensive report detailing its reasoning process, guided by a sequence of (question, answer) pairs. QACHECK also provides the source of evidence supporting each question, fostering a transparent, explainable, and user-friendly fact-checking process. A recorded video of QACHECK is at https://www.youtube.com/watch?v=ju8kxSldM64

arxiv情報

著者 Liangming Pan,Xinyuan Lu,Min-Yen Kan,Preslav Nakov
発行日 2023-10-11 15:51:53+00:00
arxivサイト arxiv_id(pdf)

提供元, 利用サービス

arxiv.jp, Google

カテゴリー: cs.CL パーマリンク