Background Knowledge Grounding for Readable, Relevant, and Factual Biomedical Lay Summaries

要約

タイトル:Readable、Relevant、およびFactual Biomedical Lay Summariesの背景知識グラウンディング
要約:
・科学的な発見を非専門家に伝えることは重要である。
・しかし、科学的な文書から読みやすい要約を生成することは困難であり、現在、これらの要約は重大な事実誤認を含んでいる。
・ファクト確認を改善するための人気のある方法は、追加の外部知識を使用してファクトのグラウンディングを提供することである。
・しかし、これらのグラウンディングソースをどのように取得、選択、および統合するか、および補完グラウンディング文書が生成された要約の読みやすさまたは関連性にどのように影響を与えるかは不明である。
・グラウンディングソースを選択し、ソース文書と統合するための単純な方法を開発する。
・BioLaySumサマリゼーションデータセットを使用して、異なるグラウンディングソースが要約の品質に与える影響を評価する。
・グラウンディングソース文書は、Lay summariesの関連性と読みやすさを向上させるが、Lay summariesのファクト性を向上させないことがわかった。
・これは、グラウンディングがファクトのある要約にとってさらに重要であると仮定したゼロショットサマリゼーション設定でも当てはまる。

要約(オリジナル)

Communication of scientific findings to the public is important for keeping non-experts informed of developments such as life-saving medical treatments. However, generating readable lay summaries from scientific documents is challenging, and currently, these summaries suffer from critical factual errors. One popular intervention for improving factuality is using additional external knowledge to provide factual grounding. However, it is unclear how these grounding sources should be retrieved, selected, or integrated, and how supplementary grounding documents might affect the readability or relevance of the generated summaries. We develop a simple method for selecting grounding sources and integrating them with source documents. We then use the BioLaySum summarization dataset to evaluate the effects of different grounding sources on summary quality. We found that grounding source documents improves the relevance and readability of lay summaries but does not improve factuality of lay summaries. This continues to be true in zero-shot summarization settings where we hypothesized that grounding might be even more important for factual lay summaries.

arxiv情報

著者 Domenic Rosati
発行日 2023-05-03 13:24:49+00:00
arxivサイト arxiv_id(pdf)

提供元, 利用サービス

arxiv.jp, OpenAI

カテゴリー: cs.CL パーマリンク