要約
テキストの簡略化は、書き換え変換を適用することでテキストを理解しやすくすることを目的としています。
長い間、中国語の文章の簡略化に関する研究はほとんど行われていませんでした。
この現象の根本的な理由は、一般的な評価データの欠如です。
この論文では、マルチリファレンス中国語テキスト簡略化データセットである MCTS を紹介します。
データセットのアノテーション プロセスについて説明し、詳細な分析を提供します。
さらに、いくつかの教師なしメソッドと高度な大規模言語モデルのパフォーマンスを評価します。
さらに、機械翻訳と英語文章の簡略化を利用して取得した、学習に使用できる中国語簡略化パラレルデータも提供します。
私たちは基礎的な作業を通じて中国語の文章の簡略化に関する基本的な理解を構築し、将来の研究の参考にしたいと考えています。
すべてのコードとデータは https://github.com/blcuicall/mcts/ でリリースされています。
要約(オリジナル)
Text simplification aims to make the text easier to understand by applying rewriting transformations. There has been very little research on Chinese text simplification for a long time. The lack of generic evaluation data is an essential reason for this phenomenon. In this paper, we introduce MCTS, a multi-reference Chinese text simplification dataset. We describe the annotation process of the dataset and provide a detailed analysis. Furthermore, we evaluate the performance of several unsupervised methods and advanced large language models. We additionally provide Chinese text simplification parallel data that can be used for training, acquired by utilizing machine translation and English text simplification. We hope to build a basic understanding of Chinese text simplification through the foundational work and provide references for future research. All of the code and data are released at https://github.com/blcuicall/mcts/.
arxiv情報
著者 | Ruining Chong,Luming Lu,Liner Yang,Jinran Nie,Zhenghao Liu,Shuo Wang,Shuhan Zhou,Yaoxin Li,Erhong Yang |
発行日 | 2024-03-30 07:55:41+00:00 |
arxivサイト | arxiv_id(pdf) |
提供元, 利用サービス
arxiv.jp, Google