Gradable ChatGPT Translation Evaluation

要約

ChatGPT は、大規模な事前トレーニングに基づく言語モデルとして、機械翻訳の分野に大きな影響を与えています。
ChatGPT では、「プロンプト」は、特定のカテゴリの応答を生成するようにモデルを誘導するために使用されるテキストまたは命令のセグメントを指します。
翻訳プロンプトのデザインは、翻訳のスタイル、精度、正確さなどの要素にある程度の影響を与える可能性がある重要な側面として浮上します。
しかし、翻訳プロンプトを設計および選択する方法に関する共通の標準および方法論が不足しています。
したがって、この論文は、表現タイプ、翻訳スタイル、POS情報、および明示的なステートメントの観点から段階的な翻訳プロンプトを定義する一般的な分類法を提案します。これにより、さまざまな翻訳タスクに合わせた異なる属性を備えたプロンプトの構築が容易になります。
方法の有効性を検証し、説明するために、特定の実験と事例が選択されています。

要約(オリジナル)

ChatGPT, as a language model based on large-scale pre-training, has exerted a profound influence on the domain of machine translation. In ChatGPT, a ‘Prompt’ refers to a segment of text or instruction employed to steer the model towards generating a specific category of response. The design of the translation prompt emerges as a key aspect that can wield influence over factors such as the style, precision and accuracy of the translation to a certain extent. However, there is a lack of a common standard and methodology on how to design and select a translation prompt. Accordingly, this paper proposes a generic taxonomy, which defines gradable translation prompts in terms of expression type, translation style, POS information and explicit statement, thus facilitating the construction of prompts endowed with distinct attributes tailored for various translation tasks. Specific experiments and cases are selected to validate and illustrate the effectiveness of the method.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google