DeliData: A dataset for deliberation in multi-party problem solving

要約

タイトル：Delidata：多数当事者問題解決における熟考のためのデータセット
要約：

– グループでの熟考は、人々が協力して問題を解決することを可能にする。しかし、資源の欠如により、研究が不十分になっている。
– このため、公開可能な初めてのデータセットを紹介する。このデータセットは、500のグループ対話と14,000の発話から構成される、よく知られた認知タスクの解決に関する協力的な会話を含んでいる。
– これらの会話の64%では、グループのメンバーは個別に特定した解決策よりも優れた解決策を見つけることができる。また、正解として最終的に答えを持っていたグループの43.8%では、参加者の誰もがタスクを正しく解決していなかった。
– さらに、熟考の手がかりを捉える新しいアノテーションスキーマを提案し、それに注釈された14,000の発話を公開する。最後に、提案されたデータセットを使用して、2つの熟考発話生成方法を開発し、評価する。
– データ収集プラットフォーム、データセット、アノテーションされたコーパスは、https://delibot.xyzで公開されている。

要約(オリジナル)

Group deliberation enables people to collaborate and solve problems, however, it is understudied due to a lack of resources. To this end, we introduce the first publicly available dataset containing collaborative conversations on solving a well-established cognitive task, consisting of 500 group dialogues and 14k utterances. In 64% of these conversations, the group members are able to find a better solution than they had identified individually, and in 43.8% of the groups who had a correct answer as their final solution, none of the participants had solved the task correctly by themselves. Furthermore, we propose a novel annotation schema that captures deliberation cues and release all 14k utterances annotated with it. Finally, we use the proposed dataset to develop and evaluate two methods for generating deliberation utterances. The data collection platform, dataset and annotated corpus are publicly available at https://delibot.xyz.

arxiv情報

提供元, 利用サービス

arxiv.jp, OpenAI