要約
このペーパーでは、メンタルヘルス サポートを提供するために設計された大規模言語モデル (LLM) ソリューションである ChatCounselor について説明します。
ChatCounselorは、一般的なチャットボットとは異なり、コンサルティングクライアントと専門の心理学者との実際の会話を基盤としており、心理学分野の専門知識とカウンセリングスキルを備えていることが特徴です。
トレーニング データセット Psych8k は、それぞれ 1 時間にわたる 260 件の詳細なインタビューから構築されました。
カウンセリングの応答の質を評価するために、カウンセリングベンチが考案されました。
GPT-4 と、心理カウンセリング評価の 7 つの指標に基づいて綿密に作成されたプロンプトを活用し、モデルは現実世界の一連のカウンセリング質問を使用して評価を受けました。
印象的なことに、ChatCounselor はカウンセリング ベンチの既存のオープンソース モデルを上回り、ChatGPT のパフォーマンス レベルに近づき、高品質のドメイン固有データによって達成されるモデル機能の顕著な強化を示しています。
要約(オリジナル)
This paper presents ChatCounselor, a large language model (LLM) solution designed to provide mental health support. Unlike generic chatbots, ChatCounselor is distinguished by its foundation in real conversations between consulting clients and professional psychologists, enabling it to possess specialized knowledge and counseling skills in the field of psychology. The training dataset, Psych8k, was constructed from 260 in-depth interviews, each spanning an hour. To assess the quality of counseling responses, the counseling Bench was devised. Leveraging GPT-4 and meticulously crafted prompts based on seven metrics of psychological counseling assessment, the model underwent evaluation using a set of real-world counseling questions. Impressively, ChatCounselor surpasses existing open-source models in the counseling Bench and approaches the performance level of ChatGPT, showcasing the remarkable enhancement in model capability attained through high-quality domain-specific data.
arxiv情報
著者 | June M. Liu,Donghao Li,He Cao,Tianhe Ren,Zeyi Liao,Jiamin Wu |
発行日 | 2023-09-27 07:57:21+00:00 |
arxivサイト | arxiv_id(pdf) |
提供元, 利用サービス
arxiv.jp, Google