From PARIS to LE-PARIS: Toward Patent Response Automation with Recommender Systems and Collaborative Large Language Models

要約

特許審査では、オフィスアクション(OA)に対するタイムリーで効果的な対応が特許を取得するために重要ですが、これまでの自動化やAIの研究ではこの側面はほとんど扱われていませんでした。
このギャップに対処するために、私たちの研究では、特許庁アクション応答インテリジェンス システム (PARIS) とその高度なバージョンである大規模言語モデル拡張 PARIS (LE-PARIS) を導入しています。
これらのシステムは、弁理士が共同で OA 対応を効率的に処理できるように設計されています。
このシステムの主な機能には、OA トピック データベースの構築、応答テンプレートの開発、レコメンダー システムと LLM ベースの応答生成の実装が含まれます。
当社の検証には、USPTO Office Action データベースと、弁護士と当社のシステムとの 6 年間にわたるやり取りの長期データを使用したマルチパラダイム分析が含まれます。
5 つの研究を通じて、トピック モデリングと提案された Delphi プロセスを使用した OA トピック (研究 1 および 2) の構成性、OA に合わせて提案されたハイブリッド レコメンダー システム (LLM ベースと非 LLM ベースの両方) の有効性を検証します (
研究 3)、応答生成の品質 (研究 4)、およびユーザー研究による現実世界のシナリオにおけるシステムの実用的な価値 (研究 5)。
結果は、PARIS と LE-PARIS の両方が重要な指標を大幅に満たしており、弁護士のパフォーマンスにプラスの影響を与えていることを示しています。

要約(オリジナル)

In patent prosecution, timely and effective responses to Office Actions (OAs) are crucial for acquiring patents, yet past automation and AI research have scarcely addressed this aspect. To address this gap, our study introduces the Patent Office Action Response Intelligence System (PARIS) and its advanced version, the Large Language Model Enhanced PARIS (LE-PARIS). These systems are designed to expedite the efficiency of patent attorneys in collaboratively handling OA responses. The systems’ key features include the construction of an OA Topics Database, development of Response Templates, and implementation of Recommender Systems and LLM-based Response Generation. Our validation involves a multi-paradigmatic analysis using the USPTO Office Action database and longitudinal data of attorney interactions with our systems over six years. Through five studies, we examine the constructiveness of OA topics (studies 1 and 2) using topic modeling and the proposed Delphi process, the efficacy of our proposed hybrid recommender system tailored for OA (both LLM-based and non-LLM-based) (study 3), the quality of response generation (study 4), and the practical value of the systems in real-world scenarios via user studies (study 5). Results demonstrate that both PARIS and LE-PARIS significantly meet key metrics and positively impact attorney performance.

arxiv情報

著者 Jung-Mei Chu,Hao-Cheng Lo,Jieh Hsiang,Chun-Chieh Cho
発行日 2024-02-01 08:37:13+00:00
arxivサイト arxiv_id(pdf)

提供元, 利用サービス

arxiv.jp, Google

カテゴリー: cs.CL, cs.HC, cs.IR, cs.LG パーマリンク