Topic Classification of Case Law Using a Large Language Model and a New Taxonomy for UK Law: AI Insights into Summary Judgment

要約

この論文は、英国における略式判決事件の主題分類のための新しい分類法を開発および適用することにより、法的分析における重大なギャップに対処します。
略式判決事件の厳選されたデータセットを使用し、大規模言語モデル Claude 3 Opus を使用して、機能的なトピックと傾向を調査します。
Claude 3 Opus は、精度 87.13%、F1 スコア 0.87 でトピックを正しく分類していることがわかります。
この分析により、さまざまな法的領域にわたる略式判決の適用における明確なパターンが明らかになりました。
英国の判例法には元々キーワードやトピックのフィルタリングオプションが付けられていないため、この調査結果は略式判決の主題の基礎についての理解を深めただけでなく、法的分類において従来のアプローチとAI主導のアプローチを組み合わせる可能性を示しています。
したがって、この文書は英国法の新しい一般的な分類法を提供します。
この研究の意義は、司法行政および計算法研究方法論の分野におけるさらなる研究および政策議論の基礎として役立ちます。

要約(オリジナル)

This paper addresses a critical gap in legal analytics by developing and applying a novel taxonomy for topic classification of summary judgment cases in the United Kingdom. Using a curated dataset of summary judgment cases, we use the Large Language Model Claude 3 Opus to explore functional topics and trends. We find that Claude 3 Opus correctly classified the topic with an accuracy of 87.13% and an F1 score of 0.87. The analysis reveals distinct patterns in the application of summary judgments across various legal domains. As case law in the United Kingdom is not originally labelled with keywords or a topic filtering option, the findings not only refine our understanding of the thematic underpinnings of summary judgments but also illustrate the potential of combining traditional and AI-driven approaches in legal classification. Therefore, this paper provides a new and general taxonomy for UK law. The implications of this work serve as a foundation for further research and policy discussions in the field of judicial administration and computational legal research methodologies.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google