「I.2.7」カテゴリーアーカイブ

Arithmetic Without Algorithms: Language Models Solve Math With a Bag of Heuristics

投稿日: 2024年10月29日 作成者: jarxiv

要約 大規模言語モデル (LLM) は、堅牢な一般化可能なアルゴリズムを学習する … 続きを読む →

カテゴリー: 68T5, cs.CL, I.2.7 | Arithmetic Without Algorithms: Language Models Solve Math With a Bag of Heuristics はコメントを受け付けていません

Large-scale cloze evaluation reveals that token prediction tasks are neither lexically nor semantically aligned

投稿日: 2024年10月29日 作成者: jarxiv

要約 この研究では、いくつかの言語モデルにおける次のトークン予測レベルでの生成動 … 続きを読む →

カテゴリー: cs.AI, cs.CL, I.2.7 | Large-scale cloze evaluation reveals that token prediction tasks are neither lexically nor semantically aligned はコメントを受け付けていません

Parsing Akkadian Verbs with Prolog

投稿日: 2024年10月17日 作成者: jarxiv

要約 この論文では、Prolog で実装された、接尾辞の追加が可能な、アッカド語 … 続きを読む →

カテゴリー: cs.CL, I.2.7 | Parsing Akkadian Verbs with Prolog はコメントを受け付けていません

Tokenization and Morphology in Multilingual Language Models: A~Comparative Analysis of mT5 and ByT5

投稿日: 2024年10月16日 作成者: jarxiv

要約 形態論はトークン化に直接的な課題をもたらすため、多言語言語モデリングにとっ … 続きを読む →

カテゴリー: cs.CL, I.2.7 | Tokenization and Morphology in Multilingual Language Models: A~Comparative Analysis of mT5 and ByT5 はコメントを受け付けていません

Everyday Speech in the Indian Subcontinent

投稿日: 2024年10月15日 作成者: jarxiv

要約 インドには 1,369 の言語があり、そのうち 22 が公用語です。 これ … 続きを読む →

カテゴリー: cs.CL, cs.SD, eess.AS, I.2.7 | Everyday Speech in the Indian Subcontinent はコメントを受け付けていません

Uplifting Lower-Income Data: Strategies for Socioeconomic Perspective Shifts in Large Multi-modal Models

投稿日: 2024年10月15日 作成者: jarxiv

要約 最近の研究では、トレーニング データにおける文化と社会経済的グループの不平 … 続きを読む →

カテゴリー: cs.AI, cs.CL, cs.CV, cs.CY, I.2.7 | Uplifting Lower-Income Data: Strategies for Socioeconomic Perspective Shifts in Large Multi-modal Models はコメントを受け付けていません

Data Processing for the OpenGPT-X Model Family

投稿日: 2024年10月14日 作成者: jarxiv

要約 このペーパーでは、オープンで高性能な多言語大規模言語モデル (LLM) の … 続きを読む →

カテゴリー: cs.CL, I.2.7 | Data Processing for the OpenGPT-X Model Family はコメントを受け付けていません

Token Erasure as a Footprint of Implicit Vocabulary Items in LLMs

投稿日: 2024年10月14日 作成者: jarxiv

要約 LLM はテキストを単語に大まかに対応するトークンのシーケンスとして処理し … 続きを読む →

カテゴリー: cs.CL, cs.LG, I.2.7 | Token Erasure as a Footprint of Implicit Vocabulary Items in LLMs はコメントを受け付けていません

Vocabulary Transfer for Medical Texts

投稿日: 2024年10月10日 作成者: jarxiv

要約 特定の NLP サブドメイン内での作業には、主に永続的なデータ不足が原因で … 続きを読む →

カテゴリー: cs.CL, I.2.7 | Vocabulary Transfer for Medical Texts はコメントを受け付けていません

MeteoRA: Multiple-tasks Embedded LoRA for Large Language Models

投稿日: 2024年10月10日 作成者: jarxiv

要約 事前トレーニング + 微調整パラダイムは、さまざまなダウンストリーム アプ … 続きを読む →

カテゴリー: cs.AI, cs.CL, I.2.7 | MeteoRA: Multiple-tasks Embedded LoRA for Large Language Models はコメントを受け付けていません