A Survey of Reasoning with Foundation Models: Concepts, Methodologies, and Outlook

要約

複雑な問題を解決するために重要な能力である推論は、交渉、医療診断、犯罪捜査など、現実世界のさまざまな場面で極めて重要な役割を果たします。
これは、汎用人工知能 (AGI) の分野における基本的な方法論として機能します。
基礎モデルの開発が進むにつれて、推論タスクにおける基礎モデルの能力を探求することへの関心が高まっています。
このペーパーでは、推論に提案または適用可能な独創的な基礎モデルを紹介し、さまざまな推論タスク、手法、ベンチマークの最新の進歩に焦点を当てます。
次に、基礎モデル内での推論能力の出現の背後にある潜在的な将来の方向性を掘り下げます。
また、推論との関連で、マルチモーダル学習、自律エージェント、スーパー アライメントの関連性についても説明します。
これらの将来の研究の方向性について議論することで、研究者がこの分野の探求に刺激を与え、基礎モデルによる推論のさらなる進歩を刺激し、AGI の発展に貢献したいと考えています。

要約(オリジナル)

Reasoning, a crucial ability for complex problem-solving, plays a pivotal role in various real-world settings such as negotiation, medical diagnosis, and criminal investigation. It serves as a fundamental methodology in the field of Artificial General Intelligence (AGI). With the ongoing development of foundation models, there is a growing interest in exploring their abilities in reasoning tasks. In this paper, we introduce seminal foundation models proposed or adaptable for reasoning, highlighting the latest advancements in various reasoning tasks, methods, and benchmarks. We then delve into the potential future directions behind the emergence of reasoning abilities within foundation models. We also discuss the relevance of multimodal learning, autonomous agents, and super alignment in the context of reasoning. By discussing these future research directions, we hope to inspire researchers in their exploration of this field, stimulate further advancements in reasoning with foundation models, and contribute to the development of AGI.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google