「cs.DC」カテゴリーアーカイブ

TorchTitan: One-stop PyTorch native solution for production ready LLM pre-training

投稿日: 2024年11月5日 作成者: jarxiv

要約 大規模言語モデル (LLM) の開発は、最先端の自然言語処理アプリケーショ … 続きを読む →

カテゴリー: cs.AI, cs.CL, cs.DC, cs.LG | TorchTitan: One-stop PyTorch native solution for production ready LLM pre-training はコメントを受け付けていません

Shortcut-connected Expert Parallelism for Accelerating Mixture-of-Experts

投稿日: 2024年11月4日 作成者: jarxiv

要約 エキスパート並列は、スパースにゲートされたMoE（Mixture-of-E … 続きを読む →

カテゴリー: cs.CL, cs.DC, cs.LG | Shortcut-connected Expert Parallelism for Accelerating Mixture-of-Experts はコメントを受け付けていません

Efficient Federated Learning against Heterogeneous and Non-stationary Client Unavailability

投稿日: 2024年11月1日 作成者: jarxiv

要約 断続的なクライアント可用性への対処は、フェデレーテッド ラーニング アルゴ … 続きを読む →

カテゴリー: cs.DC, cs.LG, math.OC | Efficient Federated Learning against Heterogeneous and Non-stationary Client Unavailability はコメントを受け付けていません

Novel Architecture for Distributed Travel Data Integration and Service Provision Using Microservices

投稿日: 2024年11月1日 作成者: jarxiv

要約 このペーパーでは、航空予約システムの柔軟性とパフォーマンスを強化することを … 続きを読む →

カテゴリー: cs.CE, cs.CL, cs.DC | Novel Architecture for Distributed Travel Data Integration and Service Provision Using Microservices はコメントを受け付けていません

Impacts of floating-point non-associativity on reproducibility for HPC and deep learning applications

投稿日: 2024年10月31日 作成者: jarxiv

要約 浮動小数点の非結合性によって引き起こされる並列プログラムの実行ごとの変動は … 続きを読む →

カテゴリー: cs.DC, cs.LG | Impacts of floating-point non-associativity on reproducibility for HPC and deep learning applications はコメントを受け付けていません

ProMoE: Fast MoE-based LLM Serving using Proactive Caching

投稿日: 2024年10月30日 作成者: jarxiv

要約 大規模な言語モデルの有望なアプリケーションは、多くの場合、エッジ デバイス … 続きを読む →

カテゴリー: cs.AI, cs.DC | ProMoE: Fast MoE-based LLM Serving using Proactive Caching はコメントを受け付けていません

PyGim: An Efficient Graph Neural Network Library for Real Processing-In-Memory Architectures

投稿日: 2024年10月29日 作成者: jarxiv

要約 グラフ ニューラル ネットワーク (GNN) は、グラフ構造データを分析す … 続きを読む →

カテゴリー: cs.AR, cs.DC, cs.LG, cs.PF | PyGim: An Efficient Graph Neural Network Library for Real Processing-In-Memory Architectures はコメントを受け付けていません

DistRL: An Asynchronous Distributed Reinforcement Learning Framework for On-Device Control Agents

投稿日: 2024年10月28日 作成者: jarxiv

要約 オンデバイス制御エージェント (特にモバイル デバイス上) は、モバイル … 続きを読む →

カテゴリー: cs.AI, cs.DC, cs.LG, cs.SY, eess.SY | DistRL: An Asynchronous Distributed Reinforcement Learning Framework for On-Device Control Agents はコメントを受け付けていません

Compress then Serve: Serving Thousands of LoRA Adapters with Little Overhead

投稿日: 2024年10月28日 作成者: jarxiv

要約 低ランク適応 (LoRA) を使用して大規模言語モデル (LLM) を微調 … 続きを読む →

カテゴリー: cs.AI, cs.CL, cs.DC, cs.LG | Compress then Serve: Serving Thousands of LoRA Adapters with Little Overhead はコメントを受け付けていません

Optimizing Edge Offloading Decisions for Object Detection

投稿日: 2024年10月25日 作成者: jarxiv

要約 機械学習とハードウェアの最近の進歩により、賞賛に値する精度でリアルタイムの … 続きを読む →

カテゴリー: cs.DC, cs.LG, cs.NI | Optimizing Edge Offloading Decisions for Object Detection はコメントを受け付けていません