「cs.DC」カテゴリーアーカイブ

Re-evaluating the Memory-balanced Pipeline Parallelism: BPipe

投稿日: 2024年1月5日 作成者: jarxiv

要約 パイプライン並列処理は、大規模なTransformerモデルの学習に不可欠 … 続きを読む →

カテゴリー: cs.CL, cs.DC, cs.LG | Re-evaluating the Memory-balanced Pipeline Parallelism: BPipe はコメントを受け付けていません

Ravnest: Decentralized Asynchronous Training on Heterogeneous Devices

投稿日: 2024年1月4日 作成者: jarxiv

要約 最新のディープラーニング・モデルは、巨大化し複雑化しているが、膨大なデータ … 続きを読む →

カテゴリー: cs.AI, cs.DC, cs.LG | Ravnest: Decentralized Asynchronous Training on Heterogeneous Devices はコメントを受け付けていません

Edge Computing based Human-Robot Cognitive Fusion: A Medical Case Study in the Autism Spectrum Disorder Therapy

投稿日: 2024年1月3日 作成者: jarxiv

要約 近年、エッジ コンピューティングは、クラウド コンピューティングの設備やサ … 続きを読む →

カテゴリー: cs.AI, cs.DC, cs.LG, cs.MA, cs.RO | Edge Computing based Human-Robot Cognitive Fusion: A Medical Case Study in the Autism Spectrum Disorder Therapy はコメントを受け付けていません

tf.data service: A Case for Disaggregating ML Input Data Processing

投稿日: 2024年1月3日 作成者: jarxiv

要約 機械学習 (ML) 計算は通常、GPU や TPU などの高価な専用ハード … 続きを読む →

カテゴリー: cs.DC, cs.LG | tf.data service: A Case for Disaggregating ML Input Data Processing はコメントを受け付けていません

Asynchronous Evolution of Deep Neural Network Architectures

投稿日: 2024年1月2日 作成者: jarxiv

要約 多くの進化的アルゴリズム (EA) は、候補の並列評価を利用しています。 … 続きを読む →

カテゴリー: cs.DC, cs.LG, cs.NE | Asynchronous Evolution of Deep Neural Network Architectures はコメントを受け付けていません

When Foundation Model Meets Federated Learning: Motivations, Challenges, and Future Directions

投稿日: 2024年1月2日 作成者: jarxiv

要約 Foundation Model (FM) と Federated Lea … 続きを読む →

カテゴリー: cs.AI, cs.DC, cs.LG | When Foundation Model Meets Federated Learning: Motivations, Challenges, and Future Directions はコメントを受け付けていません

Byzantines can also Learn from History: Fall of Centered Clipping in Federated Learning

投稿日: 2024年1月2日 作成者: jarxiv

要約 フェデレーテッド ラーニング (FL) フレームワークは、幅広い共同学習タ … 続きを読む →

カテゴリー: cs.AI, cs.CR, cs.DC, cs.LG, stat.ML | Byzantines can also Learn from History: Fall of Centered Clipping in Federated Learning はコメントを受け付けていません

Securing NextG Systems against Poisoning Attacks on Federated Learning: A Game-Theoretic Solution

投稿日: 2023年12月29日 作成者: jarxiv

要約 この論文では、フェデレーテッド ラーニング (FL) システムにおけるポイ … 続きを読む →

カテゴリー: cs.AI, cs.CR, cs.DC, cs.LG, cs.NI | Securing NextG Systems against Poisoning Attacks on Federated Learning: A Game-Theoretic Solution はコメントを受け付けていません

Fast Inference of Mixture-of-Experts Language Models with Offloading

投稿日: 2023年12月29日 作成者: jarxiv

要約 大規模言語モデル (LLM) の普及に伴い、多くの深層学習実践者は、これら … 続きを読む →

カテゴリー: cs.AI, cs.DC, cs.LG | Fast Inference of Mixture-of-Experts Language Models with Offloading はコメントを受け付けていません

Fed-CO2: Cooperation of Online and Offline Models for Severe Data Heterogeneity in Federated Learning

投稿日: 2023年12月27日 作成者: jarxiv

要約 Federated Learning (FL) は、複数のクライアントがプ … 続きを読む →

カテゴリー: cs.AI, cs.DC, cs.LG | Fed-CO2: Cooperation of Online and Offline Models for Severe Data Heterogeneity in Federated Learning はコメントを受け付けていません