MMOE: Modernizing Diffusion Transformers with Efficient Expert Design
arXiv cs.LG ・ 2026-07-27
AI による要約
Diffusion Transformer（DiT）に軽量なMixture-of-Experts（MoE）構造を導入する新アーキテクチャ「ModernMOE (MMOE)」が提案されました。大言語モデルで培われた効率的なスケーリング手法を画像生成モデルに応用することで、品質を維持したまま訓練・推論の計算コストを大幅に削減します。
この要約は当サイトの AI が生成したものです。正確な内容は 元記事（arXiv cs.LG）をご確認ください。