Sharpness-Aware Minimization and Muon: Robustness under the Spectral Norm

arXiv cs.LG ・ 2026-07-28

AI による要約

モデルの汎化性能を高める最適化手法SAMにスペクトルノルムに基づく行列摂動を導入し、最適化手法Muonと組み合わせた研究。隠れ層の行列構造を考慮したパラメータ更新を行うことで、ViTやResNetにおいて優れた堅牢性と汎化性能が得られることを実証した。

この要約は当サイトの AI が生成したものです。正確な内容は元記事（arXiv cs.LG）をご確認ください。