パラメータから行動へ：LLMモデル融合サーベイ
From Parameters to Behaviors: A Survey of Model Fusion for Large Language Models
この論文をやさしく読む
ひとことで言うと
複数の言語モデルの能力を一つに取り込む「モデル融合」を、パラメータ、内部表現、振る舞いの3段階に整理した総説です。分かれていた研究領域を統一的に見渡すことを狙います。
何に役立つ？
既存モデルを再利用する方法を調べる際に、何を統合する方式なのかを比較する地図になります。手法だけでなく評価指標、ベンチマーク、用途もまとめています。
この研究の面白いところ
重みの合成だけに対象を限定せず、表現や行動レベルの統合も同じ定義の下に置きます。融合の設計の違いを横断的に把握できる分類になっています。
どこまで分かった？
要旨は文献整理と今後の課題の提示を説明しており、新しい融合手法の性能実験を報告していません。モデル数の記述は2026年6月時点の状況として挙げられています。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
モデル融合は、複数の元モデルが持つ能力を1つの対象モデルへ統合する。2026年6月時点で、Hugging Faceには200万を超えるモデルが登録されている。この増え続ける集合は、モデルの再利用と能力統合の豊かな基盤になる。しかし既存のサーベイはこの領域の一部だけを扱うことが多く、統一的な定義や体系的な分類法を提示していない。本サーベイではモデル融合を定義し、既存研究をパラメータレベル、表現レベル、行動レベルの3段階に整理する。さらに、関連する指標、ベンチマーク、応用を概観し、現在の課題をまとめ、今後の方向性を示す。目的は、この分野の明確な地図を作り、モデル融合の今後の研究を支援することである。モデル融合に関する論文の包括的な一覧は https://github.com/Baicaihaochi/Awesome-Model-Fusion-Survey で公開されている。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-17（UTC）
- 最新改訂
- 2026-09-17 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-17 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Model fusion integrates the capabilities from source models into a single target model. As of June 2026, Hugging Face hosts more than 2M models. This growing pool provides a rich base for model reuse and capability integration. Yet existing surveys often cover only separate parts of this space, and they do not provide a unified definition or a systematic taxonomy. This survey defines model fusion and organizes prior work into three levels: parameter-level, representation-level, and behavior-level fusion. We also review related metrics, benchmarks, and applications, summarize current challenges, and identify future directions. Our goal is to provide a clear map of this area and support future work on model fusion. A comprehensive list of papers about model fusion is available at https://github.com/Baicaihaochi/Awesome-Model-Fusion-Survey.
著者のコメント
25 pages, 4 figures. Accepted to Findings of the Association for Computational Linguistics: EMNLP 2026
arXiv ID: 2609.19553 ／ 要約の誤りについて