双曲空間の関係を保つマルチモーダル継続学習
Hyperbolic Multimodal Continual Learning: A Closest-Admissible Solution
この論文をやさしく読む
ひとことで言うと
画像や言語などを順番に学ぶ際、双曲空間に記録したモダリティ間の関係が崩れにくい更新方法を提案します。
何に役立つ？
双曲空間を使うマルチモーダルモデルの継続学習で、以前に学んだ意味関係や検索性能を保つ方法として役立つと考えられます。
この研究の面白いところ
各モダリティを共通の双曲等長変換に制限する理論から更新の補正を導き、3種類のモデルで表現のずれを81.2～95.5%減らしたと報告しています。
どこまで分かった？
評価は要旨に記載の16課題の分類・検索の流れ、モダリティを拡張した流れ、ImageNetとWordNetによる分析です。別の課題や構造での性能は要旨からは分かりません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
既存の継続学習法は、パラメータ、再利用する訓練例、ユークリッド空間の特徴部分空間などを保護する。これらを双曲空間のマルチモーダルモデルに適用しても、各モダリティ内の類似性、モダリティ間の対応、意味の階層を同時に表すローレンツ幾何を明示的には保存しない。そのため、課題を順に学習して得点を維持しても、以前に学んだ関係が歪む場合がある。本研究は、この問題に対して双曲マルチモーダル継続学習（HMCL）を提案する。 著者らは、以前のマルチモーダルな幾何を保つには、すべてのモダリティを共通の双曲等長変換一つに制限する必要があり、その結果、許容される一次のパラメータ変化の集合が生じることを示す。候補となる各モダリティの更新に最も合う共通の回転を残す「最も近い許容解」（CA）の同時補正を定式化し、その回転をゼロに固定する最小回転（MR）を特別な場合として扱う。どちらもAdamWによって実際に生じる移動を補正し、課題への固定によって課題内での変化の蓄積を抑えながら学習の自由度を保つ。 3種類の双曲モデルを使った16課題の分類・検索の一連の評価では、HMCLは逐次追加学習および4種類の継続学習の比較手法より、最終性能と過去課題への転移が改善した。HMCL-CAはすべてのモデルで総合得点が最高だった。モダリティを拡張した一連の評価でも検索性能の改善を確認した。表現の分析では、半径方向、角度、モダリティ間、対応する組の距離についてのずれが81.2～95.5%少なく、ImageNetとWordNetによる結果では、意味上の祖先関係と半径方向の階層もより良く保たれた。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-24（UTC）
- 最新改訂
- 2026-09-24 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-24 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Existing continual-learning methods protect parameters, replayed examples, or Euclidean feature subspaces. When applied to hyperbolic multimodal models, they do not explicitly preserve the Lorentz geometry that jointly encodes within-modality similarity, cross-modal correspondence, and semantic hierarchy; sequential updates can therefore retain task scores while still distorting previously learned relations. We address this gap with Hyperbolic Multimodal Continual Learning (HMCL). We show that preserving the old multimodal geometry amounts to restricting all modalities to one shared hyperbolic isometry, which induces a family of admissible first-order parameter changes. We formulate a joint closest-admissible (CA) correction that retains the shared rotation best matching the candidate modal updates; its minimal-rotation (MR) special case fixes this rotation to zero. Both variants correct the displacement realized by AdamW, and task anchoring bounds within-task accumulation while preserving learning freedom. Across a unified 16-task classification-retrieval stream with three hyperbolic backbones, HMCL improves final performance and backward transfer over sequential fine-tuning and four continual-learning baselines; HMCL-CA gives the highest Overall score on every backbone. A modality-extended stream confirms the retrieval gains. Representation analyses find 81.2 to 95.5 percent less radial, angular, cross-modal, and paired-distance drift; ImageNet-WordNet results show better semantic ancestry and radial hierarchy.
著者のコメント
49 pages, 10 figures, 11 tables
arXiv ID: 2609.29329 ／ 要約の誤りについて