トーラス構造で小型画像モデルの表現を制御
Ananke: Contractive Torus Attractor Networks
この論文をやさしく読む
ひとことで言うと
画像の特徴を円の組合せであるトーラス構造に沿って動かし、小さなモデルでも表現を安定させる方法です。
何に役立つ?
パラメータ数を抑えた画像分類モデルを設計する際に参考になります。内視鏡画像の結果はデータセット上の分類評価で、臨床診断の有効性を確認したものではありません。
この研究の面白いところ
特徴を面に沿って動かす流れと、面からのずれを縮める流れを分けています。条件付きで数値積分を不要にする閉形式の更新を導く点も特徴です。
どこまで分かった?
厳密な指数減衰は、パラメータを固定した特定のポテンシャル族での結果です。ほぼ2桁という比較はモデル規模に関するもので、正解率が100倍になったという意味ではありません。CIFAR-100の値は拡大した派生モデルのものです。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
構造化された積トーラスの事前構造に潜在表現を沿わせる表現学習の枠組みAnankeと、その主要な画像用基幹モデルである収縮トーラスアトラクタネットワーク(CTAN)を導入する。高次元潜在空間を2次元位相平面の直交直和(⊕_(k=1)^K ℝ²)に分解することで、Anankeは分離された二つの連続流によって特徴更新を調整する。反対称なハミルトン輸送は特徴をエネルギー等位面に沿って接線方向に動かし、意味的な位相不変量を保つ。一方、符号付きの勾配散逸は横方向の摂動を法線方向に収縮させ、目標の不変多様体へ近づける。 パラメータを固定した円形ポテンシャル族では、対数半径のフィードバックから厳密対数シンプレクティック流(ELSF)が得られる。これは、対数半径誤差が厳密に指数減衰する解析的な閉形式の写像であり、数値積分を使わず1回の順伝播で評価できる。等位面からのずれと対数半径誤差について局所的な入力状態境界を確立し、有界な摂動の下で理想的な積トーラスの法線双曲性と持続性を特徴付ける。さらに、Lie–Trotter作用素分割によって構造を定式化し、空間的なチャネル別拡散と局所的な多様体収縮を統合する。厳密な三角関数流と、ハードウェアで扱いやすいシンプレクティックな二重せん断型の両方を解析する。 自然画像ベンチマークCIFAR-100と臨床的に難しい内視鏡データセットKvasir-v2で、CTANは高いパラメータ効率を示す。わずか27万パラメータの超小型階層モデルがKvasir-v2で90.52%の正解率を達成し、2500万超のパラメータを持つ比較モデルResNet-50、DenseNet-161に対して、モデル規模でほぼ2桁の優位性を示す。一方、規模を拡大した派生モデルはCIFAR-100で80.32%のtop-1正解率を達成する。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-21(UTC)
- 最新改訂
- 2026-09-21 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-21 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
We introduce Ananke, a representation-learning framework that scaffolds latent representations onto a structured product-torus prior, and its flagship visual backbone realization, Contractive Torus Attractor Networks (CTAN). By factorizing high-dimensional latent spaces into an orthogonal direct sum of two-dimensional phase planes ($\bigoplus_{k=1}^K \R^2$), Ananke coordinates feature updates via a decoupled dual-phase continuous flow: skew-symmetric Hamiltonian transport moves features tangentially along energy level sets to preserve semantic phase invariants, while signed gradient dissipation contracts transverse perturbations normally toward target invariant manifolds. For circular potential families with frozen parameters, logarithmic radial feedback yields the Exact Log-Symplectic Flow (ELSF), an analytical closed-form mapping with exact exponential decay of log-radius error that evaluates in a single forward pass without numerical integration. We establish local input-to-state bounds for level-set deviations and log-radius errors, and characterize the normal hyperbolicity and persistence of the ideal product torus under bounded perturbations. We further formulate the architecture through Lie--Trotter operator splitting, unifying spatial depthwise diffusion with local manifold contraction, and analyze both exact trigonometric flows and hardware-friendly symplectic dual-shear variants. Across natural image benchmarks (CIFAR-100) and clinically challenging endoscopy datasets (Kvasir-v2), CTAN demonstrates exceptional parameter efficiency: an ultra-compact hierarchical model with merely 0.27M parameters achieves 90.52\% accuracy on Kvasir-v2, outperforming 25M+ baselines (ResNet-50, DenseNet-161) by nearly two orders of magnitude in capacity, while scaled variants attain 80.32\% top-1 accuracy on CIFAR-100.
著者のコメント
17 pages
arXiv ID: 2609.24737 / 要約の誤りについて