識別不能な余剰パラメータがあっても回帰モデルの次数を選ぶ
Consistent Order Selection under Non-Identifiability and Dependence
この論文をやさしく読む
ひとことで言うと
余計なパラメータを識別しにくい回帰モデルでも、真のモデルの大きさを選ぶ条件を示す。
何に役立つ？
候補モデルを標本サイズに合わせて増やす非線形回帰のモデル選択に役立つ。
この研究の面白いところ
識別可能性の条件を緩めながら、二種類のモデルでBIC型の次数選択の一致性を示す。
どこまで分かった？
候補モデル数の増加は標本サイズの対数より遅い必要があり、指定の誤差条件なども前提となる。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
入れ子になった回帰モデルの列から次数、すなわち次元を選ぶ、罰則付き最小二乗法の一致性について十分条件を与える。誤差には依存性があり、マルチンゲール差となる場合を許す。主な貢献は、古典的な識別可能性の要件を緩めることである。真の次数より大きいモデルを表すパラメータが識別できなくても、増えた余剰方向が真のパラメータの近傍で真のモデルへ線形近似できればよい。 この緩和により、候補モデルの数を標本サイズとともに増やせ、通常必要とされる固定の上限を設けなくてよい。得られた一般的な条件を、実務でも使われる二種類の非線形回帰モデル、複数の状態を持つ滑らかな遷移回帰と、一般化線形モデルを専門家モデルとする混合専門家モデルについて検証する。BIC型の罰則を使うと、候補モデル数が標本サイズの対数より遅く増える限り、いずれのモデルでも選んだ次数は一致する。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-19（UTC）
- 最新改訂
- 2026-09-19 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-19 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
We provide sufficient conditions for the consistency of penalized least squares procedures that select the order (dimension) of a regression model from a sequence of nested classes, allowing for dependent, martingale-difference errors. The main contribution is to relax the classical identifiability requirement: parameters indexing classes larger than the true order need not be identified, provided the additional, excess directions admit a linear approximation to the truth in a neighbourhood of the true parameter. This relaxation lets the number of candidate models grow with the sample size, removing the usual need for a fixed upper bound. We verify the resulting high-level conditions for two classes of nonlinear regression models used in applied work: multiple-regime smooth transition regression and mixture-of-experts models with generic generalized linear model experts. Under a BIC-type penalty, the resulting order selection rule is consistent in either model class whenever the number of candidate models grows slower than the logarithm of the sample size.
arXiv ID: 2609.23220 ／ 要約の誤りについて