ニューラル学習で一度覚えた例外が一時的に失われる過程
The Dynamics of Quasiregular Neural Learning
この論文をやさしく読む
ひとことで言うと
ニューラルネットワークが例外をいったん覚えても、一般規則に引き寄せられて間違えるようになり、後で再び覚える現象を調べています。
何に役立つ？
学習途中の性能低下を理解し、少数の例外と多数派の規則がどう競合するかを分析する参考になります。
この研究の面白いところ
例外が少ないと、早い段階で覚えていても後退が強くなる点を、正解が分かっている回帰問題で示しています。
どこまで分かった？
制御した回帰課題での結果です。すべての規則で同じ現象が出るわけではなく、人の言語獲得の仕組みを直接実証したものでもありません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
多くの学習問題では、支配的な規則性と系統的な例外が組み合わさっている。言語獲得におけるU字型学習に着想を得て、規則的な解と例外的な解が明示的に分かっている、条件を制御した準規則的な回帰問題で、この相互作用を調べる。ニューラルネットワークは、例外を部分的に獲得した後に支配的な規則性へ後退し、最終的に例外を再び獲得することがある。この過剰規則化は、例外を早期に獲得していたにもかかわらず、例外がまれな場合に大幅に強くなる。ただし、調べたすべての規則性で同じように現れるわけではない。本結果は、ニューラル学習中の規則性と例外の間にある、単純な形の競合を切り分ける。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-22（UTC）
- 最新改訂
- 2026-09-22 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-22 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Many learning problems combine a dominant regularity with systematic exceptions. Motivated by U-shaped learning in language acquisition, we study this interaction in controlled quasiregular regression problems where regular and exceptional solutions are explicitly known. Neural networks can partially acquire exceptions, subsequently regress toward the dominant regularity, and finally recover. This overregularization becomes substantially stronger when exceptions are rare, despite their early acquisition, but does not emerge equally across all regularities considered. Our results isolate a simple form of competition between regularities and exceptions during neural learning.
arXiv ID: 2609.26018 ／ 要約の誤りについて