有限温度でニューラルネットワークが記憶できる上限
Optimal storage capacity of neural networks at finite temperatures
アブストラクトの日本語訳
ニューラルネットワークの最適記憶容量に関するGardnerの解析を拡張し、有限温度の効果を調べる。結合を強く希釈したネットワークについて、相互作用空間の典型的な体積を、記憶比α、温度T、許容パラメーターmの関数として計算し、そこから最適記憶容量α_cをTとmの関数として求める。 ゼロ温度ではmによらずα_c=2となる一方、有限温度では一般に許容度とともにα_cが増加することが分かる。与えられたαとTに対して最良の性能を得る方法を示し、低温では高品質の性能から低品質の性能への一次転移があることを明らかにする。m=1の近くで有効な、記憶を想起するための近似的な判定基準についても論じる。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 1993-06-15（UTC）
- 最新改訂
- 1993-06-15 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 1993-06-15 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Gardner's analysis of the optimal storage capacity of neural networks is extended to study finite-temperature effects. The typical volume of the space of interactions is calculated for strongly-diluted networks as a function of the storage ratio $\alpha$, temperature $T$, and the tolerance parameter $m$, from which the optimal storage capacity $\alpha_c$ is obtained as a function of $T$ and $m$. At zero temperature it is found that $\alpha_c = 2$ regardless of $m$ while $\alpha_c$ in general increases with the tolerance at finite temperatures. We show how the best performance for given $\alpha$ and $T$ is obtained, which reveals a first-order transition from high-quality performance to low-quality one at low temperatures. An approximate criterion for recalling, which is valid near $m=1$, is also discussed.
著者のコメント
22 pages in LaTex, 4 figures upon request, SNUTP-93-26
arXiv ID: cond-mat/9306032 ／ 要約の誤りについて