予測できるスパイクを抑えて神経網の通信量を減らす
Predictive Suppression Layers for Communication-Efficient Spiking Neural Networks
この論文をやさしく読む
ひとことで言うと
次の層に送る情報を予測し、予測から外れたスパイクを中心に伝えて通信を減らす方法です。
何に役立つ？
層の間や装置の間の通信が負担になるSNNシステムで、情報の転送量を抑える設計に役立ちます。
この研究の面白いところ
通信を減らす代わりに局所計算を行い、その二つを別々の指標で評価しています。二つのデータセットでは精度も向上しました。
どこまで分かった？
3分の1になったのは通信される活動量です。局所処理が加わるため、全体の電力や実行時間も同じ比率で減るとは要旨から言えません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
順伝播型スパイキングニューラルネットワーク（SNN）は通常、生成されたすべてのスパイクを、情報理論的に冗長かどうかに関係なく無差別に伝える。この選別の欠如は層間通信に大きな冗長性を生み、多数コアのニューロモルフィックハードウェアや、特徴を無線送信する通信支配的なIoTなどで、高コストの負荷となる。この課題に対し、SNN向けの最小限の予測符号化の枠組みを導入し、局所的な処理を増やす代わりにネットワーク通信路を軽くする。 予測ブロックを共有する二つの層の変種を提案する。一つは符号付きのスパイク残差を送る誤差ユニット、もう一つは残差の大きさを使って動的に通過を制御し、予測できない「意外な」活動だけを転送する予測抑制である。局所処理と層間通信を切り分ける診断指標を用いてN-MNISTとSpiking Heidelberg Digits（SHD）で評価したところ、新しい予測符号化層は大幅な通信削減を達成した。数値結果は、両データセットで課題精度を高めながら、通信される活動を3分の1に減らせることを示す。精度向上は特に注目すべき知見であり、予測符号化層が通信負荷を減らすだけでなく、より高い表現力を持つ出力特徴ベクトルを生成することも示唆している。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-18（UTC）
- 最新改訂
- 2026-09-18 · v1
- 査読・掲載
- 掲載先の記載あり
著者による掲載先の記載：Proceedings of the 2026 International Conference on Embedded Wireless Systems and Networks (EWSN '26), pp. 309-314, 2026。出版社での独立確認は未実施です。
更新履歴
- v1 2026-09-18 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Feedforward Spiking Neural Networks (SNNs) typically propagate every generated spike indiscriminately, disregarding whether the information is redundant from an information-theoretic perspective. This lack of selectivity induces high redundancy in inter-layer communication, creating an expensive overhead, e.g., in scenarios involving many-core neuromorphic hardware or communication-dominated Internet-of-Things (IoT) where features are transmitted wirelessly. To address this challenge, we trade localized processing for leaner network channels by introducing a minimal predictive coding framework for SNNs. We propose two layer variants sharing a predictor block: error units, which transmit signed spiking residuals, and predictive suppression, which uses residual magnitude to dynamically gate and forward only unpredictable, "surprising" activity. Evaluated on the N-MNIST and Spiking Heidelberg Digits (SHD) datasets using diagnostic metrics that decouple local processing from cross-layer communication, our new predictive coding layers achieve significant communication savings. Numerical results reveal a three-fold reduction in communicated activity, while increasing the task accuracy for both datasets. The latter finding is notable, and suggests that predictive coding layers not only minimize communication overhead, but also produce output feature vectors with a higher representation power.
著者のコメント
6 pages, 5 figures. Accepted at the 1st Neuromorphic Physical Layer Signal Processing for Wireless Systems Workshop (NeuroPHY 2026), co-located with EWSN 2026
arXiv ID: 2609.21583 ／ 要約の誤りについて