arXiv論文メモ
新着一覧
cs.CL · 査読状況未確認

高速音声認識モデルIBM Granite 5.0 TurboCTCの設計

Design of the IBM Granite 5.0 TurboCTC ASR Model

Brian Kingsbury, George Saon, Masayuki Suzuki, Hong-Kwang J. Kuo, Takashi Fukuda, Samuel Thomas, Vishal Sunder, Avihu Dekel

この論文をやさしく読む

ひとことで言うと

英語の短い音声を高速に認識する4億7000万パラメータのモデルについて、構造と学習、推論の工夫を説明します。

何に役立つ?

音声認識の精度と処理速度を両立させるエンコーダー型モデルを設計する際の具体例になります。公開データのみで学習したと報告しています。

この研究の面白いところ

時間方向の段階的圧縮、チャンク単位の注意、中間予測の条件付けに加え、演算実装も最適化します。モデル構造だけでなく学習と実行の工夫を合わせています。

どこまで分かった?

競合最速の二倍という速度は英語短文のOpen ASR評価に関する報告です。多言語や長時間音声、別のハードウェアで同じ速度比が出るとは要旨からはいえません。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

速度と精度の優れたバランスを持つ、4億7000万パラメータのエンコーダのみからなるモデルGranite 5.0 Turbo CTCについて、その構造、学習方法、推論高速化を説明する。構造には、ストライド付きの深さ方向畳み込みを用いたConformerブロック内のピラミッド型時間サブサンプリング、ブロック対角型のチャンク単位の自己注意、および中間層の予測による条件づけを採用する。 学習上の特徴は、公開データだけの利用、Muon最適化器の新たな活用、均衡の取れたデータサンプリングである。推論の高速化では、1×1畳み込みを線形層で置き換え、Conformerブロックの注意計算を最適化する。これらを合わせることで、英語の短い音声を対象とするOpen ASRリーダーボードの速度・精度のパレート最前線に位置しながら、最速の競合モデルの2倍の速度を実現する。本モデルは制約の緩いライセンスで利用でき、https://huggingface.co/ibm-granite/granite-speech-5.0-470m-turboctc からダウンロードできる。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-17(UTC)
最新改訂
2026-09-17 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

We describe the architecture, training methodology and inference speedups of Granite 5.0 Turbo CTC, a 470 million parameter encoder-only model with an excellent speed-accuracy tradeoff. The architecture uses pyramidal temporal subsampling within Conformer blocks using strided depthwise convolutions, block-diagonal (chunk-wise) self-attention, and conditioning on intermediate predictions from the middle layer. Training highlights are the use of only publicly available data, the novel use of a Muon optimizer, and balanced data sampling. Inference speedups include replacing 1 x 1 convolutions with linear layers and optimizing the attention computation in the Conformer blocks. Collectively, these result in a model that is on the speed-accuracy Pareto frontier of the Open ASR leaderboard for English short-form ASR while being twice as fast as the fastest competitor. The model can be used under a permissive license and downloaded from https://huggingface.co/ibm-granite/granite-speech-5.0-470m-turboctc.

著者のコメント

5 pages, 2 figures, submitted to ICASSP 2027

arXiv ID: 2609.20104 / 要約の誤りについて