音声認識が正解ラベルのない音声から新語を学ぶ方法
Learning New Words from Unlabeled Test Data in Automatic Speech Recognition
この論文をやさしく読む
ひとことで言うと
正解ラベルのないテスト音声から新しい語の綴りと使われ方を学び、音声認識の語彙を広げる方法です。
何に役立つ？
新語が繰り返し出る音声認識で、既存の認識器を適応させる方法の検討に役立ちます。
この研究の面白いところ
固定した音響モデルと言語モデルの情報を組み合わせ、誤りの減少を実験で示すとともに、KLDによる理論的解釈も与えています。
どこまで分かった？
報告された誤り率の改善は、繰り返し出現する未知語について、指定した二つのデータセットと再スコアリング方式を比較した結果です。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
新しい語は毎日作られる。人は新語を一度はっきり聞き、文脈から用法を推測して覚えられる。本論文は、自動音声認識（ASR）にも、テスト時に正解ラベルのないテストデータから新語の文脈表現と綴りを学ぶ同様の能力を与える方法を提案する。パラメータを固定したCTC音響モデルが綴りの候補を示し、固定した言語モデルが語彙にない語（OOV）の検出に文脈上の証拠を与える。適応モジュールは、CTCが生成した候補上の分布を使って語彙トークンの表現を学習し、語彙を拡張する。各トークンの綴りモデルは、カルバック・ライブラー・ダイバージェンス（KLD）を最小にするよう最適化する。 CTCで重み付けした言語モデルの対数尤度比が、未知の正しいASRと教師なし学習したASRの間のKLDとして解釈できることを示す。また、Pinskerの不等式を使うと、KLDの平方根を、未知語の真の綴りと推定された綴りの間の全変動距離の上界として解釈できる。実験では、繰り返し現れるOOV語について、対応する再スコアリング方式に比べ、LibriSpeechで最大14.97％、構音障害者の音声を含むSpeech Accessibility Projectのデータで最大6.67％、OOVの文字誤り率が相対的に減少した。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-24（UTC）
- 最新改訂
- 2026-09-24 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-24 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
New words are invented every day. A human listener can learn a new word by hearing it clearly once and inferring its usage from sentence context. This paper proposes granting ASR a similar ability to learn the contextual representations and spellings of new words from unlabeled test data at test time. A frozen CTC acoustic model provides spellings, a frozen language model provides contextual evidence for out-of-vocabulary (OOV) word detection, and an adaptation module expands the vocabulary by learning the lexical token representations with distributions over CTC-generated candidates. The spelling model of each token is optimized by minimizing a Kullback-Leibler divergence (KLD) objective. We demonstrate that the CTC-weighted language model log likelihood ratio can be interpreted as the KLD between the unknown correct ASR and the unsupervised learned ASR, and that, using a Pinsker bound, the square root of KLD can be interpreted as an upper bound on the total variation distance between the true and estimated spelling of the unknown word. Experiments show relative OOV character-error-rate reductions of up to 14.97% on LibriSpeech and 6.67% on dysarthric Speech Accessibility Project data for recurring OOV words, relative to the corresponding rescoring system.
著者のコメント
Submitted to ICASSP 2027
arXiv ID: 2609.28877 ／ 要約の誤りについて