サンプリング周波数をまたいで使える音声強調
Configurable-Bandwidth Time-Frequency Modeling for Efficient Full-Band Speech Enhancement Across Sampling Rates
この論文をやさしく読む
ひとことで言うと
音声の入出力は全帯域のまま、深い解析を行う周波数帯だけ調整できる雑音除去モデル。
何に役立つ?
複数のサンプリング周波数を扱いながら、計算費用と音質を使う場面に合わせて調整する設計に役立つ。
この研究の面白いところ
16 kHzと48 kHzで学習した同一モデルが、未学習の周波数を含む評価条件で専用モデルを上回った。
どこまで分かった?
性能はVoiceBank+DEMANDでの評価結果。実環境のあらゆる雑音や装置での性能は要旨に示されていない。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
音声強調システムは固定のサンプリング周波数向けに開発されることが多い一方、時間周波数モデルは周波数ビンが増えるほど計算費用が高くなる。著者らは、深い解析を行う帯域を全帯域の入出力から切り離す、サンプリング周波数に依存しないモデルTF-Refinerを提案する。深い符号器は設定可能なしきい値より低い帯域を処理し、浅い復号器は符号化した特徴と入力に応じた高帯域の問い合わせ表現を組み合わせて、元の雑音を含む短時間Fourier変換に適用する局所的な複素フィルターを予測する。16 kHzと48 kHzで学習した一組のパラメーターを、複数のサンプリング周波数で評価した。VoiceBank+DEMANDでは、共通モデルは、学習時に見ていない周波数を含む評価した各周波数で、周波数専用モデルをPESQ、STOI、対数スペクトル距離の指標で上回った。しきい値をランダムにして学習することで、再学習や出力帯域の変更をせずに、推論時に計算費用と品質の兼ね合いを選べる。結果は、複数のサンプリング周波数で全帯域の音声を強調する際に、解析帯域を設定可能にすることが実用的な設計であると示す。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-24(UTC)
- 最新改訂
- 2026-09-24 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-24 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Speech enhancement systems are often developed for a fixed sampling rate, while time-frequency models become more expensive as the number of frequency bins increases. We propose TF-Refiner, a sampling-frequency-independent model that decouples the deep analysis bandwidth from the full-band input and output. A deep encoder processes the band below a configurable cutoff, while a shallow decoder combines the encoded features with input-dependent high-band queries and predicts local complex filters applied to the original noisy STFT. A single parameter set trained at 16 and 48 kHz is evaluated at various sampling rates. On VoiceBank+DEMAND, the universal model outperforms the rate-specific counterparts in PESQ, STOI, and log-spectral distance across the evaluated rates, including rates unseen in training. Random-cutoff training enables inference-time selection of cost-quality operating points without retraining or changing the output bandwidth. These results support configurable analysis bandwidth as a practical design choice for multi-rate full-band enhancement.
著者のコメント
5 pages, 5 figures, 4 tables. Submitted to ICASSP 2027
arXiv ID: 2609.29463 / 要約の誤りについて