形態素情報でキニャルワンダ語の音声合成を改善
Morpho-VITS: Variational Inference with Morphological Modeling for End-to-End Speech Synthesis of a Tonal Bantu Language
この論文をやさしく読む
ひとことで言うと
文字だけでは分かりにくい声調を正しく合成するため、語幹や接辞などの形態素情報を音声モデルへ入れる研究です。キニャルワンダ語で実験しています。
何に役立つ？
声調が表記されない言語の読み上げを改善するために役立つ可能性があります。報告された改善は自然さ、イントネーション、聞き取りやすさです。
この研究の面白いところ
音素の列だけを扱うエンコーダを置き換え、語の内部構造と音素の対応を注意機構で結び付けています。言語学的な特徴をモデル設計へ反映しています。
どこまで分かった？
実験言語はキニャルワンダ語です。要旨には評価人数や改善量、ほかのバントゥー諸語での結果はなく、言語群全体での効果が実証されたとはいえません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
声調を持つバントゥー諸語のテキスト音声合成モデルでは、語彙、すなわち語・語幹・接辞の集合と、文法、すなわち形態統語の双方に根差す声調体系が課題となる。さらに、これらの言語の標準的な表記法は声調記号や音節の長さをしばしば記さず、読み手は文脈に基づいて曖昧さを解消しなければならない。 バントゥー諸語の声調体系に関する言語学的記述に着想を得て、テキスト符号化に形態統語的な事前情報を加える、端から端まで一体化した音声合成モデルを提案する。VITS構造の標準的な音素エンコーダを、形態素系列エンコーダと、音素から形態素への注意ネットワークに置き換える。この明示的な形態論のモデル化によって、正しい声調の生成に必要な情報を捉えられると考える。 声調を持ち形態的に複雑なバントゥー語であるキニャルワンダ語での実験は、この形態論のモデル化により音声合成が大幅に改善することを示す。具体的には、生成した合成音声の自然さ、イントネーション、明瞭性を有意に改善する。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-21（UTC）
- 最新改訂
- 2026-09-21 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-21 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Text-to-speech models for Bantu tonal languages are challenged by a tonal system that is rooted in both the lexis (i.e., the inventory of words, stems, and affixes) and the grammar (i.e., morpho-syntax). To complicate matters, the standard writing systems of these languages often omit tone markings and syllable duration information, which must be disambiguated by the reader based on context. Motivated by linguistic descriptions of Bantu language tone systems, we propose an end-to-end text-to-speech model that augments the text encoding mechanism with a morpho-syntactic prior. We replace the standard phoneme encoder in the VITS architecture with a morpheme sequence encoder and a phoneme-to-morpheme attention network. We posit that, by using this explicit morphological modeling, we can capture the information required to produce the correct tone. Experiments conducted on the Kinyarwanda language, a tonal and morphologically complex Bantu language, reveal substantial TTS improvement from this morphological modeling. Specifically, the proposed method significantly improves the naturalness, intonation, and intelligibility of the produced synthetic voices.
著者のコメント
5 pages, 2 figures, 2 tables
arXiv ID: 2609.24310 ／ 要約の誤りについて