漫画の擬音を絵柄に合わせて英語へ置き換えるOnomatoBridge
OnomatoBridge: Onomatopoeia Translation and Rendering Pipeline in Manga
この論文をやさしく読む
ひとことで言うと
漫画の「ドン」などの描き文字を、絵の雰囲気を保って英語に置き換える処理です。元の日本語が残る問題と、英語の表記が正しくない問題を減らすことを目指しています。
何に役立つ？
考えられる用途は漫画の翻訳・画像編集を支援することです。評価では英語表記の正しさと日本語の消し残しが改善していますが、制作工程全体の効率化を測定したとは書かれていません。
この研究の面白いところ
翻訳内容だけでなく、描き文字を消した跡と新しい文字の見た目を含む画像編集の問題として扱っています。フィルタリングした出力を既存モデルと比較する設計です。
どこまで分かった？
検証対象はManga109における日本語から英語への変換です。要旨には他言語への一般化や、10～25ポイントの基準となる指標の詳細はありません。日本語残留の20～50％減は相対的な減少です。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
漫画は白黒の画材で描かれるコミックであり、世界的に人気が高まっている。漫画の擬音語・擬態語は、音、動き、感情を伝える独特の視覚的な表現によって、読者に特に強く訴えかける。視覚的な擬音表現の翻訳では、その見た目のスタイルを保ちながら、日本語の擬音を別言語の擬音へときれいに置き換える必要がある。既存手法は、日本語の擬音を除去して装飾された英語の擬音を描画する際に、残留物やスタイルの不一致をしばしば生じさせる。 これらの問題に取り組むため、視覚的な擬音翻訳のためのフィルタリング処理パイプラインOnomatoBridgeを提案する。Manga109の擬音データセットで日本語から英語への変換を評価し、基準となる画像編集モデルと比較する。実験結果は、提案手法でフィルタリングした出力が従来手法の出力を上回ることを示している。OnomatoBridgeは英語テキストの正しさをおよそ10～25ポイント改善し、日本語テキストの残留を相対値で約20～50％減らす。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-18（UTC）
- 最新改訂
- 2026-09-18 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-18 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Manga is a comic drawn by black and white paints gaining popularity around the world. Onomatopoeia in Manga specifically appeals to the audience with its unique visual styles, which convey sound, motion, and emotion. Visual onomatopoeia translation requires the clean replacement of Japanese onomatopoeia with onomatopoeia in the other language while preserving their visual style. Existing approaches often produce residual artifacts or style inconsistency when removing the Japanese onomatopoeia and rendering stylized English onomatopoeia. To approach these problems, we present OnomatoBridge, a filtering pipeline for visual onomatopoeia translation. We evaluate OnomatoBridge from Japanese to English on the Manga109 onomatopoeia dataset and compare it with baseline image editing models. Experimental results show that the filtered outputs by the proposed method outperform those of conventional methods. OnomatoBridge improves English text correctness by roughly 10 to 25 points and reduces residual Japanese text by about 20 to 50% in relative terms.
arXiv ID: 2609.21199 ／ 要約の誤りについて