合成データで水中の画像認識を大規模化する
Towards Scaling Marine Perception with Synthetic Data
この論文をやさしく読む
ひとことで言うと
水中の見え方を変えながら自動ラベル付き画像を作り、水中認識モデルの訓練に使う基盤です。
何に役立つ?
実海域での画像収集やラベル付けの負担を補う訓練データ源として利用が考えられます。
この研究の面白いところ
OceanSimに合成データ生成を加え、場面の変化が実世界のウニ検出へどう影響するかを評価しています。
どこまで分かった?
実世界への転移を調べた対象はウニ検出です。描画の忠実度、場面の多様性、転移評価は今後改善すべき課題として挙げられています。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
厳しい水中環境で機械学習を大規模に展開するうえでは、ラベル付きの実環境訓練データの不足が大きな制約となる。このデータの収集には費用と手間がかかることが多く、大規模な実環境データの収集と整備は難しい。一方、シミュレーションデータはその不足を埋め、水中知覚における多くの学習ベースの課題を実現する助けとなり得る。 本研究では、IsaacSimに基づく水中知覚シミュレーターOceanSimを拡張し、水中で使用するモデルを訓練するための合成データ生成(SDG)パイプラインを追加する。提案するパイプラインにより、利用者はシーンの外観、構造、センサー設定を変更しながら、自動でラベルが付いた大規模で写実的なデータセットを生成できる。 実環境でのウニ検出課題によってパイプラインを評価し、合成シーンに与えるさまざまな変動が、シミュレーションから実環境への転移性能にどう影響するかを調べる。これらの実験に基づき、得られた知見と現在のパイプラインの主な限界を議論し、水中レンダリングの再現性、シーンの多様性、および実環境への汎化の評価を改善するための今後の方向性を示す。オープンソースコードはhttps://github.com/umfieldrobotics/OceanSimで公開されている。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-17(UTC)
- 最新改訂
- 2026-09-17 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-17 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Scalable machine learning in challenging underwater environments is strongly limited by the lack of labeled real-world training data. This data is often expensive and laborious to gather, making large-scale real-world data challenging to gather and curate. However, simulated data can help close the gap, enabling many learning-based tasks for underwater perception. In this work, we extend OceanSim, an IsaacSim-based underwater perception simulator, with a Synthetic Data Generation (SDG) pipeline for training models to be used in underwater scenarios. The proposed pipeline enables users to generate large, automatically labeled, photorealistic datasets with configurable scene appearance, structure, and sensor settings. We evaluate the pipeline on a real-world sea urchin detection task and study how different forms of synthetic scene variation affect sim-to-real performance. Based on these experiments, we discuss findings on our results, main limitations of the current pipeline and identify future directions for improving underwater rendering fidelity, scene diversity, and the evaluation of sim-to-real generalization. The open-source code can be found at https://github.com/umfieldrobotics/OceanSim.
著者のコメント
Accepted at OCEANS 2026 Monterrey
arXiv ID: 2609.20680 / 要約の誤りについて