単一露光のRaw動画から高ダイナミックレンジ映像を復元
High Dynamic Range Video Reconstruction from Single-Exposure Raw Sequences
この論文をやさしく読む
ひとことで言うと
一つの露光設定で撮ったRaw動画から、白飛びや暗部の欠落を補ってHDR動画を復元する方法。
何に役立つ？
追加機器や交互露光を使いにくいモバイル動画撮影でのHDR復元が考えられる用途。
この研究の面白いところ
Bayer配列の色チャンネルごとの特性と前後フレームの補完情報を利用する。
どこまで分かった？
要旨は全指標で最先端と述べるが、個別指標の数値や比較対象は記載していない。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
従来の画像センサーはダイナミックレンジが限られるため、撮影した低ダイナミックレンジ（LDR）動画では、明るい部分の白飛びや暗部の細部の消失が起きやすい。そのため、露光を交互に変えたり追加の機器を使ったりせず、単一露光の連続画像から高品質な高ダイナミックレンジ（HDR）映像を復元することは難しい。露光を交互に変えるHDR手法はフレームレートを犠牲にし、動きの位置合わせも難しく、実際の撮影に向かない。これに対し、Bayer配列のRawデータが持つ線形応答とチャンネル固有の性質を利用する、単一露光Raw動画のHDR復元用の一貫した枠組みRawHDRVを提案する。具体的には、Bayerの各チャンネルを別々に処理して異なる露光特性を利用する、チャンネル分解型の時間位置合わせと統合を、露光を考慮した重み付き統合と組み合わせる。さらに、露光の補完性を示すマスクに導かれる復元モジュールが、フレーム間の露光情報の重複を利用して信頼できる情報を適応的に統合し、飽和によるアーティファクトを抑える。また、正規化した誤差の制約と勾配の平滑化を組み合わせる、マスクに導かれる色の損失を導入して、明部の復元を改善する。フレームごとのHDR注釈を備えた、大規模なモバイルRaw-HDR動画データセットも構築した。実験ではすべての指標で最先端の結果を達成し、極端な露光条件でも空間的な画質と時間的な安定性が高かった。コードは公開されている。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-23（UTC）
- 最新改訂
- 2026-09-23 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-23 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Due to the limited dynamic range of conventional image sensors, captured low dynamic range (LDR) video often suffers from highlight clipping and shadow detail loss, making high-quality high dynamic range (HDR) reconstruction from single-exposure sequences highly challenging without alternating exposures or extra hardware. Alternating-exposure HDR methods sacrifice frame rate and struggle with motion alignment, making them impractical for real-world capture. To address this, we propose RawHDRV, an end-to-end framework for single-exposure Raw video HDR reconstruction, that fundamentally exploits the linear response and channel-specific characteristics of Bayer data. Specifically, it features a channel-decomposition temporal alignment and fusion strategy that processes Bayer channels separately to exploit their distinct exposure characteristics, together with exposure-aware weighted fusion. It further incorporates an exposure complementarity mask-guided restoration module that leverages inter-frame exposure redundancy to adaptively fuse reliable information and suppress saturation artifacts, and introduces a mask-guided color loss that combines normalized error constraints with gradient smoothing to enhance highlight recovery. Furthermore, we construct a large-scale mobile Raw-HDR video dataset with per-frame HDR annotations. Experiments show that our method achieves the state-of-the-art results in all metrics, demonstrating superior spatial quality and temporal stability under extreme exposure conditions. The code is available at https://github.com/supeixian/RawHDRV.
著者のコメント
12 pages. Code: https://github.com/supeixian/RawHDRV
arXiv ID: 2609.27274 ／ 要約の誤りについて