動画の感情的な強さを端末上で瞬時に調整する
Learned Parametric Emotion Editing: Real-Time Affective Filtering for On-Device Social Media Video
この論文をやさしく読む
ひとことで言うと
SNS動画の利用を遮断する代わりに、映像を見たときの刺激の強さを画像処理で調整する研究です。毎回じっくり最適化する処理を、小型モデルによる高速な予測に置き換えています。
何に役立つ?
利用者の端末で動画の見え方を調整する機能への応用が考えられます。実際にAndroidへの組み込みと60fps動作を報告していますが、問題のあるネット利用の改善そのものを実証したとは述べていません。
この研究の面白いところ
感情に応じた条件をモデルに与え、画像全体の変換パラメータを出します。刺激を弱める効果が白黒化と同程度でありながら、見た目の品質ではより好まれた点が特徴です。
どこまで分かった?
人による評価は54人の画像視聴で報告された覚醒度と画質に関するものです。3.7ミリ秒はモデルの順伝播時間であり、アプリ全体の遅延とは区別が必要です。長期的な健康効果は要旨に示されていません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
問題のあるインターネット利用の影響を受ける人の割合は増えているが、時間制限、遮断、強制的な休憩など一般的な介入は強制的で、容易に回避される。本研究では、より制約の少ない代替策として、視覚コンテンツの感情的な強さを調整することを検討する。先行研究は、最適化によって画像の感情的な内容を誘導できることを示しているものの、画像ごとの最適化コストがリアルタイムでの利用を困難にしている。 そこで本研究では、1回の順伝播でこの変換を予測するモデルを学習する。FiLMに基づく感情条件付けを備えたMobileNetV4バックボーンが、微分可能な画像全体への変換のパラメータを出力する。これにより、従来の反復最適化で画像1枚当たり80秒かかっていた処理を、1回3.7ミリ秒の順伝播に置き換える。 54人の利用者調査では、このモデルは未編集の画像と比べて視聴者が報告する覚醒度を低下させた。その低下はウェルビーイングを目的とするグレースケールフィルターと同程度である一方、知覚される画質はより高く評価された。このモデルをInstagramの動画をリアルタイムに調整するAndroidアプリに組み込み、Samsung Galaxy S23上で毎秒60フレームを維持した。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-18(UTC)
- 最新改訂
- 2026-09-18 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-18 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Problematic internet use affects a growing share of the population, yet common interventions, e.g., time limits, blocking, forced breaks, are coercive and easily circumvented. We explore a less restrictive alternative: adapting the emotional intensity of visual content. Prior work has shown that optimization can steer an image's affective content, but its per-image optimization cost makes it impractical for real-time deployment. We instead learn a model that predicts this transformation in a single forward pass: a MobileNetV4 backbone with FiLM-based emotion conditioning outputs parameters for differentiable global transformations. This replaces prior iterative optimization (80 s per image) with a single 3.7 ms forward pass. In a user study (N = 54), the model reduced viewer-reported arousal relative to unedited images, comparably to the grayscale well-being filter, while being rated higher in perceived quality. We integrate the model into an Android app that adapts Instagram video in real time, sustaining 60 fps on a Samsung Galaxy S23.
著者のコメント
18 pages, 13 figures
arXiv ID: 2609.21624 / 要約の誤りについて