arXiv論文メモ
新着一覧
cs.CV · 査読状況未確認

自己参照する画像の形とゆがみを同時に生成する

Moore, Escher, Penrose: A Conformal Golden Braid

Sophia Feldman and Assaf Shocher

この論文をやさしく読む

ひとことで言うと

絵の中にその絵自身が入り込むような自己参照的な画像を生成する方法です。普通の空間とゆがんだ空間を行き来して、場面の自然さと幾何学的なつながりを同時に整えます。

何に役立つ?

考えられる用途は、再帰的な構図や特定の幾何変換を満たす画像制作です。完成後の画像変形だけではつながりが不自然になる問題に対処します。

この研究の面白いところ

逆に戻せない画像変換に一般化逆を用意し、許される幾何学への射影として利用しています。それだけでは不十分なため、元の空間でもノイズ除去を行う構成です。

どこまで分かった?

射影の性質は理想化した定式化で述べられています。要旨には生成品質の定量評価や成功率はありません。示されているのは固定済み拡散モデルによる生成方法で、あらゆる再帰構図への保証ではありません。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

「これほど奇妙なことを人生で行ったことはないと思う。とりわけ、展覧会の壁の版画を興味深く眺める若者が描かれていて、その版画には彼自身が登場する。どうしてこんなことがありうるのだろう。私はアインシュタインの曲がった宇宙から、それほど遠くないのかもしれない。」M・C・エッシャーは、1956年のリトグラフ「版画の画廊」についてこのように記した。ほぼ半世紀後、数学的な解析によって、その幾何学は等角的なべき写像z↦z^α(αは複素数)を通じて、ねじれのない元画像と関係づけられた。 この構成を基に、重みを固定したテキスト画像生成の拡散モデルを使い、新しい自己参照的な場面を生成する。指示だけでは再帰構造を強制できず、生成後の変換では構造のつながりが悪くなることがある。サンプリング中に変換するだけでも十分ではない。ノイズ除去器が意図したゆがみを「修正」してしまったり、指定した幾何学から逸脱したりするためである。 本研究では、逆変換できない画像変換Tに対し、その再帰制約に適合した一般化逆T†を構成する。理想化した定式化では、ペンローズ恒等式TT†T=Tにより、TT†は幾何学的に許される画像への冪等な射影となる。しかし射影を使っても、変換後の画像だけのノイズを除去することは、学習分布外のタスクである。そこで、ノイズ除去のステップをTとT†による変換と交互に組み合わせる。元空間のステップでねじれのない場面を発展させ、変換後の空間のステップで最終的な幾何学における見た目とつながりを整える。「版画の画廊」のような構図を生成し、さらに別の変換も探究する。完成した画像をゆがめるのではなく、場面とそのゆがみを一緒に発展させる。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-10-01(UTC)
最新改訂
2026-10-01 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

I don't think I have ever done anything as peculiar in my life. Among other things, it shows a young man looking with interest at a print on the wall of an exhibition that features himself. How can this be? Perhaps I am not far removed from Einstein's curved universe.'' So wrote M.C. Escher about his 1956 lithograph Print Gallery. Nearly half a century later, a mathematical analysis related its geometry to an untwisted source image through a conformal power map $z \mapsto z^\alpha$, $\alpha \in \mathbb{C}$. Building on this construction, we use a frozen text-to-image diffusion model to generate new self-referential scenes. Prompting alone does not enforce the recursion, while a post-hoc transformation can leave structures poorly connected. Applying the transformation during sampling is also insufficient: the denoiser may "repair" the intended distortion or drift out of the prescribed geometry. We construct a generalized inverse $T^\dagger$ of the non-invertible image transformation $T$, adapted to its recursive constraint. In the idealized formulation, the Penrose identity $TT^\dagger T = T$ makes $TT^\dagger$ an idempotent projection onto geometrically admissible images. Yet denoising only the transformed image remains an out-of-distribution task, even with projection. We therefore braid denoising steps with $T$ and $T^\dagger$: source-space steps develop the untwisted scene, while transformed-space steps refine its appearance and connections in the final geometry. We generate Print Gallery-like compositions and explore further transformations. Rather than distorting a finished image, we let the scene and its distortion develop together.

arXiv ID: 2610.02210 / 要約の誤りについて