SFUの研究者が写真の照明をBlenderのように自在に操る技術を開発
Physically Controllable Relighting of Photographs
SFUのChris Careaga氏とYağız Aksoy氏によるSIGGRAPH 2025の論文。1枚の写真から色付きメッシュを推定し、3D空間上でスポットライトや環境光などの光源を自由に配置。パストレーシングで近似レンダリングした後、ニューラルレンダラーが写実的な仕上がりに変換する。微分可能レンダリングによる自己教師あり学習で、実世界の写真コレクションから訓練できる点が鍵だ。
我々の手法は、Blenderのような典型的な3Dコンピュータグラフィックスツールで利用可能な、光源に対する明示的な物理的制御を、実世界の写真のリライティングへと持ち込む重要な一歩である。
HNでの議論
14- Tepix
それはもうほとんど魔法だね。お見事！
- amelius
すごい！それに動画もかなり面白かった！
待って…特許出願中？公金でやった研究なのに？うわっ！即座にダウンボートだ。
- vonneumannstan
これって拡散モデルで既にできたんじゃないかと勘違いしてるだけかな？