Single Image Portrait Relighting。写真をライティングし直す技術。

2019年7月18日

カリフォルニア大学サンディエゴ校およびグーグルの研究者らは、ニューラルネットワークを使用して肖像画をリライティングするアプローチを示す論文を発表。

この手法は単一のRGB画像を取得し、環境マップを使用し画像を明るくすることができるとの事。

撮影した写真に対して、まさかライトをし直す技術を考えるとは。深度データは必要ないそうです。
この技術の活用方法について、携帯電話で撮った写真に光を当てるコンシューマ向けアプリケーションの可能性があると示唆しています。

実写合成のお仕事で実写の人のライティングとCGの背景のライトが一致しない場面は結構あります。
この技術を使うと、実写の人物のライトをCGに寄せるという事も出来そうですね。

ソースコードはComing Soonとの事。