Single Image Portrait Relighting。写真をライティングし直す技術。
カリフォルニア大学サンディエゴ校およびグーグルの研究者らは、ニューラルネットワークを使用して肖像画をリライティングするアプローチを示す論文を発表。
この手法は単一のRGB画像を取得し、環境マップを使用し画像を明るくすることができるとの事。
Single Image Portrait Relighting – SIGGRAPH 2019
Single Image Portrait Relighting - SIGGRAPH 2019
撮影した写真に対して、まさかライトをし直す技術を考えるとは。深度データは必要ないそうです。
この技術の活用方法について、携帯電話で撮った写真に光を当てるコンシューマ向けアプリケーションの可能性があると示唆しています。
実写合成のお仕事で実写の人のライティングとCGの背景のライトが一致しない場面は結構あります。
この技術を使うと、実写の人物のライトをCGに寄せるという事も出来そうですね。
ソースコードはComing Soonとの事。