3D立体写真

先日のU-NEXT柿元さんのツイート。
githubの方にもサンプルやらDemoやらあります。
3Dモデルや複数の写真から奥行き情報を計算するというのは今までもありましたが、一枚の写真で？

1枚の静止画に表示されているモノの奥行き情報を推測して3D立体写真にしてしまう技術。
バージニア工科大学、国立清華大学（台湾）とフェイスブックの共同研究。
写真1枚のみのインプットでここまで表現できるようになってきたか…。https://t.co/s8A4K21Esk pic.twitter.com/yxOvKRuXLe

— 柿元崇利 / U-NEXT (@tKackey) April 13, 2020

面白いなぁ、と思っていたらコノギヨシヲ氏によるイラストでの実験。
何でこれで奥行き計算できちゃうんだろう？
人物と背景、カウンターなんかも綺麗に分離できてるし。

一枚の写真から3D画像を作って動かす技術を、写真じゃなくてイラストで試してみたら...想像以上にぐりぐり動いて衝撃...!!!https://t.co/T5Orp0K9kS pic.twitter.com/VUhcztcXup

— コノギヨシヲ@変女IT担当 (@yoshiwo_konogi) April 16, 2020

もはや時代についていけない・・・

趣旨は違うけど、以前、顔写真を3Dするというサイトもあって、Wavefront Obj形式で出力もできるので、そのうち喋らせてみたい。
https://cvl-demos.cs.nott.ac.uk/vrn/index.php

こんな事やってたら、思い出した。昔人物用3Dスキャナの開発を手伝った事あったんだけど、まだそんなに精度が高くなかったもんで、凹んだ部分というのが綺麗に検出できず、目の窪みなどは「この辺に目の窪みがある筈だ」という想定でプログラムが書かれていたり。