Gaussian SplattingのデータをVirtual Productionで使ってみた

Gaussian SplattingのデータをAximmetry(UE5.3)で表示し、グリーンバックで抜いた人物の合成をしてみました。

Luma AIやVolingaも試しましたが、今回のはUnrealEngine用のGS pluginを購入して使用しています。

データはスマホで写真を撮って学習。
まだ撮影のコツなんかはあまり分かっていないですが、試行錯誤するのと、スマホではなくて一眼レフカメラを使うなどすればもう少し綺麗になると思います。
このデモだと分からないですが、ガラスの透明部分や反射なんかはすごいですね。
どう活用していけるか探っていきたいと思います。

活用などご興味ありましたらお問い合わせください。