Gaussian Splatting で再構成された 3D シーンにおける物体の半自動切抜き

抄録

XR 技術の発展に伴い， 撮影動画からの三次元(3D) シーン再構成に対する需要が高まってきている．Neural Radiance Fields の登場を皮切りに, 三次元再構成に関する研究は急速な発展を遂げ，スマートフォンでも簡単に三次元再構成ができる環境となりつつある．その一方で，シーンや特定のオブジェクトに対する編集は難しく，未だ途上段階である．本研究では，Gaussian Splattingにより再構成された3D シーンの半自動的な編集を目指し，ユーザの簡単な入力から前景物体を自動で推定しシーンから切り抜く手法を提案する．既存の学習済シーンと自身で撮影した動画からGaussian Splatting により再構成された3D シーンに対して本手法を実行し，視覚的に尤もらしい前景部分の切抜きが可能であることを確認した.