4D and Dynamic Scene Understanding Trend
Static な 3D scene から、dynamic な 4D scene へ研究の焦点が広がっています。特に、4D Gaussian Splatting、dynamic NeRF、scene flow、dynamic human avatar は CVPR / ICCV / ECCV で頻出のテーマです。
静的 3D から動的 4D へ
Static 3D では camera pose と geometry が主な問題でした。Dynamic scene では、それに加えて object motion、deformation、occlusion、temporal consistency を扱う必要があります。
代表的方向
| 方向 | 内容 |
|---|---|
| Dynamic NeRF | Time-conditioned field や deformation field で dynamic scene を表す |
| 4D Gaussian Splatting | 3DGS を spacetime / deformation へ拡張 |
| Scene Flow | 3D 空間での dense motion field を推定 |
| Dynamic SLAM | Moving object を扱いながら camera pose と map を推定 |
| Human avatar | 人体 prior と neural rendering を組み合わせる |
なぜ重要か
現実世界は静的ではありません。Robotics、自動運転、AR、VFX では、動く人・車・物体を扱う必要があります。そのため、4D scene understanding は world model とも強く接続します。