pixelSplat

Paper：pixelSplat: 3D Gaussian Splats from Image Pairs for Scalable Generalizable 3D Reconstruction

论文解决的核心问题：直接从两张图预测出 3DGS。

输入：两张 RGB 图 + 两张图的相机参数。

输出：3DGS

image.png

对于 Image 1 中的一个像素，对应空间中的一条 ray，这个 ray 投影到 Image 2 上，会编程一条 epipolar line。pixelSplat 沿着这条 epipolar line 采样多个候选点，然后做 attention.

image.png

另外 pixelSplat 并没有预测深度，而是预测深度的概率分布。