把高频纹理“烘焙”进图集：新方法让 3D Gaussian Splatting 更快渲染 4K

导语

3D Gaussian Splatting（3DGS）已经成为实时新视角合成和场景重建中的热门技术路线：它能把复杂场景表示为大量可渲染的高斯基元，并以较高速度生成逼真图像。但当研究者试图进一步提升细节表现，尤其是用哈希网格等方式捕捉精细颜色和纹理时，片元渲染阶段的计算压力也会明显上升。

arXiv 新论文《Bake It Till You Make It: Ultrafast Spatial Texture-Atlas Splatting》瞄准的正是这一瓶颈。作者提出一种解耦的辐射表示：低频几何和视角相关外观仍由 2D surfel 建模，而高频、视角无关的纹理信息则通过空间哈希网格学习后，进一步“烘焙”进紧凑的纹理图集。换句话说，系统不再把所有细节都留到渲染时动态计算，而是把适合预计算的纹理细节提前固化，交给 GPU 擅长的纹理映射流程处理。

核心要点

• 将几何与纹理解耦：论文将低频几何、视角相关外观特征和高频纹理分开处理，避免把所有外观细节都压到同一套高斯或哈希查询流程中。
• 用纹理图集承载高频细节：高频纹理来自视角无关的空间哈希网格，但最终被烘焙成紧凑 texture atlas。这让渲染时能够利用成熟的 GPU 纹理采样能力，而不是在每个片元上承担昂贵的外观网络或哈希计算。
• 更激进的稀疏化：作者加入了鼓励稀疏的优化项，惩罚半透明和每个基元的衰减行为，从而更积极地剪除贡献较小的 surfel。
• 速度提升明显：根据摘要，方法利用几何稀疏性和高效纹理映射，最高可实现相对 3DGS 的 5 倍加速，并在消费级硬件上达到实时 4K 60FPS 渲染，同时保持当前先进水平的视觉质量。

意义与影响

这项工作的价值不只是“更快的 3DGS”。它反映出实时神经渲染的一条重要趋势：并非所有信息都适合在渲染时动态推理。对于大量视角无关、局部稳定的纹理细节，预先烘焙进图集可能比反复执行复杂查询更经济；而对视角相关效果，则保留专门的表示来处理。这样的分工更接近传统图形学管线与神经表示的结合。

如果论文结果能在更多场景和实现中复现，这类技术将对实时数字孪生、沉浸式内容、交互式场景浏览和高分辨率可视化产生直接影响。它把 3D 重建从“能实时看”进一步推向“能高分辨率、稳定、低成本地实时看”。不过，当前素材主要来自论文摘要，关于训练成本、不同场景类型下的鲁棒性、纹理图集大小与质量之间的权衡，还需要阅读完整论文和项目演示后才能更全面判断。

来源：arXiv