1.一种基于三维高斯泼溅的体积云渲染方法,其特征在于,包括如下步骤:S1、输入一组体积云场景的图像,利用运动结构恢复算法进行特征匹配与结构重建,获取场景中的稀疏点云及图像对应的相机位姿;
S2、将获取的稀疏点云表示为各向异性的三维高斯椭球,每个三维高斯椭球属性包含:位置参数、缩放因子、旋转因子、不透明度参数以及球谐函数系数;
S3、基于辐射传输方程对体积云的光照传输过程进行建模,将光照传输过程分解为前向单次散射与内部多重散射两部分,得到光照建模公式;
对于前向单次散射部分,仅考虑来自太阳方向的直接辐射,忽略散射后的多次传播与再散射;
光线在穿过体积云介质时的辐射强度变化由辐射传输方程的单次散射条件下的微分形式描述,微分形式方程如下:;
其中,为光线在传播过程中因吸收与散射造成的辐射强度衰减项,反映能量衰减过程;表示在介质段内由太阳光散射而来的新增辐射强度;是总消光系数,包括吸收系数和散射系数;为前向单次散射分量;表示前向单次散射系数;为Henyey–Greenstein相函数,为光线与视角方向的夹角;为入射太阳光的辐射强度;为光线从入射点到位置的累积光学厚度,用于计算光线在介质传播中的能量衰减比例;
当体积云介质的出射点处无外部入射光照时,边界辐射强度时,对公式两端进行积分,得到的表达式如下:;
其中,表示光线从到的路径长度;
对于内部多重散射部分,引入常数表示多次散射过程中由介质内部及周围环境辐射场形成的平均辐射强度,体积云内部多重散射分量沿光线传播路径的变化率为:;
其中,表示内部多重散射系数,表示光线在传播过程中因吸收与散射造成的强度衰减,表示介质内部的辐射场经多次散射后对当前方向辐射强度的贡献;
当体积云介质的出射点处无外部入射光照时,边界辐射强度时,对公式两端进行积分,得到的表达式如下:;
S4、将光照建模公式中的前向单次散射分量及内部多重散射分量嵌入体积云渲染过程,生成体积云在不同视角下的渲染图像,并得到初始三维高斯模型;
S5、依据每个三维高斯椭球的不透明度指标判定其对渲染结果的贡献,并采用延迟删除策略对低贡献三维高斯椭球进行动态裁剪,减少冗余;
S6、构建包含基础重建损失、基于前景掩码的局部感知损失以及不透明度稀疏正则项的综合损失函数,以输入图像作为监督信号对三维高斯模型进行迭代优化,使三维高斯模型聚焦于体积云区域并增强结构细节还原能力,包括:S61、基于输入图像与渲染结果的像素差异,计算基础重建损失,引导三维高斯模型在前景区域学习更精细特征,提升整体渲染质量;
S62、利用输入图像的alpha通道掩码,提取体积云的前景区域,并在前景区域内构建局部感知损失,增强对云体边缘和内部细节的学习;
前景感知损失计算公式如下:
;
其中,表示渲染出的图像在像素i处的值,表示对应的真实图像在像素i处的值,为基于图像的alpha通道生成的掩码,用于指示像素i是否为云体区域;
S63、将基础重建损失、基于前景掩码的局部感知损失以及不透明度稀疏正则进行加权组合,构建综合损失函数,公式如下:;
其中,、和分别表示对应损失项的权重系数,表示重建图像与真实图像之间的逐像素L1损失,表示基于感知质量的结构相似性损失;
S64、基于综合损失函数对三维高斯模型进行迭代优化,通过反向传播不断调整三维高斯椭球的各项属性参数,包括:位置参数、缩放因子、旋转因子、不透明度参数以及球谐函数系数,逐步提升体积云渲染结果的真实性与细节表现能力;
S7、输出经过优化的体积云渲染结果和三维高斯模型,实现体积云的高质量渲染。
2.根据权利要求1所述的基于三维高斯泼溅的体积云渲染方法,其特征在于,步骤S2中,将获取的稀疏点云表示为各向异性的三维高斯椭球,包括如下子步骤:S21、将稀疏点云中的每个三维点表示为各向异性三维高斯椭球,公式如下:;
其中,表示位置向量,表示高斯的中心位置,表示三维协方差矩阵,上标T表示转置;
S22、为每个三维高斯椭球分配不透明度属性;
S23、对于三维高斯椭球的颜色属性,使用阶数为3的球谐函数进行建模。
3.根据权利要求1所述的基于三维高斯泼溅的体积云渲染方法,其特征在于,步骤S4中,所述将光照建模公式中的前向单次散射分量及内部多重散射分量嵌入体积云渲染过程,包括:S41、将三维高斯椭球通过视图变换矩阵投影至目标视角的二维图像平面上,得到对应的二维高斯椭圆;
S42、对投影后的二维高斯椭圆根据深度值,从小到大进行全局排序;
S43、对于目标视角中的每个像素进行颜色计算,分别计算前向单次散射项与内部多重散射项对像素最终颜色值的贡献和;
S44、像素的最终颜色值表示为:
;
其中,为像素涉及的三维高斯椭球的子集。
4.根据权利要求3所述的基于三维高斯泼溅的体积云渲染方法,其特征在于,步骤S43中,前向单次散射项对像素最终颜色值的贡献表示为:;
内部多重散射项对像素最终颜色值的贡献表示为:
;
其中,是第个三维高斯椭球的颜色,是第个三维高斯椭球的值与学习到的不透明度的乘积,表示第个三维高斯椭球处的累积透射率,表示第个三维高斯椭球中心处入射光线方向与视角方向的夹角。
5.根据权利要求4所述的基于三维高斯泼溅的体积云渲染方法,其特征在于,步骤S5中,依据每个三维高斯椭球的不透明度指标判定其对渲染结果的贡献,包括:S51、对于每个三维高斯椭球,根据总消光系数和路径长度计算其在当前视角下的不透明度;当某个三维高斯椭球的不透明度持续小于阈值时被视为冗余点;
S52、利用软约束机制删除冗余点,添加损失作为正则化器,在训练过程中引入基于不透明度的损失项优化三维高斯模型,损失项公式如下:;
其中,为正则化权重系数,用于调节不透明度正则项在综合损失函数中的影响程度,对低不透明度三维高斯椭球进行稀疏化约束。
6.根据权利要求5所述的基于三维高斯泼溅的体积云渲染方法,其特征在于,步骤S5中,采用延迟删除策略对低贡献三维高斯椭球进行动态裁剪,包括:S53、在模型训练过程中,记录每个三维高斯椭球的不透明度,计算在若干连续训练轮次中的平均不透明度;
S54、当某个三维高斯椭球在连续多个训练轮次中均保持极低的不透明度时,表明其对最终像素颜色的贡献极小,标记为裁剪对象;
S55、对裁剪对象采用延迟删除策略,每隔固定步数进行批量裁剪,在若干训练轮次迭代后统一执行裁剪,实现对三维高斯椭球的精准动态裁剪。
7.一种基于三维高斯泼溅的体积云渲染系统,用于实施权利要求1至6任一所述的方法,其特征在于,包括:预处理模块、高斯表示模块、光照建模模块、三维渲染模块、不透明度裁剪与密度调控模块、损失优化模块和输出模块;
所述预处理模块,用于接收体积云场景的多视角图像,利用运动结构恢复算法进行特征匹配与结构重建,获取场景稀疏点云及对应的相机位姿;
所述高斯表示模块,用于将稀疏点云转化为各向异性的三维高斯椭球表示,每个三维高斯椭球包含位置参数、缩放因子、旋转因子、不透明度参数以及球谐函数系数;
所述光照建模模块,用于对体积云的光照传输过程进行建模,基于辐射传输方程将光照传输过程分解为前向单次散射分量与内部多重散射分量,得到可嵌入渲染过程的光照建模公式,精确描述体积云的光照特性;
所述渲染模块,用于将三维高斯椭球投影至二维图像平面,并基于深度信息对投影结果进行排序与合成,结合光照建模公式计算像素颜色,得到不同视角下的体积云渲染结果;
所述不透明度裁剪与密度调控模块,用于低贡献三维高斯椭球的裁剪与密度调控,根据三维高斯椭球的不透明度指标判定其对渲染结果的贡献度,并对低贡献三维高斯椭球执行延迟删除和自适应密度调节;
所述损失优化模块,用于构建综合损失函数并优化三维高斯模型,构建由基础重建损失、基于前景掩码的局部感知损失以及不透明度稀疏正则项的综合损失函数,并基于输入图像进行迭代优化,增强体积云区域的结构细节;
所述输出模块,用于输出经优化后的体积云渲染结果和三维高斯模型,实现体积云的高质量渲染。