欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2024117105517
申请人: 云南大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2026-11-16
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种三维场景的重建方法,其特征在于,所述三维场景的重建方法包括:通过光线行进模块模拟光线从相机光心到三维场景的过程,确定所述三维场景中多个采样点的空间坐标;所述三维场景是由体素网格构成的三维体素网格空间;

将所述三维体素网格空间转化为四维特征空间;所述四维特征空间包括颜色特征空间和密度特征空间;

分解所述颜色特征空间和所述密度特征空间,确定每个采样点的空间坐标对应的矩阵和向量对;所述矩阵和向量对包括颜色矩阵和向量对,以及密度矩阵和向量对;

对各所述矩阵和向量对进行插值,确定每个采样点的颜色特征向量和密度;

根据每个采样点的颜色特征向量和表面建模的球谐编码,确定每个采样点的球谐特征向量;

根据每个采样点的颜色特征向量和视锥编码,确定每个采样点的抗混叠特征;

拼接所述球谐特征向量和所述抗混叠特征,并输入目标多层感知机,输出每个采样点的预测颜色;

对每个采样点的所述预测颜色和所述密度进行体渲染,得到渲染的图像;

根据所述渲染的图像,确定重建的三维场景。

2.根据权利要求1所述的三维场景的重建方法,其特征在于,通过光线行进模块模拟光线从相机光心到三维场景的过程,确定所述三维场景中多个采样点的空间坐标,具体包括:基于光线行进模块,利用相机位姿与相机内参,模拟光线从相机光心出发到三维场景的过程;

在所述光线从相机光心到三维场景的过程中,依据光线的传播途径和采样策略,确定所述三维场景中多个采样点的空间坐标。

3.根据权利要求1所述的三维场景的重建方法,其特征在于,对各所述矩阵和向量对进行插值,确定每个采样点的颜色特征向量和密度,具体包括:针对所述颜色特征空间,对每个采样点的空间坐标对应的颜色矩阵和向量对进行插值,确定各第一插值结果;

对各所述第一插值结果相加,确定所述每个采样点的颜色特征向量;

针对所述密度特征空间,对每个采样点的空间坐标对应的密度矩阵和向量对进行插值,确定各第二插值结果;

对各所述第二插值结果相加,确定所述每个采样点的密度。

4.根据权利要求3所述的三维场景的重建方法,其特征在于,针对所述颜色特征空间,对每个采样点的空间坐标对应的颜色矩阵和向量对进行插值,确定各第一插值结果,具体包括:针对所述颜色矩阵和向量对中任一组颜色矩阵和向量,对所述颜色矩阵和向量中的矩阵进行双线性插值得到矩阵结果,并对所述颜色矩阵和向量中的向量进行线性插值得到向量结果;所述颜色矩阵和向量对包括三组颜色矩阵和向量,每一组颜色矩阵和向量采用不同的坐标平面作为矩阵,剩余的坐标轴作为向量;

将所述第一矩阵结果和所述第一向量结果的乘积作为所述第一插值结果。

5.根据权利要求3所述的三维场景的重建方法,其特征在于,针对所述密度特征空间,对每个采样点的空间坐标对应的密度矩阵和向量对进行插值,确定各第二插值结果,具体包括:针对所述密度矩阵和向量对中任一组密度矩阵和向量,对所述密度矩阵和向量中的矩阵进行双线性插值得到第二矩阵结果,并对所述密度矩阵和向量中的向量进行线性插值得到第二向量结果;所述密度矩阵和向量包括三组密度矩阵和向量对,每一组密度矩阵和向量采用不同的坐标平面作为矩阵,剩余的坐标轴作为向量;

将所述第二矩阵结果和所述第二向量结果的乘积作为所述第二插值结果。

6.根据权利要求2所述的三维场景的重建方法,其特征在于,根据每个采样点的颜色特征向量和表面建模的球谐编码,确定每个采样点的球谐特征向量,具体包括:针对任一采样点,将所述采样点的空间坐标,以及所述采样点的颜色特征向量和密度,输入第一多层感知机,确定所述采样点的表面粗糙度和表面法向量;其中,所述表面粗糙度为所述表面法向量的von Mises-Fisher分布的集中参数;

利用所述表面法向量和观察方向,计算所述采样点的反射方向;所述观察方向是基于所述相机位姿确定的;

利用球谐函数对所述采样点的反射方向进行编码,确定所述反射方向的球谐函数编码的期望值;

将每个采样点的反射方向的球谐函数编码的期望值作为每个采样点的球谐特征向量。

7.根据权利要求1所述的三维场景的重建方法,其特征在于,根据每个采样点的颜色特征向量和视锥编码,确定每个采样点的抗混叠特征,具体包括:获取从相机光心沿着三维场景中的像素点的方向投射的一个视锥体;

根据所述每个采样点的空间坐标,对所述视锥体进行截取,确定截取后的视锥体;

计算所述截取后的视锥体中每个采样点的颜色特征向量的均匀分布;

对所述均匀分布的方差和期望进行高频编码,得到每个采样点的抗混叠特征。

8.根据权利要求1所述的三维场景的重建方法,其特征在于,对每个采样点的所述预测颜色和所述密度进行体渲染,得到渲染的图像之后,还包括:比较所述渲染后的图像和真实图像之间的损失;

若所述损失大于预设阈值,返回步骤“分解所述颜色特征空间和所述密度特征空间,确定每个采样点的空间坐标对应的矩阵和向量对”,直至所述损失小于或等于所述预设阈值。

9.一种计算机设备,包括:存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序以实现权利要求1-8中任一项所述的三维场景的重建方法。