欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2019112023420
申请人: 暨南大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2026-11-16
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种双目视觉裸眼3D图像生成方法,其特征在于,包括以下步骤:

通过图像采集装置进行图像采集,获取彩色+灰色的原始双目图像对;

对所获取的原始双目图像对完成图像采集装置的标定,获得图像采集装置之间相对位置;

通过图像采集装置之间相对位置,将原始双目图像进行双目校正,得到校正后的双目图像,包括黑白右目图像和彩色目左图像;

利用双目匹配算法将校正后的双目图像进行双目匹配,生成视差图像;

利用视差图像对黑白右目图像进行图像绘制,生成彩色右目图像,将彩色左目图像与彩色右目图像合成一张图像,进行像素交织,生成最终双目图像。

2.根据权利要求1所述的一种双目视觉裸眼3D图像生成方法,其特征在于,所述通过采集装置进行图像采集,具体为:采用双摄裸眼3D图像采集装置进行拍摄,先打开主摄像头,进行参数设置和预测,并进行拍摄,检测摄像头是否为主摄像头,如果是,则打开副摄像头,进行参数设置和预测,并进行拍摄;如果不是,则打开主摄像头,进行参数设置和预测,并进行拍摄,得到原始双目图像,即主摄像头获取彩色图像,副摄像头获取黑白图像。

3.根据权利要求1所述的一种双目视觉裸眼3D图像生成方法,其特征在于,所述采集装置的标定,具体为:对图像采集装置的主副摄像头分别进行单目标定,获得其各自的相机参数之后,进行双目标定,确定主副摄像头的相对位置关系;采用双目相机标定工具对图像采集装置进行标定,利用棋盘格模板设定为图像投影屏幕,定义棋盘格模板上的点在世界坐标系中的Z坐标均为0,左上角第一个内角点为原点,使棋盘格图像占据图像采集装置镜头的主要画面,从不同角度采集棋盘格图像对,并将采集的棋盘格图像对导入双目标定工具中,输入棋盘格实际大小,查找角点,当左右两张棋盘格图像提取到的角点可以一一对应,通过该图像对获取用来计算相机参数,选用2个径向畸变系数和2个切向畸变系数的畸变模型对相机参数进行计算,得到主副摄像头坐标,从而得到采集装置主副摄像头相对位置关系。

4.根据权利要求3所述的一种双目视觉裸眼3D图像生成方法,其特征在于,所述双目校正,具体为:采用基于Bougouet极线校正算法对采集到的原始双目图像进行双目校正,利用相机标定获得的相机参数和图像采集装置相对位置关系通过stereoRectify函数计算得到主摄像头的校正旋转矩阵R′l和副摄像头的校正旋转矩阵R′r,主摄像头的投影矩阵Pl和副摄像头的投影矩阵Pr,以及重投影矩阵Q;再采用initUndistortRectifyMap函数获得左目图像和右目图像的校准映射参数;通过左、右目图像的校准映射参数和remap函数映射获得校正后的双目图像。

5.根据权利要求4所述的一种双目视觉裸眼3D图像生成方法,其特征在于,所述通过stereoRectify函数计算得到主摄像头的校正旋转矩阵R′l和副摄像头的校正旋转矩阵R′r具体为:将两个摄像头之间的旋转矩阵R分成主摄像头的投影矩阵Rl和副摄像头的投影矩阵Rr,将两个摄像头各旋转一半,通过摄像头之间的平移向量T构造变换矩阵Rc,Rc=[e1T e2T e3T]',其中,极点的方向与平移向量T方向相同,e2方向与主光轴方向和e1正交,e3方向与e2和e1正交,计算得到得到主摄像头的校正旋转矩阵Rl′和副摄像头的校正旋转矩阵R′r:

6.根据权利要求4所述的一种双目视觉裸眼3D图像生成方法,其特征在于,所述双目匹配,具体为:校正后的双目图像,还需要矫正遮挡区域和视差跳变边界存在的误匹配点,针对遮挡区域的误匹配点,通过左右一次性检测寻找误匹配点,对于校正后的双目图像,设定左右图像的对应点的视差为0,否则认为是误匹配点,检测到的误匹配点分别往水平两个方向寻找第一个正确匹配点,选取其中较小一个视差值替换遮挡区域的视差值;针对视差跳变边界存在的误匹配点,对其边界处每一个像素点,选取其左右两个像素点,其左右两个像素点对应视差值分别为和,则像素点的视差值为:其中,qr、ql分别为检测到误匹配点后水平往左和往右寻找的第一个正确的匹配点,其对应的视差值为D(qr)、D(ql);D(qr)、D(ql)分别为qr、ql对应的视差值D(p)为像素点的视差值;C(p,q)为输入的待滤波的匹配代价图;

彩色+灰度组合双摄像头采集到的双目图像经过相机标定和双目校正后,转换为统一的灰度图像;利用立体双目匹配算法对双目灰度图像进行匹配,即进行图像绘制,生成视差图像。

7.根据权利要求1所述的一种双目视觉裸眼3D图像生成方法,其特征在于,所述图像绘制,具体为:利用深度信息绘制彩色右目图像将双目匹配所得视差图乘以一个系数b作为重映射关系图,将彩色左目图像进行重映射便可得到不同视差值的彩色右目图像,进而合成立体感程度不同的3D图像;将左右视差图像乘以一个系数b,作为重映射像素坐标转换关系图像,利用彩色左目图像,分别通过向前映射和向后映射绘制出彩色右目图像;将彩色左目图像与绘制的彩色右目图像合成一张3D图像,并由交织算法进行像素交织,显示在裸眼3D显示屏上。

8.根据权利要求7所述的一种双目视觉裸眼3D图像生成方法,其特征在于,所述不同视差值的彩色右目图像包括向前映射绘制新右目图像和向后映射绘制右目图像。

9.根据权利要求7所述的一种双目视觉裸眼3D图像生成方法,其特征在于,所述系数b,当系数b小于1.5时,使用无需空洞填充的向后映射来绘制彩色右目图像;当系数b大于2.5时,使用向前映射来绘制右目图像,再进行空洞填充。