欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2021106660429
申请人: 南京邮电大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2026-11-16
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种基于Hololens2全息眼镜的增强现实方法,其特征在于,包括:构建3D模型,得到原始形态模型、分解形态模型和智能提示形态模型;

原始形态模型、分解形态模型和智能提示形态模型整合为整合模型;

用户佩戴Hololens2全息眼镜;

用户缩放整合模型:使用4x1按钮菜单的enable按钮或使用语言指令enable开启脚本Bounding Box,使得整合模型周围出现边界框,用户通过手势抓住边界框的四个角往外或往里拖拽实现缩放功能;

当缩放完毕时使用4x1按钮菜单的disable按钮或使用语音指令disable关闭脚本BoundingBox使得整合模型周围出现的边界框进行隐藏;

用户分解原始形态模型得到分解形态模型:使用4x1按钮菜单的exploded按钮或使用语言指令exploded触发脚本Breakdown View Controller中的函数ToggleView,原始形态模型的装配模块自动移动到分解形态模型的装配模块位置上;

用户恢复原始形态模型:使用4x1按钮菜单的exploded按钮或使用语言指令exploded触发脚本Breakdown View Controller中的函数Toggle View,原始形态模型的装配模块从分解形态模型的装配模块位置自动移回到原始形态模型装配模块的原始位置;

用户粘合整合模型:当PartAssemblyHandler脚本检测到整合模型中被用户抓取的装配模块与智能提示形态模型的亮色材质的装配模型相距位置大于0.001cm并且小于0.1cm时,触发粘合事件;粘合事件将亮色材质的装配模块的世界坐标赋值给被抓取的整合模型的装配模块的世界坐标,使得两个装配模块重合;

DirectionHandler脚本检测到摄像机发出的射线未与合体碰撞器发生交互时或者用户点击智能提示按钮,确定用户丢失方向,SloverHandler脚本获取头部的转动方位并设置箭头指向为头部转动的反方向,激活箭头预制体的显示。

2.根据权利要求1所述的一种基于Hololens2全息眼镜的增强现实方法,其特征在于,构建3D模型,包括:

在Unity3D项目中搭建开发Hololens2全息眼镜的环境,将3D模型资源转化成符合Unity3D引擎的格式导入到Unity3D项目中;

Unity3D编辑器将3D模型资源的模型组件进行分类,并设计不同形态的3D模型;

将不同形态的3D模型整合并放入装配场景中;

设计脚本来控制各个模型组件的行为;

设置不同的输入指令来操控3D模型。

3.根据权利要求1所述的一种基于Hololens2全息眼镜的增强现实方法,其特征在于,在Unity3D项目中搭建开发Hololens2全息眼镜的环境,将3D模型资源转化成符合Unity3D引擎的格式导入到Unity3D项目中,包括:步骤101:新建Unity3D项目,创建新的场景作为装配场景;在Unity3D项目中下载支持开发Hololens2全息眼镜的UWP平台;在GitHub微软仓库中下载MRTK工具包,并导入到Assembly Project项目中;

在Assembly Project项目中将开发平台切换为UWP平台,将装配场景保存;

步骤102:将要导入到Unity3D项目中的3D模型资源转换成Unity3D引擎支持的任意格式,在Unity3D项目的资源管理器中添加该3D模型资源。

4.根据权利要求1所述的一种基于Hololens2全息眼镜的增强现实方法,其特征在于,Unity3D编辑器将3D模型资源的模型组件进行分类,并设计不同形态的3D模型,包括:步骤201:在Unity3D项目的资源管理器中双击打开导入的3D模型资源,将3D模型资分类为各个装配模块;

为保证归类过程中不扰乱原始形态模型的世界坐标数值,创建空物体作为父类对象,将分类的各个装配模块作为父类对象的子类,并将父类对象的名称设置为分类的名称;

分类完成后,将上述各个装配模块、父类对象和子类打包保存作为原始形态模型;

将原始形态模型复制两份保存在资源管理器中;

步骤202:在资源管理器中打开复制的第一个原始形态模型,将该原始形态模型命名为分解形态模型;

在窗口中编辑器中拖动归类好的各个父类对象到指定位置,或者选中各个父类对象并在Inspect面板中挂载的Transfrom组件上设置各个父类对象对应的变量“Position”的数值;

步骤203:在资源管理器中打开复制的第二个原始形态模型,将该原始形态模型命名为智能提示形态模型;

确定智能提示形态模型中所有的能够进行装配的装配模块,将所有的能够进行装配的装配模块复制一份单独保存;

对单独保存的装配模块,使用亮色高于设定的亮度阈值的材质替换该装配模块的材质。

5.根据权利要求4所述的一种基于Hololens2全息眼镜的增强现实方法,其特征在于,将不同形态的3D模型整合并放入装配场景中,包括:步骤204:在资源管理器中创建新的预制体,打开空的预制体进行编辑,将原始形态模型、分解形态模型和智能提示形态模型拖入放到Hierarchy面板中,在Transform组件里设置原始形态模型、分解形态模型和智能提示形态模型中所有装配模块的“Position”变量保持一致;

将原始形态模型的装配模块全部隐藏,将分解形态模型的装配模块全部隐藏,将智能提示形态模型的装配模块全部显示;

将原始形态模型、分解形态模型和智能提示形态模型保存得到整合模型;

步骤205:新建空的物体对象Game Object放入步骤101保存的装配场景中;

在资源管理器中将整合模型添加到装配场景,设置空的物体对象Game Object为整合模型的父类,将步骤203复制出来的装配模型添加到装配场景,并设置空的物体对象GameObject为复制出来得装配模型得父类。

6.根据权利要求1所述的一种基于Hololens2全息眼镜的增强现实方法,其特征在于,设计脚本来控制各个模型组件的行为,包括:步骤301:使用MRTK工具包中的ObjectManipulator脚本实现原始形态模型、分解形态模型和智能提示形态模型的移动和旋转,使用MRTK工具包中的BoundingBox脚本实现原始形态模型、分解形态模型和智能提示形态模型的缩放;

步骤302:新建BreakdownViewControlle脚本,脚本中编写函数ToggleView,设置变量获取原始形态模型的各个装配模块的世界坐标和分解形态模型的各个装配模块的世界坐标,设置布尔变量IsInOriginalPos使得函数ToggleView能够控制分解形态模型中各个装配模块的分解和控制分解形态模型中各个装配模块的恢复,当InOriginalPos值为true时,Toggle View函数控制分解形态模型中各个装配模块的分解并设InOriginalPos为false;

当InOriginalPos值为false时,Toggle View函数控制分解形态模型中各个装配模块的恢复并设InOriginalPos为true;BreakdownViewControlle脚本挂载在整合模型上;

步骤303:新建PartAssemblyHandler脚本,该脚本获取智能提示形态模型中设置亮色材质的装配模块的世界坐标和分解形态模型中装配模块的世界坐标,该脚本中设定整合模型中被用户抓取的装配模块与智能提示形态模型的亮色材质的装配模型相距位置大于

0.001cm并且小于0.1cm时触发粘合事件;

PartAssemblyHandler脚本中编写函数ToggleHint,用于触发亮色材质的装配模块的显示与隐藏;

步骤304:新建DirectionHandler脚本,将DirectionHandler脚本和MRTK工具包的SloverHandler脚本挂载在场景相机上,整合模型挂载盒体碰撞器,设置跟踪目标类型为头部,制作一个亮色箭头预制体并隐藏放入装配场景中,DirectionHandler脚本使用射线检测;

射线未与盒体碰撞器发生碰撞交互时,SloverHandler脚本求解方向并激活亮色箭头指向场景中整合模型的方向。

7.根据权利要求6所述的一种基于Hololens2全息眼镜的增强现实方法,其特征在于,设置不同的输入指令来操控 3D模型,包括:步骤401:在步骤301的基础上,添加用于增强用户与场景的交互体验上的按钮,按钮包括用于触发BoundingBox脚本的enable按钮、用于关闭BoundingBox脚本的disable按钮、用于触发BreakdownViewControlle脚本的恢复按钮、用于触发PartAssemblyHandler的粘合按钮、用于分解原始形态模型得到分解形态模型的exploded按钮和触发DirectionHandler脚本与SloverHandler脚本的智能提示按钮;

步骤402:调用MRTK工具包中的语音输入触发函数,将步骤401的四个按钮设置成语音触发;

设置403:新建ToolTipSpawner脚本并挂载在步骤205中的GameObject的各个装配模块上,ToolTipSpawner脚本继承了MRTK工具包中的Base Focus Handler接口和IMixed Reality Input Handler接口,这两个接口实现当用户注视某个模型时自动显示对应的包括名称和尺寸的文本信息;

将场景生成为.sln文件,并导入Hololens2全息眼镜。