1.一种基于跨域感知与心智理论的驾驶意图预测方法,其特征在于:其方法包括的步骤如下:
第一步、整合多模态感知数据,具体过程如下:
步骤一、地空数据采集,跨域感知指利用泛在的通信设备采集不同信息域的数据,对感知目标的感知域状态进行推导,跨域感知指对跨地面域和低空域两域的信息进行感知,并推导出感知范围内的微观交通流交通态势信息;
步骤二、驾驶员长时间驾驶数据采集,长时间采集数位不同类型的驾驶员的操作、神情和驾驶意图信息,形成离线状态数据库,用于支撑第三步中的基于心智理论的驾驶员认知结构模型的训练和验证;
步骤三、驾驶员短时驾驶数据采集,在实际运行系统时,采集当前一段时间内驾驶员的状态信息,用于在线预测当前状态下驾驶员的驾驶意图,由于系统的训练是基于驾驶模拟器采集的数据而实际使用时针对的是实车状况,需要根据实际车辆的转向间隙、制动间隙和各传感器的安装位置的硬件参数进行初值调教,解决由于车辆硬件不同而产生的零点漂移问题;
步骤四、多模态数据预处理,在本步骤中对前三个步骤所采集到的数据进行一些数据预处理,具体如下:对步骤一中智能车载传感器系统采集到的多传感器信息进行传感器融合得到智能驾驶系统感知图谱并拟合出驾驶员感知图谱;对无人机航测所采集到的图像信息进行识别得到交通流中的交通参与物信息,步骤一所采集到的信息经处理后输出到第二步进行跨域感知;
将采集到的信息,在存储时采用场景驾驶员驾驶意图-微观交通流态势-驾驶员操作-驾驶员面部信息四者一一对应的关系进行存储,以体现出其关联性,步骤二所采集到的信息经处理后输出到第三步用于训练形成驾驶员认知结构模型;
对步骤三中所采集到的数据处理方法与步骤二的数据类似,经处理后输入到第四步的步骤一中进行驾驶员驾驶意图预测;
第二步、构建跨域感知理论,具体过程如下:
步骤一、域相似性比对,首先对航测所得到的数据进行聚类,将离线数据库中的数据划分为具有相同特征的数个交通环境域,聚类的方法包括手动聚类和算法自动聚类,手动聚类的优点在于轻松处理计算机较难理解甚至无法理解的高级特征,将航测数据按特征分为安全城市道路域、安全高速路域、安全乡村道路域、危险城市道路域、危险高速路域和危险乡村道路域,算法自动聚类的优点在于效率极高,在处理微观交通流态势的估计问题方面具有显著的优势,使用的方法是基于K均值聚类的方法进行本步骤的自动分类;
步骤二、域偏差校准,将系统在线运行时无人机航测采集到的信息带入步骤一聚类结果中进行分类,并计算主车所处的微观交通流当前时刻下在聚类中所处的位置与归类结果的中心的偏差,用于步骤三进行调整校准;
如果本步骤中未能成功将主车所在的微观交通流和聚类结果的仍以类别匹配,则要进行手动聚类;
步骤三、跨域信息相位校准;
步骤四、微观交通流态势估计,在本步骤中基于元胞传输模型和交通流宏观基本图进行微观交通流的在线交通态势估计,元胞传输模型基于流量传输守恒的原理而来,经过实际交通流特性修正后,将流量按时间离散化后的元胞传输模型;
通过搜索找到主车所在元胞在图中所处的位置,并将其车流量和车密度带入经过校准的交通流宏观基本图,通过其在图中的位置,通过阶段评级的形式划分其交通态势,将曲线根据弧长进行等分后向横坐标投影,再根据主车所在元胞在图中的横坐标所在区间得到最终的微观交通流态势;
第三步、构建基于心智理论的驾驶员认知结构模型,具体过程如下:
步骤一、驾驶员元成分结构模型,元成分是认知结构中最高级也是最重要的部分,是个人对自己认知的认知,用来执行计划、做出决策并实行监控以指导行动,是解决问题的最关键因素,元认知的操作性定义为:元认知是个体对自己认知加工过程的监视、调节、控制、评价和反思;
步骤二、驾驶员操纵模型,心智理论中的操纵也称运算,指系统执行来自控制中心的指令,对输入的信息、提取的信息和工作记忆进行编码、加工、转换和转存的一系列活动的心理加工过程,操纵涉及基础操作和方法策略两个层次,驾驶员操纵模型对方法策略层次进行建模;
步骤三、驾驶员图式库,心智理论中的图示指思想的表征的有机组成结构,即个体头脑的知识和经验,用于表现现实,驾驶员图示库指驾驶员的驾驶行为相关的表征动作;
上述三个步骤形成了一个完整的驾驶员认知结构模型,其中步骤一中建立的驾驶员元成分模型作为驾驶员对其自身的认知,指导驾驶员的操纵,并输出表示为驾驶员图示库,整个过程具有逻辑可逆性,即驾驶员图示库反应了驾驶员的操纵,并且作用于驾驶员元成分模型,这为使用驾驶员认知结构模型进行驾驶员驾驶意图推理提供了依据;
第四步、构建人机协同驾驶意图模型,具体过程如下:
步骤一、驾驶员意图辨识,将第一步采集并预处理后的驾驶员短时驾驶数据和第二步聚类得到的微观交通流特征域和估计出的微观交通流态势作为输入,带入第三步建立的驾驶员认知结构模型,根据图示库的输入经过驾驶员元成分模型的处理回灌进驾驶员操作模型中,从而反推输出驾驶员的驾驶意图;
步骤二、人机驾驶权评估,人机共驾系统的驾驶意图由两部分组成,分别是驾驶员驾驶意图和自动驾驶系统驾驶意图,在步骤一中完成了驾驶员的驾驶意图的在线预测,而自动驾驶系统的驾驶意图对于人机共驾系统而言是已知量能够通过读取上一时刻系统的决策层输出结果直接获得,人机共驾系统的驾驶意图由二者按驾驶权叠加得到;
步骤三、人机协同驾驶意图预测,根据人机共驾系统决策层的计算逻辑进行安全叠加即能够获得最终所需要的人机协同驾驶意图,在表现形式方面,人机协同驾驶意图的最终以预瞄点的形式存在,即接下来的几个步长内人机共驾系统认为车辆追踪走过的行驶轨迹位置。
2.根据权利要求1所述的一种基于跨域感知与心智理论的驾驶意图预测方法,其特征在于:所述的第一步中步骤一包括的环节如下:环节一、地面域交通环境信息感知:通过智能网联汽车传感器系统采集主车周围的交通环境信息,包括由前视相机和环视相机采集的图像信息、激光雷达采集的点云信息、毫米波雷达采集的目标物信息和超声波雷达采集的距离信息,以及由惯导、CAN总线接口采集的车辆位置和速度的运动学信息,通过采集上述信息,形成地面域的交通环境信息;
环节二、低空域交通流信息感知:通过无人机航测的方式采集主车周围自然交通数据,无人机航测数据指无人机航拍得到的图片流数据,由于其数据来源,该数据具有极全面的中大型交通参与物信息,而对于小型交通参与物信息较为贫乏。
3.根据权利要求1所述的一种基于跨域感知与心智理论的驾驶意图预测方法,其特征在于:所述的第一步中步骤二包括的环节如下:环节一、设置采集场景,由于本步骤所采集的数据的用途为训练和验证,就要在已知交通态势和驾驶员驾驶意图的前提下采集各项信息,因此,将采取驾驶模拟器在已知场景下进行采集,设置的已知场景来源为前期建立的已知场景库;
已知场景是指预期功能安全中的定义而来,指前期建立的场景库中的单个场景,场景中包括交通参与物、背景环境和道路状况的信息,根据这些信息能够准确地计算出当前场景下的微观交通流态势;
环节二、采集驾驶员操纵指令信息,通过在驾驶模拟器的方向盘、踏板、换挡器和灯光控制器上加装传感器,采集驾驶员在已知场景下的车辆操纵指令信息;
环节三、采集驾驶员面部信息,通过安装在驾驶员正前方的相机传感器持续采集驾驶员面部的信息,包括驾驶员的眼动信息、头动信息。
4.根据权利要求1所述的一种基于跨域感知与心智理论的驾驶意图预测方法,其特征在于:所述的第二步中步骤三包括的环节如下:环节一、计算相对偏差,首先根据聚类结果计算聚类的中心位置与边界的偏差即得到最大偏差,并计算当前偏差值与最大偏差的比值得到相对偏差;
环节二、校准交通流宏观基本图,微观交通流态势估计基于交通流宏观基本图完成,为了解决不同交通场景域下的特异性问题,根据环节一计算出的相对偏差对交通流宏观基本图进行校准,根据类别和相对偏差的不同对交通流宏观基本图进行适当局部或整体缩放。
5.根据权利要求1所述的一种基于跨域感知与心智理论的驾驶意图预测方法,其特征在于:所述的第三步中步骤一包括的环节如下:环节一、监视,驾驶员在进行驾驶行为的过程中会对驾驶行为的整体进行监视观察,如果将驾驶员元成分模型抽象成一个控制理论模型,则通过设置观测器完成本环节;
环节二、调节,基于上一轮系统运行结果与元成分模型预期的运行结果的偏差修改元成分模型参数,即对应的简化为调参过程;
环节三、控制,直接与下一步骤中的操纵相关,从元成分的角度出发,发出指导操纵模型的信号,驾驶员在操作时对其控制对象,即人机共驾系统有一定的感性认知,控制方式会和传统汽车或全自动驾驶系统的控制方式有所不同,在建立本环节模型时需要将此因素纳入考虑调整模型结构;
环节四、评价,通过调用环节一监视结果计算系统运行过程中产生的错误和误差,用作输入指导环节二的调节过程;
环节五、反思,模型内部演化,通过将本轮已经完成的模型输入作用于经过环节二调节后的修正模型来验证模型的调节效果,从而使得模型逐步优化完善,解决模型的最优化问题。
6.根据权利要求1所述的一种基于跨域感知与心智理论的驾驶意图预测方法,其特征在于:所述的第三步中步骤二包括的环节如下:环节一、解决问题的认知策略,认知策略即为驾驶员的驾驶意图,驾驶员的驾驶意图表现形式不尽相同,有语义级别的驾驶意图、操作指令级别的驾驶意图和预瞄点级别的驾驶意图,为了兼顾精确性和表现形式的简洁性,采用预瞄点级别的驾驶意图表现形式,即驾驶员下一时刻意图车辆经过的位置;
环节二、启发式策略,建立驾驶意图与基础操作之间的映射关系,建立映射关系所使用的训练数据来源为第一步所采集并预处理后的驾驶员长时间驾驶数据以及地面域信息形成的驾驶员感知图谱。
7.根据权利要求1所述的一种基于跨域感知与心智理论的驾驶意图预测方法,其特征在于:所述的第三步中步骤三包括的环节如下:环节一、基础操作,驾驶员基础操作指驾驶员的操纵动作全集,包括转向盘转角、离合刹车油门踏板位置、档位和灯光状态,以及驾驶员的眼动和头动状态;
环节二、基础驾驶知识,基础驾驶知识指正常驾驶状态下由于物理条件或驾驶规则所约束的基本操作之间的关系,如转向盘角度的绝对值存在最大值、刹车踏板和油门踏板不能同时被踩下、档位变化时离合踏板被踩下。