欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2024111145934
申请人: 长安大学
专利类型:发明专利
专利状态:未下证
专利领域: 信号装置
更新日期:2026-11-16
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种无信号交叉口车辆通行控制方法,其特征在于,包括以下步骤:

获取无信号交叉口环境中目标车队和决策参考车队当前的观测状态;所述观测状态包括目标车队和决策参考车队的位置、规模、加速度以及所在车道位置;所述决策参考车队表示与目标车队所在车道位置具有冲突关系的车队;

将目标车队和决策参考车队当前的观测状态输入MADDPG算法的actor网络中,生成目标车队下一时刻执行的动作;其中,所述动作包括调整目标车队的规模和目标车队头车的加速度;根据调整后的目标车队规模及其头车的加速度,采用跟驰模型IDM生成目标车队中跟随头车行驶车辆的加速度;

将目标车队和决策参考车队当前的观测状态、以及目标车队下一时刻执行的动作输入critic网络中,得到估计Q值;根据Q值对目标车队下一时刻执行的动作进行评估,将评估结果反馈至actor网络并结合总奖励,不断迭代更新优化目标车队下一时刻执行的动作,生成调整目标车队的最优车队规模和最优车队头车加速度的策略;

根据调整目标车队的最优车队规模和最优车队头车加速度的策略、以及跟随头车行驶车辆的加速度对无信号交叉口环境中的目标车队进行协调控制;其中,在一个控制周期内,无信号交叉口环境中的所有车队会依次成为目标车队执行动作,完成无信号交叉口内所有车队的通行控制。

2.根据权利要求1所述的一种无信号交叉口车辆通行控制方法,其特征在于,所述获取无信号交叉口环境中目标车队和决策参考车队当前的观测状态包括用于生成目标车队规模的观测状态和用于生成目标车队头车加速度的观测状态;所述用于生成目标车队规模的观测状态包括:目标车队在时刻的状态为;

决策参考车队状态表示为:

其中,为车队的位置,为车队的规模,为车队的头车速度,为车队所在车道编号,为车队周围第个决策参考车队的位置,为车队周围第个决策参考车队的规模,为车队周围第个决策参考车队的头车速度,为车队周围第个决策参考车队所在车道编号;

所述用于生成目标车队头车加速度的观测状态包括:

目标车队在时刻的状态表示为:;

决策参考车队状态表示为:

其中,为车队的头车加速度,为车队周围第个决策参考车队的头车加速度。

3.根据权利要求1所述的一种无信号交叉口车辆通行控制方法,其特征在于,所述总奖励包括以公平性、通行效率和安全为优化目标,生成最优车队规模策略的总奖励和以安全、通行效率和驾驶舒适度为优化目标,生成最优车队头车加速度策略的总奖励。

4.根据权利要求3所述的一种无信号交叉口车辆通行控制方法,其特征在于,所述以公平性、通行效率和安全为优化目标,生成最优车队规模策略的总奖励表示为:其中,表示公平性奖励的权重,表示通行效率奖励的权重,表示安全奖励的权重;所述公平性奖励通过各车队在控制区的停留时间进行衡量,其车队在控制区停留的时间越长,则公平性奖励越小,所述公平性奖励表示为:其中:为第个车队中第1辆车停留的总时间步,为第个车队的规模,为等待时间阈值,c为控制上限的参数;表示第个车队在控制区停留的时长;

所述效率奖励表示为车队平均速度与最大速度的比值,速度越接近最大速度,则通行效率越高,反馈给车队的通行效率奖励则越大,所述通行效率奖励表示为:所述安全奖励表示为车队间的距离与其对应安全距离的比值,空间或时间距离越小,则车队间发生碰撞的风险越高,安全奖励越小,所述安全奖励表示为:其中,和分别为两车队空间和时间距离,和分别为两车队空间和时间安全距离阈值。

5.根据权利要求3所述的一种无信号交叉口车辆通行控制方法,其特征在于,所述以安全、通行效率和驾驶舒适度为优化目标,生成最优车队头车加速度策略的总奖励表示为:若车队正常行驶,总奖励为各目标奖励的加权和,若车队发生碰撞,总奖励为-10;

安全性奖励、通行效率奖励和驾驶舒适度奖励分别表示为:

其中,和分别为两车队间的空间和时间距离,,表示车队在时刻的位置,表示车队在时刻的位置,,为车队长度,车队长度由计算得出,表示车队尾车距停车线距离,表示车队头车距停车线距离;表示存在碰撞风险的空间距离范围,,为安全距离阈值,,为车队在时刻的速度,为延迟时间,包括驾驶员反应时间和制动时系统的反应时间,为最大制动加速度;表示存在碰撞风险的时间距离范围,;为交叉口最大限速,为交叉口最小限速;为当前时刻的加速度,为上一时刻的加速度,为加速度变化的最大值;

其中,所述车队发生碰撞的判断条件为:

其中,为车队p1和车队p2两车队在时刻的距离;和为车队p1和车队p2在时刻的位置,和分别为车队p1和车队p2的长度;表示碰撞间隙。

6.根据权利要求2所述的一种无信号交叉口车辆通行控制方法,其特征在于,所述动作包括调整目标车队的规模和目标车队头车的加速度;所述目标车队的规模的动作空间表示为:车队的动作表示为:

其中,表示生成车队规模的actor网络权重,表示在状态下根据策略所计算出的动作值;

所述目标车队头车的加速度的动作空间表示为,车队在时间步的动作表示为:

其中,为actor网络控制策略;表示actor网络的权重。

7.根据权利要求1所述的一种无信号交叉口车辆通行控制方法,其特征在于,所述根据调整后的目标车队规模及其头车的加速度,采用跟驰模型IDM生成目标车队中跟随头车行驶车辆的加速度,所述跟随头车行驶车辆的加速度表示为:其中,为车队中辆车的期望跟车距离;为最小安全间距;为车队中第辆车的当前速度;为安全跟车时距;为车队中第辆车与前车速度差;为最大加速度;为舒适减速度;为加速度的灵敏度参数;为车队中第辆车的跟车加速度;为车队中第辆车的初速度;为第辆车与前车之间的距离。

8.根据权利要求1所述的一种无信号交叉口车辆通行控制方法,其特征在于,所述根据调整目标车队的最优车队规模和最优车队头车加速度的策略、以及跟随头车行驶车辆的加速度对无信号交叉口环境中的目标车队进行协调控制,具体包括以下步骤:若目标车队的规模小于最优车队规模,则将后面车队的车辆信息加入目标车队,同时更新和的信息;

若规模大于最优车队规模,则将中多余的车辆分离出来,重新组成一个车队;

通过生成的目标车辆加速度和跟随车辆的加速度对车队中各车辆进行控制通行,其表示为:其中,表示车队在时刻的位置,表示车队在时刻的位置,为一个控制周期的时间,表示第个车队在时刻的加速度,表示车队在时刻的速度,表示车队在时刻的速度。

9.一种无信号交叉口车辆通行控制系统,其特征在于,包括:

获取模块,用于获取无信号交叉口环境中目标车队和决策参考车队当前的观测状态;所述观测状态包括目标车队和决策参考车队的位置、规模、加速度以及所在车道位置;所述决策参考车队表示与目标车队所在车道位置具有冲突关系的车队;

动作计算模块,用于将目标车队和决策参考车队当前的观测状态输入MADDPG算法的actor网络中,生成目标车队下一时刻执行的动作;其中,所述动作包括调整目标车队的规模和目标车队头车的加速度;根据调整后的目标车队规模及其头车的加速度,采用跟驰模型IDM生成目标车队中跟随头车行驶车辆的加速度;

优化模块,用于将目标车队和决策参考车队当前的观测状态、以及目标车队下一时刻执行的动作输入critic网络中,得到估计Q值;根据Q值对目标车队下一时刻执行的动作进行评估,将评估结果反馈至actor网络并结合总奖励,不断迭代更新优化目标车队下一时刻执行的动作,生成调整目标车队的最优车队规模和最优车队头车加速度的策略;

控制模块,用于根据调整目标车队的最优车队规模和最优车队头车加速度的策略、以及跟随头车行驶车辆的加速度对无信号交叉口环境中的目标车队进行协调控制;其中,在一个控制周期内,无信号交叉口环境中的所有车队会依次成为目标车队执行动作,完成无信号交叉口内所有车队的通行控制。

10.一种无信号交叉口车辆通行控制计算机设备,其特征在于,包括:存储器、处理器以及存储在所述存储器内的计算机程序,所述处理器执行所述计算机程序时实现权利要求1-8任一项所述的无信号交叉口车辆通行控制方法的步骤。