欢迎来到知嘟嘟! 联系电话:13336804447 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13336804447
知嘟嘟经纪人
收藏
专利号: 2023105470905
申请人: 湖南大学
专利类型:发明专利
专利状态:已下证
专利领域: 电通信技术
更新日期:2026-11-16
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种基于ICN的移动边缘计算系统视频流自主边缘缓存方法,其特征在于,包括以下步骤:步骤S1:构建基于ICN的移动边缘计算网络架构模型,边缘层与用户层使用ICN架构连接,以兴趣包与数据包的形式进行通信,边缘层与云层依靠核心网的物理连接进行通信;

步骤S2:提出用户内容请求的分发模式,对分发模式中的内容缓存命中情况进行建模,计算当前时刻的本地缓存命中率以及协作缓存命中率;

步骤S3:计算当前基站区域的全局内容流行度和动态流行度阈值,得到当前基站内全局流行的内容并缓存在基站内;

步骤S4:将基站作为智能体,实时学习用户偏好,并对用户长短期兴趣进行建模,然后结合当前时刻用户与基站的缓存状态信息作为状态输入,建立缓存决策;

步骤S5:对缓存决策进行马尔可夫决策过程建模,提出基于Soft Actor-Critic算法的多智能体深度强化学习算法对模型进行训练,得出最优缓存放置方案。

2.根据权利要求1所述的方法,其特征在于,所述移动边缘计算网络架构模型包括一个云服务器,存储了用户能请求的所有内容,内容库中包含了f个大小均为δ的视频文件,并能够通过核心网的物理连接与边缘层的基站进行通信;边缘层有N个基站,每个基站的覆盖范围内有若干个用户,基站负责管理覆盖区域内用户的缓存信息,以便于协作缓存的进行;用户层的用户在同一时刻只归属于一个基站,并且会定期的向基站更新缓存信息,用户层与边缘层通过ICN架构连接,用户以兴趣包的形式发送请求内容,缓存节点以数据包的形式进行响应。

3.根据权利要求2所述的方法,其特征在于,云服务器中存储的内容由集合表示,包含用户的评分,其中,表示用户对内容的评分,取值为0时代表用户没有对文件进行评分,取值为0.5-5时则代表用户对该文件的喜好程度,数值越大表示越偏好该文件;基站,存储空间大小为;一个基站覆盖范围内的用户集合为,存储空间大小为;用户设备与基站基于ICN的架构连接,并且均维护三个列表:内容存储表,用于存储节点缓存的内容副本;

待定请求表,用于记录已转发出去但还未被相应的信息包以及其对应的转入接口;

转发信息表,用于记录已转发出去的信息包及其对应的转发接口。

4.根据权利要求3所述的方法,其特征在于,所述提出用户内容请求的分发模式,包括六种情况:情况一,当用户请求某一个内容时,在自身的内容存储表中缓存了内容的副本;

情况二,当用户自身未缓存内容的副本,则向其通信范围内的其他用户设备广播兴趣包,若其广播范围内存在缓存了内容副本的用户设备,缓存用户将数据包直接返回给请求用户;

情况三,当用户广播范围内不存在缓存了内容的设备,请求用户将兴趣包发送给归属基站,若归属基站对该内容进行了缓存,则归属基站将数据包返回给请求用户;

情况四,当归属基站未查找到内容的缓存信息,则查找其覆盖范围内的其他用户设备,若找到了缓存该内容的设备则与其通信,并接收缓存设备中的数据包,然后再传给请求用户;

情况五,当归属基站未找到缓存了内容的其他设备,则向相邻基站广播兴趣包,相邻基站进行与情况三和四相同的操作;

情况六,当上述情况均未找到兴趣包,则通过基站向云端发送请求。

5.根据权利要求4所述的方法,其特征在于,所述对分发模式中的内容缓存命中情况进行建模,具体为:在每一个时隙t内,每个用户的内容请求,其中代表用户在时刻请求内容的次数;用户在时刻的缓存信息,其中代表用户缓存了内容;基站h在时刻的缓存信息,其中代表基站h缓存了内容;定义一组二进制变量 记录用户请求被满足的过程:其中,h表示用户i的归属基站,表示用户i的邻居用户集合。

6.根据权利要求1所述的方法,其特征在于,所述计算当前时刻的本地缓存命中率以及协作缓存命中率之后,还包括定义缓存收益以及定义最大化缓存收益目标函数。

7.根据权利要求1所述的方法,其特征在于,步骤S3中,全局内容流行度和动态流行度阈值的表达式分别为:其中,表示t时刻内容的全局流行度,表示内容在t时刻的请求数量,表示权重参数,表示动态流行度阈值;当大于时,内容被考虑为全局流行内容。

8.根据权利要求1所述的方法,其特征在于,步骤S4中,从用户对某些内容的高分反馈中提取用户的长期兴趣,记为,采用长短期记忆网络来学习用户较长一段时间的高分评价记录以捕获用户的长期兴趣,然后整合成用户长期兴趣矩阵:其中,为遗忘门,为sigmoid函数,、以及分别为相应权重,为前一时刻隐藏状态信息,为当前输入信息,、、以及分别为相应的偏置,为输入门,为临时单元状态,为当前时刻长期单元状态,为前一时刻长期单元状态,为输出门,为当前时刻隐藏状态信息;

用户短期时间内请求频率高的内容可以认为是用户的短期兴趣,短期兴趣可以从当前时刻节点流行度排名前N项的内容中提取出来,即,利用门控循环单元对用户短期兴趣进行捕捉,然后整合成用户短期兴趣矩阵:其中,为用户流行度,为更新门,为重置门,、分别为更新门对当前输入向量和上一隐藏状态的权重,、,、分别为候选隐藏状态对当前输入向量和上一隐藏状态的权重,、、分别为更新门,重置门以及候选隐藏状态的偏置、为候选隐藏状态。

9.根据权利要求1所述的方法,其特征在于,所述对缓存决策进行马尔可夫决策过程建模,具体为,定义一个由状态空间S、动作空间A、状态转移P以及奖励函数R组成的四元组,其中,状态空间:在每个决策时刻t,基站h从记录的信息中提取环境状态,将用户长期兴趣矩阵、短期兴趣矩阵、用户缓存状态信息以及基站缓存状态信息作为输入状态,表示为;

动作空间:在t时刻,基站h需要决定内容f的缓存放置问题,表示为;

状态转移:系统在t时刻更新缓存内容后,记录用户的请求信息以及反馈信息,状态转移到,即更新时刻用户的长短期兴趣以及缓存状态信息;

奖励函数:在执行缓存决策动作之后,每个基站会统计当前时刻得到的奖励值,将基站h在t时刻执行完缓存动作之后得到的奖励定义为t时刻的缓存收益。

10.根据权利要求1所述的方法,其特征在于,将基站作为智能体,每个基站包括actor网络、critic网络、目标actor网络和目标critic网络,只对actor网络和critic网络进行训练:根据CTDE框架和SAC算法,通过最小化目标来更新actor网络的参数,利用重参数的采样方法获得最小化目标的可微形式,然后采用随机梯度下降方法实现actor网络的更新;critic网络的参数通过最小化基站的贝尔曼误差进行更新。