国内刊号:51-1267/TN
国际刊号:1001-893X
发布日期:
作者:梁燕,惠莹
单位:(1.重庆邮电大学 通信与信息工程学院,重庆 400065;2.信号与信息处理重庆市重点实验室,重庆 400065)
关键词:认知无线电;频谱感知;动态频谱接入;深度强化学习;竞争双深度Q网络;
基金:国家自然科学基金资助项目(61702066)
针对多信道动态频谱接入问题,建立了存在感知错误与接入碰撞的复杂信道场景,提出了一种结合双深度Q网络和竞争Q网络的竞争双深度Q网络学习框架。双深度Q网络将动作的选择和评估分别用不同值函数实现,解决了值函数的过估计问题,而竞争Q网络解决了神经网络结构优化问题。该方案保证每个次要用户根据感知和回报结果做出频谱接入决策。仿真结果表明,在同时存在感知错误和次要用户冲突的多信道情况下,竞争双深度Q网络相比于同类方法具有较好的损失预测模型,其回报更稳定且提高了4%。
来源:2022年第12期
《电讯技术》期刊编辑部