• 专利申请
    2022-01-13
  • 公布公告
    2022-04-19
  • 授权日期
    --
  • 终止
    --
一种非协作下基于Q学习的共存方法
一种非协作下基于Q学习的共存方法
* 专利信息仅供参考,不具有法律效力。 实质审查
CN202210036364.X 2022-01-13 H04W16/14 {{ classMap["H04W16/14"] }}
重庆邮电大学 查看申请人名下所有专利
重庆市南岸区崇文路2号
专利分类项目
专利注册信息
初审公告期号 2022-01-13 初审公告日期 2022-04-19
注册公告期号 -- 注册公告日期 --
专用权期限 - 专利类型 发明公开
代理组织机构 --
专利介绍
本发明涉及一种非协作下基于Q学习的共存方法,属于通信技术领域。本发明包括以下步骤:S1:设置基站智能体的D2D占空比动作集合和状态集合,初始化矩阵为零阶矩阵,基站去探测信道初始状态信息;S2:基站根据ε‑greedy选择策略选择一个动作;S3:基站通过执行选择的动作同时在Wi‑Fi使用信道阶段探测信道情况,从而计算出当前动作下的系统的吞吐量和频谱利用率,获取当前选择的动作的奖励;S4:根据Q学习的Q表公式来更新Q表,基站进入下一个状态;S5:重复执行S2~S4,直到选择的动作达到目标状态,结束一次迭代;S6:令t←t+1,重复执行步S2~S5,直至Q矩阵收敛,根据Q矩阵选择出最优的D2D占空比分配序列。本发明是基站能够学习并适应Wi‑Fi随机流量的动态行为,在不知道Wi‑Fi流量信息的情况下,通过基站去探测信道使用信息,经过Q学习在面对实时Wi‑Fi流量来选择合适的D2D占空比,使得整个系统能够达到最大吞吐量和频谱利用率,提高频谱效率。
法律进度
  • 2022-05-06 实质审查的生效 IPC(主分类): H04W 16/14 专利申请号: 202210036364.X 申请日: 2022.01 ...

  • 2022-04-19 公开 ...

同类专利
  • 一种基于时间和带宽联合优化的协作抗干扰频谱接入方法

  • 一种基于时间和带宽联合优化的双向协作抗干扰频谱接入方法

  • 一种基于契约的带宽和功率联合优化协作频谱共享方法

  • 一种分布式天线系统中能量效率和频谱效率权衡优化的方法

  • 一种基于信息与能量协同传输的抗干扰协作频谱接入方法

  • 利用小特征值估计噪声功率的协方差矩阵频谱感知方法

  • 一种主用户占空比估计方法

咨询该专利

您还可以
推荐专利
{{ v.name }}
取 消 确 定