(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211429707.5 (22)申请日 2022.11.16 (71)申请人 国网湖北省电力有限公司信息通信 公司 地址 430077 湖北省武汉市洪山区徐 东大 街341号 (72)发明人 罗弦　廖荣涛　杨荣浩　李想　 姚渭箐　董亮　刘芬　张岱　郭岳　 王逸兮　李磊　孟浩华　王敬靖　 胡欢君　龙霏　袁翔宇　王博涛　 (74)专利代理 机构 武汉楚天专利事务所 421 13 专利代理师 胡盛登 (51)Int.Cl. H04W 16/18(2009.01) H04W 84/18(2009.01)G06N 3/08(2006.01) G06N 3/04(2006.01) (54)发明名称 一种无线接入点与可重构智能表面协作方 法 (57)摘要 本申请涉及一种无线接入点与可重构智能 表面协作方法， 包括以下步骤： 搭建基于电力物 联网络的设备通信架构； 根据上述所搭建的基于 电力物联网络的设备通信架构， 设计相应的接入 点与智能可重构表面协作方法， 以最大化系统能 源效率为目标， 实现电力物联网络下的海量设备 对于传输数据速率和可靠性方面的服务质量需 求； 各接入点与可重构智能表 面根据训练完成的 模型进行协作， 以满足电力物联网络下海量设备 的接入需求。 本申请将巨型无线通信网络建模成 图， 并且使用图嵌入的方法对其降维以获得高效 的图表示， 可 以有效的降低模型训练复杂度， 实 现了高度定制化的通信。 权利要求书2页 说明书8页 附图1页 CN 115499849 A 2022.12.20 CN 115499849 A 1.一种无线接入点与可重构智能表面协作方法， 其特 征在于， 包括以下步骤： 步骤1： 搭建基于电力物联网络的设备通信架构， 所述设备通信架构包括： M个预安装的 接入点以及J个可重构智能表面， 其中每个接入点通过与相邻接入点以及可重构智能表面 协作关系建模为智能体之间的相互作用， 即图神经网络输入中的边， 构建消息传递图神经 网络的输入拓扑， 利用消息传递图神经网络获得拓扑 的嵌入表示， 以实现为电力物联网终 端提供服 务； 步骤2： 根据上述所搭建的基于电力物联网络的设备通信架构， 设计相应的接入点与可 重构智能表面协作方法， 以最大化系统能源效率为 目标， 实现电力物联网络下 的海量设备 对于传输数据速率和可靠性方面的服 务质量需求； 步骤3： 基于步骤2所提出的接入点与可重构智能表面的协作方法， 各接入点与可重构 智能表面 根据训练完成的模型进行协作， 以满足电力物联网络下海量设备的接入需求。 2.根据权利要求1所述的无线接入点与可重构智能表面协作 方法， 其特征在于， 所述步 骤1具体如下： 在电力物联网络的设备通信架构 中， 将网络中预装的接入点表示为 ， 将网络中的可重构智能表面表述为   ， 将M个无线接入点以及J个可重构智能 表面表述为不同的智能体节点， 将无线接入点和可重构智能表面表述为图神经网络输入中 的节点， 将电力物联设备接入信息、 多个无线接入点与多个可重构智能表面之间的混合空 间波束配置视作图拓扑中的特征， 输入到消息传递图神经网络， 通过消息传递图神经网络 的消息传递机制获得 稳定的节点特 征图嵌入表示。 3.根据权利要求1所述的无线接入点与可重构智能表面协作 方法， 其特征在于， 所述步 骤2具体如下： 步骤2.1： 将系统能源效率优化问题建模为去中心化部分可观察马尔可 夫决策过程； 步骤2.2： 通过集成图嵌入和不同奖励两种技 术实现更高效的合作学习； 步骤2.3： 在每一个分布式节点i处维护一个消息传递 图神经网络， 在每个消息传递图 神经网络层当中， 每个智能体首先将嵌入信息传输给其相邻的智能体， 然后聚合来自相邻 智能的嵌入信息并更新 其本地隐藏状态； 步骤2.4： 每个智能体通过基于局部 图嵌入特征来评估其对全局奖励改进的贡献从而 获得不同的奖励， 以此进一 步促进智能体之间的协调。 4.根据权利要求3所述的无线接入点与可重构智能表面协作 方法， 其特征在于， 所述步 骤3具体如下： 步骤3.1： 将实际观测得到的电力物联网数据作为智能体观测状态以及环境信息输入 到基于图嵌入的网络更新 算法当中， 初始化网络参数， 初始化网络学习率 ， 步骤3.2： 从经验池中抽取一个批次的数据B， 根据步骤2.4中所推导的公式计算策略梯 度 以及网络损失 ， 基于步骤2.4中的混合网络参数更新公式更新 混合网络参数， 步骤3.3： 进一步根据步骤2.4中所述分布式网络参数更新算法更新电力物联网络中的 网络参数， 直至网络收敛，权　利　要　求　书 1/2 页 2 CN 115499849 A 2步骤3.4： 训练好的网络参数定期更新， 或在电力物联网络发生较大变化时重新训练并 更新网络参数， 以此满足电路物联网络中设备的接入需求， 实现定制化 通信。权　利　要　求　书 2/2 页 3 CN 115499849 A 3