(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211359202.6 (22)申请日 2022.11.02 (71)申请人 广东工业大 学 地址 510060 广东省广州市越秀区东 风东 路729号大院 申请人 广州大学城 （广工） 科技成果 转化中 心 (72)发明人 李新宇　程昱　方毅　文龙　 (74)专利代理 机构 北京集佳知识产权代理有限 公司 11227 专利代理师 任文生 (51)Int.Cl. G06V 20/17(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01)G06T 7/11(2017.01) G06T 7/73(2017.01) G06V 10/26(2022.01) G06V 10/44(2022.01) G06V 10/764(2022.01) G06V 10/80(2022.01) G06V 10/82(2022.01) (54)发明名称 一种航拍图像的语义分割方法、 装置、 设备 及存储介质 (57)摘要 本申请公开了一种航拍图像的语义分割方 法、 装置、 设备及存储介质， 方法包括： 基于无人 机航拍图像获取预置航拍图像序列； 通过预设语 义分割模型中的预置编码器对预置航拍图像序 列进行编码操作， 得到航拍编码序列； 预设语义 分割模型包括浅层跳跃连接和深层空洞残差连 接， 预置编码器包括2D位置注意力机制和多头自 注意力机制； 采用预设语义分割模 型中的预置解 码器对航拍编码序列进行解码操作， 得到语义分 割结果。 本申请能够解决现有技术存在精确度较 差， 且复杂度提升的问题， 导致航拍图像的语义 分割效率较 差的技术问题。 权利要求书2页 说明书7页 附图4页 CN 115471765 A 2022.12.13 CN 115471765 A 1.一种航拍图像的语义分割方法， 其特 征在于， 包括： 基于无人机航拍图像获取 预置航拍图像序列； 通过预设语义分割模型中的预置编码器对所述预置航拍图像序列进行编码操作， 得到 航拍编码序列； 所述预设语义分割模型包括浅层跳跃连接和深层空洞残差连接， 所述预置编码器包括 2D位置注意力机制和多头自注意力机制； 采用所述预设语义分割 模型中的预置解码器对所述航拍编码序列进行解码操作， 得到 语义分割结果。 2.根据权利要求1所述的航拍图像的语义分割方法， 其特征在于， 所述基于无人机航拍 图像获取 预置航拍图像序列， 包括： 通过无人机获取 无人机航拍图像； 将所述无 人机航拍图像进行N 等份均匀 切分操作， 得到多个图像块， 所述 N取正整数； 将所述图像块基于像素 逐行展开后排成一维序列， 得到预置航拍图像序列。 3.根据权利要求1所述的航拍图像的语义分割方法， 其特征在于， 所述通过预设语义分 割模型中的预置编码器对所述预置航拍图像序列进行编码操作， 得到航拍编码序列， 之前 还包括： 基于多头自注意力机制和2D位置注意力机制， 根据预设特征融合网络构建 Transformer网络层； 通过串行多个Transformer网络层生成预置编码器； 采用预设连接结构连接所述预置编码器和预置解码器， 得到预设语义分割模型， 所述 预设连接结构包括浅层跳跃 连接和深层空洞残差连接 。 4.根据权利要求3所述的航拍图像的语义分割方法， 其特征在于， 所述采用预设连接结 构连接所述预置编码器和预置解码器， 得到预设语义分割模型， 之后还 包括： 采用预设微调训练图像集对所述预设语义分割模型进行微调训练， 实现模型参数优 化。 5.一种航拍图像的语义分割装置， 其特 征在于， 包括： 获取模块， 用于基于无 人机航拍图像获取 预置航拍图像序列； 编码模块， 用于通过预设语义分割 模型中的预置编码器对所述预置航拍图像序列进行 编码操作， 得到航拍编码序列； 所述预设语义分割模型包括浅层跳跃连接和深层空洞残差连接， 所述预置编码器包括 2D位置注意力机制和多头自注意力机制； 解码模块， 用于采用所述预设语义分割模型中的预置解码器对所述航拍编码序列进行 解码操作， 得到语义分割结果。 6.根据权利要求5所述的航拍图像的语义分割装置， 其特征在于， 所述获取模块， 具体 用于： 通过无人机获取 无人机航拍图像； 将所述无 人机航拍图像进行N 等份均匀 切分操作， 得到多个图像块， 所述 N取正整数； 将所述图像块基于像素 逐行展开后排成一维序列， 得到预置航拍图像序列。 7.根据权利要求5所述的航拍图像的语义分割装置， 其特 征在于， 还 包括：权　利　要　求　书 1/2 页 2 CN 115471765 A 2构建模块， 用于基于多头自注意力机制和2D位置注意力机制， 根据预设特征融合网络 构建Transformer网络层； 生成模块， 用于通过串行多个Transformer网络层生成预置编码器； 连接模块， 用于采用预设连接结构连接所述预置编码器和预置解码器， 得到预设语义 分割模型， 所述预设连接结构包括浅层跳跃 连接和深层空洞残差连接 。 8.根据权利要求7 所述的航拍图像的语义分割装置， 其特 征在于， 还 包括： 微调模块， 用于采用预设微调训练图像集对所述预设语义分割模型进行微调训练， 实 现模型参数优化。 9.一种航拍图像的语义分割设备， 其特 征在于， 所述设备包括处 理器以及存 储器； 所述存储器用于存 储程序代码， 并将所述 程序代码传输给 所述处理器； 所述处理器用于根据 所述程序代码中的指令执行权利要求1 ‑4任一项所述的航拍图像 的语义分割方法。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质用于存储程序代 码， 所述程序代码用于执 行权利要求1 ‑4任一项所述的航拍图像的语义分割方法。权　利　要　求　书 2/2 页 3 CN 115471765 A 3