(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211275466.3 (22)申请日 2022.10.18 (71)申请人 支付宝 （杭州） 信息技 术有限公司 地址 310023 浙江省杭州市西湖区西溪路 556号8层B段801-1 1 (72)发明人 刘文鑫　 (74)专利代理 机构 上海专利商标事务所有限公 司 31100 专利代理师 钱孟清 (51)Int.Cl. G06V 10/80(2022.01) G06V 10/44(2022.01) G06V 10/52(2022.01) G06V 10/82(2022.01) G06V 10/764(2022.01)G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 基于频域变换的深度伪造图像检测方法和 系统 (57)摘要 本公开提供了一种基于频域变换的深度伪 造图像检测方法， 包括： 接收待检测图片； 提取待 检测图片的局部空域特征和局部频域特征； 采用 通道注意力筛选局部频域特征； 融合局部空域特 征和所筛选出的局部频域特征以获取待检测图 片的融合特征； 以及基于融合特征判断待检测图 片的真伪。 权利要求书1页 说明书8页 附图6页 CN 115546598 A 2022.12.30 CN 115546598 A 1.一种基于频域变换的深度伪造图像 检测方法， 包括： 接收待检测图片； 提取所述待检测图片的局部空域特 征和局部频域特 征； 采用通道 注意力筛 选所述局部频域特 征； 融合所述局部空域特征和所筛选出的局部频域特征以获取所述待检测图片的融合特 征； 以及 基于所述融合特 征判断所述待检测图片的真伪。 2.如权利要求1所述的方法， 提取所述待检测图片的局部空域特征采用具有少量层卷 积的卷积神经网络来进行。 3.如权利要求1所述的方法， 提取所述待检测图片的局部频域特征包括对所述待检测 图片进行 频域转换。 4.如权利要求1所述的方法， 采用通道注意力筛选所述局部频域特征被用于筛选出重 要的局部频域特 征。 5.如权利要求 4所述的方法， 采用通道 注意力筛 选所述局部频域特 征通过SENet进行。 6.如权利要求1所述的方法， 所筛选出的局部频域特征在与所述局部空域特征融合之 前可进一步细化。 7.如权利要求6所述的方法， 所筛选出的局部频域特征的进一步细化包括对所筛选出 的局部频域特 征进行递归地分析， 并从所筛 选出的局部频域特 征中提取 更细粒度特 征。 8.如权利要求1所述的方法， 所述方法采用的模型通过焦点损失函数来训练。 9.一种基于频域变换的深度伪造图像 检测系统， 包括： 接收模块， 接收待检测图片； 提取模块， 提取 所述待检测图片的局部空域特 征和局部频域特 征； 筛选模块， 采用通道 注意力筛 选所述局部频域特 征； 融合模块， 融合所述局部空域特征和筛选出的局部频域特征以获取所述待检测图片的 融合特征； 以及 判断模块， 基于所述融合特 征判断所述待检测图片的真伪。 10.如权利要求9所述的系统， 所述提取模块提取所述待检测图片的局部空域特征采用 具有少量层卷积的卷积神经网络来进行。 11.如权利要求9所述的系统， 所述提取模块提取所述待检测图片的局部频域特征包括 对所述待检测图片进行 频域转换。 12.一种存储有指令的计算机可读存储介质， 当所述指令被执行时使得机器执行如权 利要求1‑8中任一项所述的方法。权　利　要　求　书 1/1 页 2 CN 115546598 A 2基于频域变换的深度伪造图像检测方 法和系统 技术领域 [0001]本公开主 要涉及图像 检测， 尤其涉及深度伪造图像的检测。 背景技术 [0002]近年来， 图像和视频相关的深度伪造技术迅速兴起， 生动诠释了眼见不一定为实， 给个人和社会带来了相应的风险和挑战， 因此亟需对网络上的多媒体内容进行伪造检测。 [0003]深度学习在图像处理领域具有强大的性能， 因此可通过模型训练来实现自动化的 深度伪造检测， 然而仅仅对图像的RGB特征进行检测识别， 随着伪造样本变得更加逼真， 检 测性能会严重降低。 [0004]因此， 本领域需要高效的深度伪造图像 检测方案 。 发明内容 [0005]为解决上述技术问题， 本公开提供了一种基于频域转换的深度伪造图像检测方 案， 其同时纳入对图像的空域特征和频域特征 的分析， 通过引入通道注意力筛选出重要的 频域特征来快速找到有用的局部篡改信息， 从而达成高性能、 高鲁棒性的深度伪造图像检 测。 [0006]在本公开一实施例中， 提供了一种基于频域变换的深度伪造图像检测方法， 包括： 接收待检测图片； 提取所述待检测图片的局部空域特征和局部频域特征； 采用通道注意力 筛选所述局部频域特征； 融合所述局部空域特征和所筛选出的局部频域特征以获取所述待 检测图片的融合特 征； 以及基于所述融合特 征判断所述待检测图片的真伪。 [0007]在本公开另一实施例中， 提取所述待检测图片的局部空域特征采用具有少量层卷 积的卷积神经网络来进行。 [0008]在本公开又一实施例中， 提取所述待检测图片的局部频域特征包括对所述待检测 图片进行 频域转换。 [0009]在本公开另一实施例中， 采用通道注意力筛选所述局部频域特征被用于筛选出重 要的局部频域特 征。 [0010]在本公开又一实施例中， 采用通道 注意力筛 选所述局部频域特 征通过SENet进行。 [0011]在本公开另一实施例中， 所筛选出的局部频域特征在与所述局部空域特征融合之 前可进一步细化。 [0012]在本公开又一实施例中， 所筛选出的局部频域特征的进一步细化包括对所筛选出 的局部频域特 征进行递归地分析， 并从所筛 选出的局部频域特 征中提取 更细粒度特 征。 [0013]在本公开另一实施例中， 所述方法采用的模型通过焦点损失函数来训练。 [0014]在本公开一实施例中， 提供了一种基于频域变换的深度伪造图像检测系统， 包括： 接收模块， 接收待检测图片； 提取模块， 提取所述待检测图片的局部空域特征和局部频域特 征； 筛选模块， 采用通道注意力筛选所述局部频域特征； 融合模块， 融合所述局部空域特征 和筛选出 的局部频域特征以获取所述待检测图片的融合特征； 以及判断模块， 基于所述融说　明　书 1/8 页 3 CN 115546598 A 3