(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211365520.3 (22)申请日 2022.11.03 (71)申请人 季华实验室 地址 528200 广东省佛山市南海区桂城街 道环岛南路28号 (72)发明人 朱云龙　郑杨婷　李佩文　陈殷齐　 (74)专利代理 机构 深圳市世纪恒程知识产权代 理事务所 4 4287 专利代理师 关向兰 (51)Int.Cl. G06T 3/00(2006.01) G06N 3/04(2006.01) G06N 3/08(2006.01) G06T 7/00(2017.01) G06V 10/764(2022.01)G06V 10/82(2022.01) (54)发明名称 语义引导的缺陷图像生成方法、 装置、 设备 及存储介质 (57)摘要 本发明公开了一种语义引导的缺陷图像生 成方法、 装置、 设备及存储介质， 涉及图像生成领 域， 该方法包括： 获取真实样本图像， 将所述 真实 样本图像转换为语义引导的隐变量； 对所述隐变 量进行重参数化处理， 得到随机变量； 获取预设 的掩膜图像， 将所述随机变量和所述掩膜图像合 成为第一缺陷图像。 本发明通过真实样本图像对 缺陷图像的生成进行语义引导， 使生成的缺陷图 像在语义方面接近真实样本图像， 实现了提高生 成的缺陷图像真实度的技 术效果。 权利要求书2页 说明书9页 附图2页 CN 115409694 A 2022.11.29 CN 115409694 A 1.一种语义引导的缺陷图像生成方法， 其特征在于， 所述语义引导的缺陷图像生成方 法包括以下步骤： 获取真实样本图像， 将所述真实样本图像转换为语义引导的隐变量； 对所述隐变量进行重参数化处 理， 得到随机变量； 获取预设的掩膜图像， 将所述随机变量和所述掩膜图像合成为第一 缺陷图像。 2.如权利要求1所述的语义引导的缺陷图像生成方法， 其特征在于， 所述将所述真实样 本图像转换为语义引导的隐变量的步骤 包括： 提取所述真实样本图像的语义特 征； 根据所述语义特征将所述真实样本图像编码为隐变量， 以对所述隐变量进行语义引 导。 3.如权利要求2所述的语义引导的缺陷图像生成方法， 其特征在于， 所述对所述隐变量 进行重参数化处 理的步骤 包括： 确定所述隐变量在图像 语义范围内的概 率分布特 征； 根据所述 概率分布特 征对所述隐变量进行随机分布采样。 4.如权利要求3所述的语义引导的缺陷图像生成方法， 其特征在于， 所述将所述随机变 量和所述掩膜图像合成为第一 缺陷图像的步骤 包括： 将所述随机变量 解码重构为背景图像； 确定所述掩膜图像中的指示 区域， 在所述背景图像与 所述指示 区域的对应位置生成缺 陷区域图像， 得到 完整的第一 缺陷图像。 5.如权利要求1 ‑4任一项所述的语义引导的缺陷图像生成方法， 其特征在于， 所述语义 引导的缺陷图像生成方法还 包括： 获取待训练缺陷图像， 将所述待训练缺陷图像输入初始对抗学习 网络中， 对所述初始 对抗学习网络进行迭代训练， 其中， 所述初始对抗学习网络包括初始生成器和初始判别器； 当迭代训练次数超过预设的迭代次数阈值， 或者预设的总损失函数收敛时， 结束训练， 得到目标生成器和目标判别器。 6.如权利要求5所述的语义引导的缺陷图像生成方法， 其特征在于， 所述对所述初始对 抗学习网络进行迭代训练的步骤 包括： 固定所述初始生成器的生成参数， 将所述待训练缺陷图像和所述掩膜图像输入所述初 始生成器中， 得到第二 缺陷图像； 分别将真实缺陷图像和所述第二 缺陷图像输入所述初始判别器， 得到第一判别结果； 根据所述第 一判别结果确定所述初始生成器的特征匹配损失， 根据所述特征匹配损失 更新所述初始判别器的判别参数。 7.如权利要求5所述的语义引导的缺陷图像生成方法， 其特征在于， 所述训练所述初始 判别器的步骤 包括： 固定所述初始判别器的判别参数， 将所述待训练缺陷图像和所述掩膜图像输入所述初 始生成器中， 得到第三 缺陷图像； 将所述第三 缺陷图像输入所述初始判别器， 得到第二判别结果； 根据所述第二判别结果和所述第三缺陷图像之间的差异确定所述初始生成器的图像 生成损失， 根据所述图像生成损失更新所述初始生成器的生成参数。权　利　要　求　书 1/2 页 2 CN 115409694 A 28.一种语义引导的缺陷图像生成装置， 其特征在于， 所述语义引导的缺陷图像生成装 置包括： 转换模块， 用于获取真实样本图像， 将所述真实样本图像转换为语义引导的隐变量； 处理模块， 用于对所述隐变量进行重参数化处 理， 得到随机变量； 合成模块， 用于获取预设的掩膜图像， 将所述随机变量和所述掩膜图像合成为第一缺 陷图像。 9.一种电子设备， 其特征在于， 所述电子设备包括： 存储器、 处理器及存储在所述存储 器上并可在所述处理器上运行的语义引导的缺陷图像生成程序， 所述语义引导的缺陷图像 生成程序配置为实现如权利要求1至7中任一项所述的语义引导的缺陷图像生成方法的步 骤。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质上存储有语义引 导的缺陷图像生成程序， 所述语义引导的缺陷图像生成程序被处理器执行时实现如权利要 求1至7中任一项所述的语义引导的缺陷图像生成方法的步骤。权　利　要　求　书 2/2 页 3 CN 115409694 A 3