(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211360325.1 (22)申请日 2022.11.02 (71)申请人 杭州华得森生物技 术有限公司 地址 310000 浙江省杭州市滨江区江陵路 88号4幢3楼 (72)发明人 张开山　赵丹　高阳　饶浪睛　 李超　刘艳省　于杰　田华　 (74)专利代理 机构 杭州汇和信专利代理有限公 司 33475 专利代理师 吴琰 (51)Int.Cl. G06V 10/764(2022.01) G06V 10/80(2022.01) G06V 10/82(2022.01) G06V 10/56(2022.01)G06V 10/54(2022.01) G06V 10/50(2022.01) G06V 10/30(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 基于机器视觉的肿瘤细胞检测设备及其方 法 (57)摘要 本申请公开了一种基于机器视觉的肿瘤细 胞检测设备及其方法。 其首先将获取的待检测样 本的染色图降噪模块进行 降噪后得到的降噪后 染色图从RGB颜色空间转化到YCbCr颜色空间并 提取各个通道的LBP纹理特征直方图， 接着， 将所 述各个通道的LBP纹理特征直方图分别通过第一 卷积神经网络模型以得到多个纹理特征图并将 所述多个纹理特征图进行级联以得到纹理特征 图， 然后， 将所述降噪后染色图通过第二卷积神 经网络模型以得到颜色特征图， 最后， 融合所述 颜色特征图和所述纹理特征图以得到分类特征 图并将所述分类特征图通过分类器以得到用于 表示待检测样本是否含有甲胎蛋白受体的分类 结果。 通过这样的方式， 就能够提高肿瘤细胞检 测的精准度。 权利要求书3页 说明书13页 附图4页 CN 115410050 A 2022.11.29 CN 115410050 A 1.一种基于 机器视觉的肿瘤 细胞检测设备， 其特 征在于， 包括： 染色图采集模块， 用于获取待检测样本的染色图； 降噪模块， 用于将所述染色图通过基于自动 编码器的降噪模块以得到降噪后染色图； 颜色空间转换模块， 用于将所述降噪后染色图从RGB颜色空间转化到YCbCr颜色空间并 提取各个通道的LBP纹 理特征直方图； 纹理特征编码模块， 用于将所述各个通道的LBP纹理特征直方图分别通过作为特征提 取器的第一卷积神经网络模型以得到多个纹理特征图， 并将所述多个纹理特征图进行级联 以得到纹 理特征图； 颜色特征编码模块， 用于将所述降噪后染色图通过作为特征提取器的第 二卷积神经网 络模型以得到颜色特 征图； 异质特征融合模块， 用于融合所述颜色特征图和所述纹理特征图以得到分类特征图； 以及 检测结果生成模块， 用于将所述分类特征图通过分类器以得到分类结果， 所述分类结 果用于表示待检测样本是否含有甲胎蛋白受体。 2.根据权利要求1所述的基于机器视觉的肿瘤细胞检测设备， 其特征在于， 所述降噪模 块， 包括： 编码单元， 用于将所述染色图输入所述降噪模块的编码器， 其中， 所述编码器使用卷积 层对所述染色图进行显式空间编码以得到染色图特 征； 解码单元， 用于将所述染色图特征输入所述降噪模块的解码器， 其中， 所述解码器使用 反卷积层对所述染色图特 征进行反卷积处 理以得到所述降噪后染色图。 3.根据权利要求2所述的基于机器视觉的肿瘤细胞检测设备， 其特征在于， 所述纹理特 征编码模块， 进一步用于： 使用所述作为特征提取器的第一卷积神经网络模型 的各层在层 的正向传递中对输入数据分别进 行二维卷积处理、 基于特征矩阵的均值池化处理和非线性 激活处理以由所述作为特征提取器的第一卷积神经网络模型的最后一层输出所述多个纹 理特征图， 其中， 所述作为特征提取器的第一卷积神经网络模型 的第一层的输入为所述各 个通道的LBP纹 理特征直方图。 4.根据权利要求3所述的基于机器视觉的肿瘤细胞检测设备， 其特征在于， 所述颜色特 征编码模块， 进一步用于： 使用所述作为特征提取器的第二卷积神经网络模型 的各层在层 的正向传递中对输入数据分别进 行二维卷积处理、 基于特征矩阵的均值池化处理和非线性 激活处理以由所述作为特征提取器的第二卷积神经网络模型的最后一层输出所述颜色特 征图， 其中， 所述作为特征提取器的第二卷积神经网络模型 的第一层的输入为所述降噪后 染色图。 5.根据权利要求4所述的基于机器视觉的肿瘤细胞检测设备， 其特征在于， 所述异质特 征融合模块， 进一步用于： 以如下公式融合所述颜色特征图和所述纹理特征图以得到所述 分类特征图； 其中， 所述公式为：权　利　要　求　书 1/3 页 2 CN 115410050 A 2其中 、 和 分别表示所述颜色特征图、 所述纹理特征图和所述分类特征图， 表示 所述纹理特征图的各个位置的特征值， 表示所述纹理特征图的各个位置的特征值的全局 均值， 是所述纹理特征图的尺度， 且 是加权超参数， 表示按位置加法， 表示按位置点 乘， 表示数值的指数运算， 所述数值的指数运算表示计算以所述数值为幂的自然指数 函数值。 6.根据权利要求5所述的基于机器视觉的肿瘤细胞检测设备， 其特征在于， 所述检测结 果生成模块， 进一步用于： 使用所述分类器以如下公式对所述分类特征图进行处理以得到 分类结果； 其中， 所述公式为： ， 其中， 到 为 权重矩阵， 到 为偏置向量， 为所述分类特 征图投影为向量。 7.一种基于 机器视觉的肿瘤 细胞检测方法， 其特 征在于， 包括： 获取待检测样本的染色图； 将所述染色图通过基于自动 编码器的降噪模块以得到降噪后染色图； 将所述降噪后染色图从RGB颜色空间转化到YCbCr颜色空间并提取各个通道的LBP纹理 特征直方图； 将所述各个通道的LBP纹理特征直方图分别通过作为特征提取器的第 一卷积神经网络 模型以得到多个纹 理特征图， 并将所述多个纹 理特征图进行级联以得到纹 理特征图； 将所述降噪后染色图通过作为特征提取器的第二卷积神经网络模型以得到颜色特征 图； 融合所述颜色特 征图和所述纹 理特征图以得到分类特 征图； 以及 将所述分类特征图通过分类器以得到分类结果， 所述分类结果用于表示待检测样本是 否含有甲胎蛋白受体。 8.根据权利要求7所述的基于机器视觉的肿瘤细胞检测方法， 其特征在于， 所述将所述 染色图通过基于自动 编码器的降噪模块以得到降噪后染色图， 包括： 将所述染色图输入所述降噪模块的编码器， 其中， 所述编码器使用卷积层对所述染色 图进行显式空间编码以得到染色图特 征； 将所述染色图特征输入所述降噪模块的解码器， 其中， 所述解码器使用反卷积层对所 述染色图特 征进行反卷积处 理以得到所述降噪后染色图。 9.根据权利要求8所述的基于机器视觉的肿瘤细胞检测方法， 其特征在于， 所述将所述 各个通道的LBP纹理特征直方图分别通过作为特征提取器的第一卷积神经网络模型以得到 多个纹理特征图， 包括： 使用所述作为特征提取器的第一卷积神经网络模型 的各层在层的 正向传递中对输入数据分别进 行二维卷积处理、 基于特征矩阵的均值池化处理和非线性激权　利　要　求　书 2/3 页 3 CN 115410050 A 3