[发明专利]基于掩膜区域卷积神经网络的荧光编码微球图像检测方法

摘要

本发明涉及计算机视觉的图像处理领域，为在悬浮芯片技术基础上，针对分析方法中存在的成本较高、准确度不足等问题，结合显微图像采集技术，可准确检测待检物种类与浓度，具有操作简单、灵活、成本低等优点，本发明，基于掩膜区域卷积神经网络的荧光编码微球图像检测方法,步骤如下：步骤1：微球图像获取；步骤2：图像裁剪与标注；步骤3：训练样本集与测试集建立；步骤4：掩膜区域卷积神经网络搭建；步骤5：网络训练和验证，利用随机梯度下降法进行训练掩膜区域卷积神经网络；步骤6：图像采集与分析。本发明主要应用于计算机图像处理场合。

主权项

1.一种基于掩膜区域卷积神经网络的荧光编码微球图像检测方法，其特征是，步骤如下：步骤1：微球图像获取：将多种携带已知编码荧光信息的微球和对应待检物质置入同一液相反应体系中，令微球表面探针分子与对应待检物发生免疫反应相结合，反应一段时间后，利用陷阱芯片俘获微球，将微球固定在陷阱芯片上，首先使用980nm波长激光对陷阱芯片进行扫描，激发微球内部荧光物质，利用电荷耦合器件(Charge‑coupled Device,CCD)图像传感器获得待检物定性图像；然后使用激光激发微球表面待检物结合的荧光分子，利用CCD图像传感器获得待检物定量图像；反复重复实验过程，获得多对定性和定量图像，将定性图像和定量图像分开，分别构成荧光编码微球定性图像集和定量图像集；步骤2：图像裁剪与标注：对步骤1中获得的荧光编码微球定性图像集进行剪裁处理，剪裁成指定大小的图像组成未标注定性图像集，然后由专业人士对未标注图像集进行标注，标注信息包括每个微球轮廓多边形的所有顶点坐标和微球种类，标注结果保存，微球图像和标注信息共同构成有标注定性图像集；步骤3：训练样本集与测试集建立，将有标注定性图像集按比例随机划分为两部分，其中一部分作为训练样本集，用于模型训练；另一部分作为验证样本集，用于模型评估；步骤4：掩膜区域卷积神经网络搭建：掩膜区域卷积神经网络由特征提取骨干网络、候选区域提案网络、候选区域分类网络、掩膜生成网络四部分构成，首先一幅输入图像被送入特征提取骨干网络用于提取整幅图像的图像特征；得到的特征图被送入候选区域提案网络中生成待检测框，并对生成的待检测框进行第一次修正；最后将候选区域提案网络的输出，分别送入候选区域分类网络和掩膜生成网络，对候选区域进行分类，进一步修正目标框范围，预测掩膜区域；步骤5：网络训练和验证，利用随机梯度下降法进行训练掩膜区域卷积神经网络；步骤6：图像采集与分析，利用CCD图像传感器采集一对定性和定量图像，将定性图像输入Mask R‑CNN网络，得到输出掩膜，使用输出掩膜作为定量图像的分类准则，提取出定量图像中属于各种类待检物的像素，各种类像素灰度值取平均后作为该种类待检物浓度分析指标。