1.本发明涉及机器视觉技术领域，尤其涉及一种增强息肉分割模型泛化性的方法、系统、装置和介质。
背景技术：2.结直肠癌发病率和致死率均占前列，而结直肠癌多由结直肠息肉转变而来，因此对息肉进行早期筛查和治疗非常必要。息肉分割(polyp segmentation)作为一种计算机视觉任务，可以自动地将图像或视频中的息肉部位分割出来，大大地降低医生的工作量，因此建立一套精确的息肉分割模型对于临床医学诊断具有重大意义。
3.目前，基于浅层注意力网络的sanet是与本发明最为接近的现有技术。sanet首先利用颜色交换(ce)操作以消除颜色偏差对模型训练的影响。为了进一步保留小息肉的细节特征，sanet利用浅层注意力模块(sam)以加强模型对神经网络浅层特征的抽取和利用能力。最后，为了解决小息肉图像的前景和背景像素分布不平衡的问题，sanet提出了一种概率矫正策略(pcs)，在模型推理阶段可以根据预测结果动态自适应地对其响应值进行矫正，从而优化分割目标的边缘并降低前背景分布不平衡的影响。通过上述三个模块的应用，使得sanet在小息肉的边界预测上表现良好。
4.虽然sanet可以获得相对准确的结果，但其存在两个重要缺陷：(1)过度依赖精准标注的数据。现有的息肉分割公开数据集的规模往往较小，使得模型泛化能力较差，容易出现过拟合的问题，导致模型表现不稳定，并对噪声很敏感，实际应用效果不够理想；(2)忽视了息肉的帧间一致性。同一息肉具有类似的外观特征，拉近同一息肉在不同图像中的特征距离可以使得模型对噪声标注更加鲁棒。
技术实现要素：5.本发明的主要目的在于提供一种增强息肉分割模型泛化性的方法、系统、装置和介质，能够以精确高效地从图像中分割出息肉部位，并在各种复杂的实际场景中具有更好的泛化性。
6.为实现上述目的，本发明第一方面提供一种增强息肉分割模型泛化性的方法，包括：使用目标框对图片上的息肉进行目标级的框标注，得到目标框标注的图片，并剔除错误标注或难以识别的图片；根据目标框内的图片产生伪标签；使用伪标签过滤所述目标框内图片的背景像素，得到像素级标注的息肉区域；将带有像素级标注的息肉区域粘贴到只有目标框标注的图片中。
7.进一步地，所述增强息肉分割模型泛化性的方法还包括：从一段息肉视频中提取具有相同息肉的两帧图片；将所述两帧图片输入预先创建的息肉分割模型；在所述息肉分割模型的激活层之前提取所述两帧图片的特征；使用预先创建的损失函数缩短所述两帧图片之间的特征距离。
8.进一步地，所述剔除错误标注或未识别的图片包括：将图片上的框标注转变为二
值掩码；使用预训练的sanet模型对图片进行粗糙预测，得到预测结果；若所述预测结果与所述二值掩码的相似度小于预设标准，则标注了二值掩码的图片进行标注框的剔除，或将该图片标注为难识别的图片；若所述预测结果与所述二值掩码相似度大于预设标准，则得到目标框标注的图片。
9.进一步地，所述预测结果与所述二值掩码的差别的判断包括：计算所述二值掩码和所述预测结果的乘积，并将所述乘积乘以2，得到第一计算值；计算所述二值掩码和所述预测结果的和值，得到第二计算值；使用所述第一计算值除以所述第二计算值，得到第三计算值；若所述第三计算值小于0.5，则所述预测结果与所述二值掩码的相似度小于预设标准。
10.进一步地，所述使用伪标签过滤所述目标框内图片的背景像素，得到像素级标注的息肉区域包括：选择所述二值掩码和所述预测结果均等于1的像素设定为前景、均等于0的像素设定为背景；将所述二值掩码和所述预测结果不相等的像素进行过滤，得到像素级标注的息肉区域。
11.进一步地，所述将带有像素级标注的息肉区域粘贴到只有目标框标注的图片中包括：息肉图像融合和息肉标签混合；所述息肉图像融合的方法包括：随机选择带有像素级标注的图片，将息肉区域的图片进行剪切；随机选择带有目标框标注的图片，产生伪标签，并将剪切下的所述息肉区域的图片粘贴到只有目标框标注的图片中；所述标签混合的方法包括：随机选择带有像素级标注的图片，将像素级标注进行剪切；随机选择带有目标框标注的图片，并产生伪标签，并将剪切下的像素级标注粘贴到图片的伪标签上。
12.进一步地，所述特征距离的计算公式为：
[0013][0014]
其中，l
iic
为所述特征距离，i和j为息肉区域的像素索引，ni和nj为息肉区域的像素总和，r和s是所述两帧图片，pr和ps是在所述息肉分割模型的激活层之前提取所述两帧图片的特征。
[0015]
本发明第二方面提供一种增强息肉分割模型泛化性的系统，包括：图像标注模块，用于使用目标框对图片上的息肉进行目标级的框标注，得到目标框标注的图片，并剔除错误标注或难以识别的图片；伪标签产生模块，用于根据目标框内的图片产生伪标签；像素级去噪模块，用于使用伪标签过滤所述目标框内图片的背景像素，得到像素级标注的息肉区域；混合模块，用于将带有像素级标注的息肉区域粘贴到只有目标框标注的图片中。
[0016]
本发明第三方面提供一种电子装置，包括：存储器、处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时，实现上述中的任意一项所述的增强息肉分割模型泛化性方法。
[0017]
本发明第四方面提供一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现上述中的任意一项所述的增强息肉分割模型泛化性方法。
[0018]
本发明提供一种增强息肉分割模型泛化性的方法、系统、装置和介质，有益效果在于：充分利用精准的像素级标注和粗糙的目标框标注，从目标框标注中生成噪声更少、更精
确的像素级伪标签，不仅避免了模型易出现的过拟合问题，还能够显著提高模型的性能。并且通过将带有像素级标注的息肉区域粘贴到只有目标框标注的图片中，能够降低伪标签错误带来的负面影响，从而进一步提升了伪标签的可靠性。
附图说明
[0019]
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0020]
图1为本发明实施例增强息肉分割模型泛化性的方法的流程示意图；
[0021]
图2为本发明实施例增强息肉分割模型泛化性的方法的息肉分割示意图；
[0022]
图3为本发明实施例增强息肉分割模型泛化性的方法和其他不同模型的模型定性结果比较的息肉分割图；
[0023]
图4为本发明实施例增强息肉分割模型泛化性的系统的结构示意框图；
[0024]
图5为本发明实施例电子装置的结构示意框图。
具体实施方式
[0025]
为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而非全部实施例。基于本发明中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
[0026]
请参阅图1，为一种增强息肉分割模型泛化性的方法，包括：
[0027]
s101、使用目标框对图片上的息肉进行目标级的框标注，得到目标框标注的图片，并剔除错误标注或难以识别的图片；
[0028]
s102、根据目标框内的图片产生伪标签；
[0029]
s103、使用伪标签过滤目标框内图片的背景像素，得到像素级标注的息肉区域；
[0030]
s104、将带有像素级标注的息肉区域粘贴到只有目标框标注的图片中。
[0031]
发明人发现，以往的目标框标注往往存在两个问题：(1)错误和不精准的标签过多，给监督带来了噪声；(2)目标框标注只能提供粗糙的轮廓且包含了很多背景像素，直接使用目标框标注作为伪标签会降低模型性能。为了解决上述问题，本实施例提出了ffs来生成噪声干扰更小的伪标签。
[0032]
因此，本实施例提供的增强息肉分割模型泛化性的方法能够充分利用精准的像素级标注和粗糙的目标框标注，从目标框标注中生成噪声更少、更精确的像素级伪标签，不仅避免了模型易出现的过拟合问题，还能够显著提高模型的性能。并且通过将带有像素级标注的息肉区域粘贴到只有目标框标注的图片中，能够降低伪标签错误带来的负面影响，从而进一步提升了伪标签的可靠性。
[0033]
其中，剔除错误标注或未识别的图片包括：将图片上的框标注转变为二值掩码；使用预训练的sanet模型对图片进行粗糙预测，得到预测结果；若预测结果与二值掩码的相似度小于预设标准，则标注了二值掩码的图片进行标注框的剔除，或将该图片标注为难识别
的图片；若预测结果与二值掩码相似度大于预设标准，则得到目标框标注的图片。
[0034]
在本实施例中，预测结果与二值掩码的差别的判断包括：计算二值掩码和预测结果的乘积，并将乘积乘以2，得到第一计算值；计算二值掩码和预测结果的和值，得到第二计算值；使用第一计算值除以第二计算值，得到第三计算值；若第三计算值小于0.5，则预测结果与二值掩码的相似度小于预设标准。
[0035]
对于图像层面的操作，给定一个图像i，我们首先将他的框标注转变成二值掩码b，如图2(a)所示。同时，利用预训练过的模型sanet来获得对图像i的粗糙预测p。如果b和p存在相似度较低时，i将被视为一个困难样本或者一个标注错误的样本，从而将i剔除掉。本发明选择作为相似度的评判标准。
[0036]
对于像素层面的操作，本发明利用b和p的互补性来改进伪标签。具体地，选择b和p均等于1的像素作为前景f，即f＝b∩p。相似地，只有b和p均等于0的像素被视为背景k，即k＝(1-b)∩(1-p)。其余像素被归为不确定区域，如图2(a)所示。通过ffs，可以最大化的利用框标注，并将噪声干扰降到最低。
[0037]
在本实施例中，使用伪标签过滤目标框内图片的背景像素，得到像素级标注的息肉区域包括：选择二值掩码和预测结果均等于1的像素设定为前景、均等于0的像素设定为背景；将二值掩码和预测结果不相等的像素进行过滤，得到像素级标注的息肉区域。
[0038]
在本实施例中，尽管上述实施例中使用ffs提升了伪标签的准确度，标注错误仍然可不避免。如图2(b)所示，为了进一步增强伪标签的可信度，本发明提出map操作，将人工标注的标签和伪标签混合在一起。该模块主要包括三个步骤：(1)随机选择带有像素级标注的图片，将息肉区域图片x
p
剪切下来；(2)随机选择带有目标框标注的图片xa，利用ffs产生更精确的伪标签；(3)将步骤一产生的息肉区域图片粘贴到步骤二的图片中。标注也采取类似的操作，如下列公式所示：
[0039]
x＝m
⊙
x
p
+(1-m)
⊙
xa[0040]
y＝m
⊙yp
+(1-m)
⊙
ya[0041]
其中，y
p
和ya分别代表x
p
和xa的标注。m为混合后的二值掩码，
⊙
为逐元素相乘。通过map模块，我们可以极大增强标注图像的背景多样性，防止背景过拟合。
[0042]
在上述实施例中，绝大多数的息肉分割模型都基于单张图像，忽视了图像间的外观一致性，导致同一息肉的两张图像可能得出截然不同的预测结果。此种情况在训练集很小的时候甚至会变得更加严重。为了解决上述问题，本发明实施例提出了帧间一致性(iic)损失函数来进一步挖掘图像间的关系。
[0043]
在本实施例中，增强息肉分割模型泛化性的方法还包括：从一段息肉视频中提取具有相同息肉的两帧图片；将两帧图片输入预先创建的息肉分割模型；在息肉分割模型的激活层之前提取两帧图片的特征；使用预先创建的损失函数缩短两帧图片之间的特征距离。
[0044]
所述特征距离的计算公式为：
[0045]
[0046]
其中，l
iic
为所述特征距离，i和j为息肉区域的像素索引，ni和nj为息肉区域的像素总和，r和s是所述两帧图片，pr和ps是在所述息肉分割模型的激活层之前提取所述两帧图片的特征。
[0047]
在本实施例中，从每一段息肉视频中提取出两帧图片r和s。由于摄影环境(即肠道和结直肠镜设备)相同，r和s通常具有相似的外观。为了使r和s的预测结果同样具有相似外观，我们将r和s送入息肉分割模型中，并在最后的sigmoid激活层之前提取出他们的特征pr和ps。然后利用mse损失函数来缩短pr和ps之间的特征距离。在此仅涉及息肉部分的像素，背景部分的像素将被直接忽略。在iic损失函数的监督下，本发明所提出的模型可输出更一致的预测结果，并大大降低了过拟合风险。
[0048]
在上述实施例中，使用经过预训练的res2net作为主干网络进行特征提取。综合效率和精度，只采用最后三种分辨率的特征，每种特征均使用64个通道。图像分辨率大小设为352
×
352，特征上采样使用双线性插值算法，使用随机梯度下降算法进行模型优化。本文所用数据采用随机翻转、随机旋转和多尺度训练等方法进行扩增。
[0049]
为了验证上述实施例，发明人还比较了不同模型在kvasir，cvc-clinicdb，cvc-colondb，endoscene，etis等5个数据集上的独立性能以及平均性能(wavg)，请参阅表1。可以看到本发明相对于之前的模型可以大大提升息肉分割的效果。另外，图3展示了不同算法在具体图像上的定性实验结果，可以看到本发明比之前的模型可以获得更完整更清晰的息肉区域。综合上述实验，本发明可以更好的去除数据集中存在的偏差和背景噪声，从而在息肉分割方面有着优秀的表现。
[0050]
表1不同模型和数据集上的定量表
[0051][0052]
因此，本发明实施例提供的一种增强息肉分割模型泛化性的方法来提升息肉分割模型的准确率，主要改进分为以下两个方面：(1)为了避免模型易出现的过拟合问题，本发明充分利用精准的像素级标注和粗糙的目标框标注，设计了一种融合滤波采样(ffs)模块从目标框标注中生成噪声更少、更精确的像素级伪标签，从而显著提高性能。为了进一步提升伪标签的可靠性，本发明进一步引入了精准标注和伪标签混合(map)的策略。具体地，通过将带有像素级标注的息肉区域粘贴到只有目标框标注的图片中，以此来降低伪标签错误
带来的负面影响。(2)考虑到同一息肉的外观一致性，本发明提出了一种帧间一致性(iic)损失函数来缩短同一息肉在不同图像的特征距离，从而使模型对抗噪声标注时更具鲁棒性。大量定量和定性实验表明，本发明所提出的boxpolyp模型可以精确高效地从图像中分割出息肉部位，并在各种复杂的实际场景中具有更好的泛化性。
[0053]
请参阅图4，本技术实施例还提供一种增强息肉分割模型泛化性的系统，包括：图像标注模块1、伪标签产生模块2、像素级去噪模块3及混合模块4；图像标注模块1用于使用目标框对图片上的息肉进行目标级的框标注，得到目标框标注的图片，并剔除错误标注或难以识别的图片；伪标签产生模块2用于根据目标框内的图片产生伪标签；像素级去噪模块3用于使用伪标签过滤目标框内图片的背景像素，得到像素级标注的息肉区域；混合模块4用于将带有像素级标注的息肉区域粘贴到只有目标框标注的图片中。
[0054]
增强息肉分割模型泛化性的系统还包括：图片提取模块、图片输入模块、特征提取模块及特征距离计算模块；图片提取模块用于从一段息肉视频中提取具有相同息肉的两帧图片；图片输入模块用于将两帧图片输入预先创建的息肉分割模型；特征提取模块用于在息肉分割模型的激活层之前提取两帧图片的特征；特征距离计算模块用于使用预先创建的损失函数缩短两帧图片之间的特征距离。
[0055]
特征距离的计算公式为：
[0056][0057]
其中，l
iic
为特征距离，i和j为息肉区域的像素索引，ni和nj为息肉区域的像素总和，r和s是两帧图片，pr和ps是在息肉分割模型的激活层之前提取两帧图片的特征。
[0058]
图像标注模块1包括：二值掩码转变单元、预测单元、剔除单元及标注单元；二值掩码转变单元用于将图片上的框标注转变为二值掩码；预测单元用于使用预训练的sanet模型对图片进行粗糙预测，得到预测结果；剔除单元用于若预测结果与二值掩码的相似度小于预设标准，则标注了二值掩码的图片进行标注框的剔除，或将该图片标注为难识别的图片；标注单元用于若预测结果与二值掩码相似度大于预设标准，则得到目标框标注的图片。
[0059]
剔除单元包括：第一计算子单元、第二计算子单元、第三计算子单元及比较子单元；第一计算子单元用于计算二值掩码和预测结果的乘积，并将乘积乘以2，得到第一计算值；第二计算子单元用于计算二值掩码和预测结果的和值，得到第二计算值；第三计算子单元用于使用第一计算值除以第二计算值，得到第三计算值；比较子单元用于若第三计算值小于0.5，则预测结果与二值掩码的相似度小于预设标准。
[0060]
像素级去噪模块3包括：背景像素设定单元和过滤单元；背景像素设定单元用于选择二值掩码和预测结果均等于1的像素设定为前景、均等于0的像素设定为背景；过滤单元用于将二值掩码和预测结果不相等的像素进行过滤，得到像素级标注的息肉区域。
[0061]
混合模块4包括：图片混合单元和标签混合单元；图片混合单元用于随机选择带有像素级标注的图片，将息肉区域的图片进行剪切；随机选择带有目标框标注的图片，产生伪标签，并将剪切下的息肉区域的图片粘贴到只有目标框标注的图片中；标签混合单元用于随机选择带有像素级标注的图片，将像素级标注进行剪切；随机选择带有目标框标注的图片，并产生伪标签，并将剪切下的像素级标注粘贴到图片的伪标签上。
[0062]
本技术实施例提供一种电子装置，请参阅图5理器602上运行的计算机程序，处理器602执行该计算机程序时，实现前述中描述的增强息肉分割模型泛化性的方法。
[0063]
进一步的，该电子装置还包括：至少一个输入设备603以及至少一个输出设备604。
[0064]
上述存储器601、处理器602、输入设备603以及输出设备604，通过总线605连接。
[0065]
其中，输入设备603具体可为摄像头、触控面板、物理按键或者鼠标等等。输出设备604具体可为显示屏。
[0066]
存储器601可以是高速随机存取记忆体(ram，random access memory)存储器，也可为非不稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器601用于存储一组可执行程序代码，处理器602与存储器601耦合。
[0067]
进一步的，本技术实施例还提供了一种计算机可读存储介质，该计算机可读存储介质可以是设置于上述各实施例中的电子装置中，该计算机可读存储介质可以是前述中的存储器601。该计算机可读存储介质上存储有计算机程序，该程序被处理器602执行时实现前述实施例中描述的增强息肉分割模型泛化性的方法。
[0068]
进一步的，该计算机可存储介质还可以是u盘、移动硬盘、只读存储器601(rom，read-only memory)、ram、磁碟或者光盘等各种可以存储程序代码的介质。
[0069]
在本技术所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述模块的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个模块或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或模块的间接耦合或通信连接，可以是电性，机械或其它的形式。
[0070]
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
[0071]
另外，在本发明各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。
[0072]
所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来。
[0073]
需要说明的是，对于前述的各方法实施例，为了简便描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其它顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定都是本发明所必须的。
[0074]
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其它实施例的相关描述。
[0075]
以上为对本发明所提供的一种增强息肉分割模型泛化性的方法、系统、装置和介质的描述，对于本领域的技术人员，依据本发明实施例的思想，在具体实施方式及应用范围上均会有改变之处，综上，本说明书内容不应理解为对本发明的限制。
技术特征：1.一种增强息肉分割模型泛化性的方法，其特征在于，包括：使用目标框对图片上的息肉进行目标级的框标注，得到目标框标注的图片，并剔除错误标注或难以识别的图片；根据目标框内的图片产生伪标签；使用伪标签过滤所述目标框内图片的背景像素，得到像素级标注的息肉区域；将带有像素级标注的息肉区域粘贴到只有目标框标注的图片中。2.根据权利要求1所述的增强息肉分割模型泛化性的方法，其特征在于，所述增强息肉分割模型泛化性的方法还包括：从一段息肉视频中提取具有相同息肉的两帧图片；将所述两帧图片输入预先创建的息肉分割模型；在所述息肉分割模型的激活层之前提取所述两帧图片的特征；使用预先创建的损失函数缩短所述两帧图片之间的特征距离。3.根据权利要求1所述的增强息肉分割模型泛化性的方法，其特征在于，所述剔除错误标注或未识别的图片包括：将图片上的框标注转变为二值掩码；使用预训练的sanet模型对图片进行粗糙预测，得到预测结果；若所述预测结果与所述二值掩码的相似度小于预设标准，则标注了二值掩码的图片进行标注框的剔除，或将该图片标注为难识别的图片；若所述预测结果与所述二值掩码相似度大于预设标准，则得到目标框标注的图片。4.根据权利要求3所述的增强息肉分割模型泛化性的方法，其特征在于，所述预测结果与所述二值掩码的相似度的判断包括：计算所述二值掩码和所述预测结果的乘积，并将所述乘积乘以2，得到第一计算值；计算所述二值掩码和所述预测结果的和值，得到第二计算值；使用所述第一计算值除以所述第二计算值，得到第三计算值；若所述第三计算值小于0.5，则所述预测结果与所述二值掩码的相似度小于预设标准。5.根据权利要求3所述的增强息肉分割模型泛化性的方法，其特征在于，所述使用伪标签过滤所述目标框内图片的背景像素，得到像素级标注的息肉区域包括：选择所述二值掩码和所述预测结果均等于1的像素设定为前景、均等于0的像素设定为背景；将所述二值掩码和所述预测结果不相等的像素进行过滤，得到像素级标注的息肉区域。6.根据权利要求1所述的增强息肉分割模型泛化性的方法，其特征在于，所述将带有像素级标注的息肉区域粘贴到只有目标框标注的图片中包括：息肉图像融合和息肉标签混合；所述息肉图像融合的方法包括：随机选择带有像素级标注的图片，将息肉区域的图片进行剪切；随机选择带有目标框标注的图片，产生伪标签，并将剪切下的所述息肉区域的图片粘贴到只有目标框标注的图片中；所述标签混合的方法包括：随机选择带有像素级标注的图片，将像素级标注进行剪切；
随机选择带有目标框标注的图片，并产生伪标签，并将剪切下的像素级标注粘贴到图片的伪标签上。7.根据权利要求2所述的增强息肉分割模型泛化性的方法，其特征在于，所述特征距离的计算公式为：其中，l
iic
为所述特征距离，i和j为息肉区域的像素索引，n
i
和n
j
为息肉区域的像素总和，r和s是所述两帧图片，p
r
和p
s
是在所述息肉分割模型的激活层之前提取所述两帧图片的特征。8.一种增强息肉分割模型泛化性的系统，其特征在于，包括：图像标注模块，用于使用目标框对图片上的息肉进行目标级的框标注，得到目标框标注的图片，并剔除错误标注或难以识别的图片；伪标签产生模块，用于根据目标框内的图片产生伪标签；像素级去噪模块，用于使用伪标签过滤所述目标框内图片的背景像素，得到像素级标注的息肉区域；混合模块，用于将带有像素级标注的息肉区域粘贴到只有目标框标注的图片中。9.一种电子装置，包括：存储器、处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时，实现权利要求1至7中的任意一项所述方法。10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现权利要求1至7中的任意一项所述方法。
技术总结本发明公开了一种增强息肉分割模型泛化性的方法、系统、装置和介质，方法包括：使用目标框对图片上的息肉进行目标级的框标注，得到目标框标注的图片，并剔除错误标注或难以识别的图片；根据目标框内的图片产生伪标签；使用伪标签过滤目标框内图片的背景像素，得到像素级标注的息肉区域将带有像素级标注的息肉区域粘贴到只有目标框标注的图片中；本发明能够从目标框标注中生成噪声更少、更精确的像素级伪标签，不仅避免了模型易出现的过拟合问题，还能够显著提高模型的性能。并且通过将带有像素级标注的息肉区域粘贴到只有目标框标注的图片中，能够降低伪标签错误带来的负面影响，从而进一步提升了伪标签的可靠性。从而进一步提升了伪标签的可靠性。从而进一步提升了伪标签的可靠性。
技术研发人员：李镇 周少华 魏军 胡译文 万翔 崔曙光
受保护的技术使用者：深圳市大数据研究院
技术研发日：2022.07.13
技术公布日：2022/11/1
