针对上述问题,中国科学院苏州生物医学工程技术研究所杨晓冬课题组等提出了一种基于全局和局部像素间相关性学习的皮肤癌病灶分割算法。在编码器-解码器架构下,研究人员设计了金字塔transformer像素间相关性模块,旨在捕获不同层次的非局部上下文信息,并进一步探索全局像素级相关性,以应对病灶形状及尺寸的大变化性;此外,设计了局部邻域度量学习模块,以增强分割模型的局部语义相关性学习能力,提高特征空间中类别之间的可分离性。该算法通过同时学习建模全局和局部像素间相关性来增加类间差异与类内一致性,在三个公开皮肤镜数据集(isic2018、isic2016、ph2)上进行了实验,算法性能达到较高水平。
该研究成果以icl-net: global and local inter-pixel correlations learning network for skin lesion segmentation为题在线发表在ieee journal of biomedical and health informatics上。研究工作获得江苏省卫生健康委员会、浙江省科学技术厅和苏州市科学技术局、常州市医学物理重点实验室等项目的支持。
图1基线方法(resunet)和提出方法的分割结果
图2分割算法网络结构
图3分割结果对比