《苏州医工所杨晓冬课题组在皮肤镜病灶分割模型研究中取得重要进展》

  • 来源专题:生物安全知识资源中心—领域情报网
  • 编译者: hujm
  • 发布时间:2022-05-19
  • 皮肤癌是世界上最常见的、增长最快的癌症之一。其中,黑素瘤是最恶性的皮肤癌,2018年就新增28.77万人并导致6.07万人死亡。皮肤镜是皮肤科医生用来区分黑色素瘤的使用最广泛的工具之一,皮肤镜图像中病灶的自动精准分割是计算机辅助皮肤癌诊断的基础步骤,其可提供病灶的位置、形状、大小等定量信息,对提高皮肤癌诊断的准确性和效率具有重要作用。

      然而,由于皮肤癌病灶往往呈现多变的尺度、不规则的形状、模糊的边界以及毛发等噪声的干扰,现存的分割模型面临着类内不一致、类间难区分的挑战(如图1所示,病灶内部的孔洞以及病灶边界附近割裂的片段)。

    针对此问题,苏州医工所杨晓冬课题组提出了一种基于全局和局部像素间相关性学习的皮肤癌病灶分割算法。该算法整体结构如图2所示,在编码器-解码器架构下,首先设计了金字塔transformer像素间相关性模块,旨在捕获不同层次的非局部上下文信息,并进一步探索全局像素级相关性,以应对病灶形状及尺寸的大变化性。此外,还设计了局部邻域度量学习模块,以增强分割模型的局部语义相关性学习能力,提高特征空间中类别之间的可分离性。该算法通过同时学习建模全局和局部像素间相关性来增加类间差异与类内一致性,在三个公开皮肤镜数据集(ISIC2018、ISIC2016、PH2)上进行了实验,算法性能达到了当前最好的水平,部分代表性的分割结果如图3所示。

    该研究成果 “ICL-Net: Global and Local Inter-pixel Correlations Learning Network for Skin Lesion Segmentation” 已在线发表在 IEEE Journal of Biomedical and Health Informatics杂志上。论文第一作者为研究生曹维维,郑健研究员与常州二院倪昕晔教授为通讯作者。该项工作受到江苏省卫健委(M2020006)、浙江省科技厅(LQ19H110001)和苏州市科学技术局(SJC2021023)、常州市医学物理重点实验室(CM20193005)等项目的经费支持。 

      论文链接:https://ieeexplore.ieee.org/abstract/document/9745347

  • 原文来源:http://www.sibet.cas.cn/kxyj2020/kyjz_169572/202205/t20220518_6449916.html
相关报告
  • 《苏州医工所杨晓冬课题组在放疗影像配准模型研究中取得进展》

    • 来源专题:生物安全知识资源中心—领域情报网
    • 编译者:hujm
    • 发布时间:2022-11-21
    •   放射治疗是利用射线对肿瘤细胞进行定点清除的技术,是癌症治疗的重要技术手段。为了实现最大化照射肿瘤病灶同时保护周围组织和器官,基于多模态影像(计算机断层成像(CT),磁共振(MRI),超声(US)以及锥形束CT(CBCT))等引导的放疗技术受到了极大关注。其中,锥形束CT(CBCT)图像具有骨组织对比度高,空间分辨率高等优势,相比于其他影像引导技术,CBCT图像引导放疗是目前使用最广的图像引导技术。放疗医师通过将定位CT图像与治疗实施阶段扫描的CBCT图像进行刚性或弹性配准,进行分次治疗间的摆位及剂量验证,使得肿瘤的精准放疗成为可能。   然而,由于CT和CBCT图像之间的灰度差异、结构信息不一致、CBCT图像质量差等因素的干扰,快速准确的CT-to-CBCT图像配准算法研究仍然具有很大的挑战性(如图一所示,在CBCT和CT相同解剖位置处,CBCT图像中存在较为严重的伪影)。传统配准算法普遍采用迭代式的优化算法,运行时间较长,实时性差。目前,相关研究工作前沿主要集中于利用深度学习理论研究快速、准确的配准方法。但是,这些工作面对CBCT和CT图像域之间的分布差异、以及CBCT中的噪声伪影干扰,并没有进行深入研究。 针对此问题,苏州医工所杨晓冬课题组提出了一种基于边界梯度引导和跨域特征融合的配准算法。该算法整体结构如图2所示,包含两个重要模块:边界引导注意力模块(EGAM)和跨域注意力模块(CDAM),共同组成了跨域融合的配准网络。该网络分别利用两个相同结构的卷积流,以非耦合的方式分别提取CT和CBCT两个图像域中特有的图像特征。此外,边界引导注意力模块充分挖掘梯度图像的边界信息,引导配准网络建模CT和CBCT中相关解剖结构之间的对应关系,并抑制CBCT中的噪声伪影;跨域注意力模块利用全局和局部信息引导来自两个图像域的特征映射至一个公共空间,以缓解图像域之间的分布差异。   该算法在真实的临床CT-CBCT数据集上进行实验,与其他先进的配准方法相比取得了最优性能。与传统的配准方法相比,该方法在TRE、DSC、以及MHD指标上均获得显著提升。其中,TRE误差从4.00mm降低至2.27mm,DSC指标从74.02%提升到了80.01%,MHD距离也从1.62mm降低至1.50mm。在同样的硬件条件下,该方法在运行速度上有近10倍的提升。此外,该算法还在公开肺部4D-CT数据集(Dir-Lab)上取得了具有竞争力的配准性能,展现了该方法在单模图像配准中的潜力。未来,团队将会针对图像引导放疗中多模态影像配准的痛点问题,进行更加深入的研究,助力临床放疗精度和疗效的提升。  该研究成果“CDFRegNet: A Cross-domain Fusion Registration Network for CT-to-CBCT Image Registration.” 已发表在Computer Methods and Programs in Biomedicine杂志上。论文第一作者为研究生曹玉柱,苏州医工所郑健研究员与常州二院倪昕晔教授为通讯作者。该项工作受到山东省自然科学基金(ZR2021MH213)、苏州市科学技术局(SS202087, SJC2021023)、江苏省卫健委(M2020006)、常州市医学物理重点实验室(CM20193005)等项目的经费支持。   论文链接:https://www.sciencedirect.com/science/article/abs/pii/S0169260722004072
  • 《苏州医工所杨晓冬课题组X射线成像团队在低剂量CT成像方向取得重要进展》

    • 来源专题:生物安全知识资源中心—领域情报网
    • 编译者:hujm
    • 发布时间:2023-04-11
    • 深度重建是目前前沿的CT成像领域,它充分利用了“深度学习+大数据+并行计算”实现了高质量、低辐射和高速度重建。在公开仿真的AAPM(美国医学物理协会)数据集上,深度学习成像方法的性能在不断取得突破的同时也在日趋饱和,其发展正逐渐面临来自真实临床成像场景应用的挑战。考虑到深度学习方法是一种数据驱动的方法,其非常依赖于训练数据与测试数据特征分布的一致性,然而,现有网络模型的构建多基于仿真的公开数据集,其噪声水平和特征分布相对单一,与复杂的临床场景相差较大,故采用仿真数据训练的模型,很难泛化到真实的临床应用。   为解决上述的域泛化成像问题,针对不同数据间的语义和噪声分布呈现的互补特性,苏州医工所医学影像室杨晓冬课题组团队设计了基于互补学习和迁移学习的网络框架,如图1所示,将无监督的图像合成任务转化为两阶段的有监督的子训练任务,实现高质量的临床数据合成。   利用合成的图像数据开展真实临床场景的域泛化成像实验,所提的方法可以大幅度提升现有深度学习方法在目标域的成像表现,进而验证了开展域泛化成像的必要性与可行性,具体结果如图2和表1所示。该项工作的实现有望突破现有深度重建方法的局限性,为深度跨域成像问题的解决提供新思路,可支撑面向真实临床应用的跨域成像问题,同时也可以解决不同厂商的设备之间和同一厂商不同型号的设备之间的跨域成像问题。   相关的理论成果发表于生物医学成像领域顶级期刊IEEE Transactions on Medical Imaging (中国科学院一区TOP IF=11.037)。   论文链接:https://ieeexplore.ieee.org/document/10081080