关注微信公众号:人工智能前沿讲习
重磅干货,第一时间送达
摘要
- 随着医学成像技术和计算机技术的不断发展和进步,医学图像分析已成为医学研究、临床疾病诊断和治疗中一个不可或缺的工具和技术手段。近几年来,深度学习(Deep learning,DL),特别是深度卷积神经网络(Convolutional neural networks,CNNs)已经迅速发展成为医学图像分析的研究热点,它能够从医学图像大数据中自动特区隐含的疾病诊断特征。本文首先简述医学图像分析的特点;其次,论述深度学习的基本原理,介绍主要用于医学图像分析的主要深度学习技术;然后分别论述深度学习在医学图像分类、检测、分割、配准、检索、图像生成和增强等各领域的国内外研究现状;最后,讨论归纳医学图像分析深度学习方法未来要面临的挑战和应对的策略。
- 关键词:医学图像分析;深度学习;卷积神经网络
1、介绍
- 在医学图像领域,医生或者研究人员在对某种特定的内部组织器官进行定量分析、实时监控和治疗规划时,为了做出正确的治疗决策,通常需要了解这种组织器官的一些详细信息。所以生物医学影像已成为疾病诊断和治疗中不可或缺的组成部分,且日益重要。
- 核磁共振成像 (Magnetic resonance image, MRI)、正电子发射断层扫 描 (Positron emission tomography, PET)、计算机 断层扫描 (Computer tomography, CT)、锥形束 CT、3D 超声成像等医学影像技术目前已广泛应用于临床检查、诊断、治疗与决策。如何充分利用人工智能深度学习方法分析处理这些超大规模的医学图像大数据,为临床医学中各种重大疾病的筛查、诊断、疗效评估提供科学方法,是当前医学图像分析领域急需解决的重大科学问题和前沿医学影像关键技术。
- 医学图像分析最初主要采用边缘检测、纹理特征、形态学滤波以及构建形状模型和模板匹配等方法。这类分析方法通常针对特定任务而设计,被称为手工定制式设计方法。而深度学习是以数据驱动方式分析任务,能自动地从特定问题的大规模数据集中学习相关模型特征和数据特性。与针对特定问题而显式地手工设计模型不同,深度学习方法可直接从数据样本中隐式地自动学习医学图像特征,其学习过程本质上是一个优化问题的求解过程。通过学习,模型从训练数据中选择正确的特征,使其在测试新数据时做出正确决策。因此,深度学习在医学图像 分析中起着至关重要的作用。
- 近年来, 深度学习不断取得重大进展, 主要得益于不断提高的计算能力和持续增长的可用数据量,以及深度学习模型及其算法的不断改进。其实质是通过构建多隐层的机器学习模型,利用海量的样本数据训练,学习更精准的特征,最终提高分类或预测的准确性[1]。 深度学习这种从数据中学习层次特征的特点,使得它非常适合发现高维数据中的复杂结构,目前深度学习已经应用到图像识别、语音识别、自然语言处理、天气预测、基因表达、内容推荐等领域和各种挑战赛中。
- 深度学习在计算机视觉领域的巨大成功, 激发了国内外许多学者将其应用于医疗图像分析。近年来,已有多位专家对深度学习在医学图像分析中的研究现状及问题进行了总结、评述和讨论。最近,Medical Image Analysis上发表的综述对深度学习在医学图像分类、检测和分割、配准 和检索等方面的研究进行了较全面的归纳总结[2] 。
2、医学图像分析的特点
- 医学图像分析已广泛应用于良恶性肿瘤、脑功能与精神障碍、心脑血管疾病等重大疾病的临床辅助筛查、诊断、分级、治疗决策与引导、疗效评估等方面。医学图像分类与识别、定位与检测、组织器官与病灶分割是当前医学图像分析深度学习方法研究主要应用领域。不同成像原理的医学图像分析和计算机视觉领域中的自然图像分析存在较大的差别。至今为止,国内外学者主要针对MRI、CT、X射线、超声、PET、病理光学显微镜等不同成像原理的医学图像分析任务开展了一系列的深度学习研究工作。因此,本节主要简述这几种医学图像的分析。
2.1 常见的医学图像
- MRI图像:核磁共振图像(MRI),该图像是人体组织器官和病灶中的氢原子核在外部强磁场作用下产生的磁共振信号大小的度量,并通过计算机对体外核磁共振信号探测器接收到的信息数据进行3D图像重建。它能够提供非常清晰的人体软组织解剖结构和病灶影像。
- CT图像:计算机断层扫描(CT)利用精确准直的X射线束对人体某部位一定厚度的断面进行照射扫描,并由与射线线束一起旋转的探测器接收透射穿过该断面的X射线,最后,计算机根据探测器接收到的X射线信号数据重建相应人体断面的3D图像。它具有亚毫米级的空间分辨率,能够提供清晰的人体骨性组织解剖结构和病灶影像,已广泛应用于多种临床疾病检查和辅助诊断。
- X射线图像:医学X射线图像是人体不同组织器官和病灶的电子密度度量影像。基于X射线的成像包括2D的计算机放射成像、数字化 X 射线摄影术、数字减影血管造影术和乳房X线摄影术,以及3D的螺旋计算机断层扫描术等,已广泛地应用于骨科、肺部、乳腺和心血管等临床疾病检测和辅助诊断,但2DX射线图像不能提供人体组织器官和病灶的三维立体信息。
- 超声成像:利用超声束扫描人体,通过对反射信号的接收、处理,以获得体内器官的图像。近年来,超声成像技术不断发展,出现了 3D 彩超、超声全息摄影、体腔内超声成像、彩色多普勒成像及超声生物显微镜等新的超声成像技术。
- PET图像:正电子发射断层扫描(PET)利用F18等