首页> 中国专利> 基于深度学习的快速全身弥散加权成像方法及相关设备

基于深度学习的快速全身弥散加权成像方法及相关设备

摘要

本发明公开了一种基于深度学习的快速全身弥散加权成像方法及相关设备,该方法包括:获取待重建图像;将所述待重建图像输入图像重建模型,得到重建全采样图像,其中,所述图像重建模型为深度学习模型基于全身弥散加权成像图像训练集通过模型训练得到的,所述全身弥散加权成像图像训练集包括多个训练样本对,每个所述训练样本对包括样本冠状位全采样图像和对应的冠状位零填充图像。通过实施本发明实施例,将深度学习技术应用于WB‑DWI快速成像中,在保证图像质量的前提下,极大的提高了WB‑DWI的采集速度,有利于WB‑DWI的推广应用,提高MRI设备的工作效率。

著录项

  • 公开/公告号CN113066145A

    专利类型发明专利

  • 公开/公告日2021-07-02

    原文格式PDF

  • 申请/专利权人 武汉聚垒科技有限公司;

    申请/专利号CN202110368677.0

  • 申请日2021-04-29

  • 分类号G06T11/00(20060101);G06K9/62(20060101);G06N3/04(20060101);G06N3/08(20060101);

  • 代理机构42278 武汉智正诚专利代理事务所(普通合伙);

  • 代理人熊远

  • 地址 430000 湖北省武汉市东湖新技术开发区大学园路13号-1华中科技大学科技园现代服务业基地1号研发楼3层305-43号

  • 入库时间 2023-06-19 11:42:32

说明书

技术领域

本发明涉及医学图像处理技术领域,尤其涉及一种基于深度学习的快速全身弥散加权成像方法及相关设备。

背景技术

弥散加权成像(Diffusion weighted imaging,DWI)是唯一能够活体检测水分子扩散情况的无创影像检查技术,也是临床应用最多的一个磁共振功能序列。全身弥散加权成像(whole-body diffusion weighted imaging,WB-DWI)是对包括头、颈、胸、腹、盆等全身各部位进行DWI检查的方法。WB-DWI是评估恶性淋巴瘤、骨髓瘤等系统性肿瘤疾病以及恶性肿瘤(前列腺癌、肺癌、黑色素瘤)全身转移的重要影像技术之一。在许多恶性疾病的诊疗中,WB-DWI有望取代18F-氟脱氧葡萄糖(18F-FDG)正电子发射断层扫描(PET-CT)。与PET-CT相比,WB-DWI具有价格低廉、无需注射对比剂、无电离辐射等优点,且对一些小的具有更高的敏感性,具有极大的临床价值与广阔的应用前景。

虽然WB-DWI具有良好临床应用前景,但是由于需要对包括头、颈、胸、腹、盆等的全身各部位进行大范围扫描,所需要的扫描时间较长,一个完整的WB-DWI扫描时间为30-60分钟。扫描时间越长,患者的耐受性越差,运动伪影也会增加,也将降低WB-DWI定量参数的可重复性和可靠性。受限于过长的扫描时间,目前WB-DWI并未广泛应用于临床中。为了缩短扫描时间,通常采用减少采集b值数目或降低图像分辨率方法,这些方法是以牺牲图像功能(不能进行多模型重建)和降低图像质量为代价的。因此,迫切需要采用新的技术和方法,在保证WB-DWI图像质量的前提下,有效缩短扫描时间。

近年来深度学习在图像分类、图像复原、超分辨率重建等领域取得很大进展,基于深度学习的MRI重建也得到了广泛的研究。基于深度学习的MRI重建使用数据驱动的方法提取深度图像特征,通过大量训练集学习欠采样图像和全采样图像之间的映射关系。相比于CS-MRI,基于深度学习的磁共振成像(Magnetic Resonance Imaging,MRI)重建方法在加速倍数、重建速度、重建质量等方面具有显著优势。目前基于深度学习的MRI重建主要以脑部、膝关节等MRI的图像为研究对象。而WB-DWI采集时间较长,可以获得的样本量较少,且全身弥散涉及人体的多个器官,解剖结构复杂,这使得将深度学习应用于WB-DWI欠采样重建面临很大困难。

发明内容

本发明的目的在于针对现有技术的不足之处,提供一种基于深度学习的快速全身弥散加权成像方法及相关设备,以在保证图像质量的前提下,提高WB-DWI的采集速度。

第一方面,本发明实施例提供了一种基于深度学习的快速全身弥散加权成像方法,该方法包括:

获取待重建图像;

将所述待重建图像输入图像重建模型,得到重建全采样图像,其中,所述图像重建模型为深度学习模型基于全身弥散加权成像图像训练集通过模型训练得到的,所述全身弥散加权成像图像训练集包括多个训练样本对,每个所述训练样本对包括样本冠状位全采样图像和对应的冠状位零填充图像。

结合第一方面,在一种可能的实施方式中,所述将所述待重建图像输入图像重建模型,得到重建全采样图像之前,还包括:

构建所述全身弥散加权成像图像训练集;

获取所述深度学习模型和损失函数;

以所述冠状位零填充图像作为输入且所述样本冠状位全采样图像作为输出,对所述深度学习模型进行模型训练,以确定所述损失函数最小时的模型参数,得到所述图像重建模型。

结合第一方面,在一种可能的实施方式中,所述构建所述全身弥散加权成像图像训练集,包括:

获取多个样本全采样图像;

分别对多个所述样本全采样图像进行回顾性下采样后进行零填充重建,得到多个零填充图像;

对多个所述样本全采样图像和对应的所述零填充图像进行冠状位重建,得到多个所述样本冠状位全采样图像和对应的所述冠状位零填充图像;

将多个所述样本冠状位全采样图像和对应的所述冠状位零填充图像组合,得到多个所述训练样本对。

结合第一方面,在一种可能的实施方式中,所述以所述冠状位零填充图像作为输入且所述样本冠状位全采样图像作为输出,对所述深度学习模型进行模型训练,以确定所述损失函数最小时的模型参数,得到所述图像重建模型,包括:

以所述冠状位零填充图像作为输入且所述样本冠状位全采样图像作为输出,利用反向传播算法和均方误差法确定所述损失函数最小时的模型参数。

结合第一方面,在一种可能的实施方式中,所述样本冠状位全采样图像和所述冠状位零填充图像均被进行归一化处理。

结合第一方面,在一种可能的实施方式中,多个所述样本全采样图像包括健康人的全采样图像和/或疾病患者的全采样图像。

结合第一方面,在一种可能的实施方式中,所述深度学习模型为DC-CNN模型或者RDN模型。

第二方面,本发明实施例提供一种基于深度学习的快速全身弥散加权成像装置,该图像处理装置包括实现第一方面,或者第一方面的任一可能的实现方式所描述的方法中的全部或者部分功能模块。

第三方面,本发明实施例提供一种基于深度学习的快速全身弥散加权成像装置,该图像处理装置包括至少一个处理器和存储器,所述存储器和所述至少一个处理器通过线路互联,所述至少一个存储器中存储有计算机程序;所述计算机程序被所述处理器执行时,实现第一方面,或者第一方面的任一项可能的实现方式所描述的方法。

第四方面,本发明实施例提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,当计算机程序在处理器上运行时,实现第一方面,或者第一方面的任一项可能的实现方式所描述的方法。

通过实施本发明实施例,将深度学习技术应用于WB-DWI快速成像中,在保证图像质量的前提下,极大的提高了WB-DWI的采集速度,有利于WB-DWI的推广应用,提高MRI设备的工作效率。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对本发明实施例或背景技术中所需要使用的附图作简单地介绍。

图1是本发明实施例提供的一种基于深度学习的快速全身弥散加权成像方法的流程示意图之一;

图2是本发明实施例提供的一种基于深度学习的快速全身弥散加权成像方法的流程示意图之二;

图3是本发明实施例提供的一种基于深度学习的快速全身弥散加权成像方法的流程示意图之三;

图4是本发明实施例提供的一种基于深度学习的快速全身弥散加权成像装置的结构示意图之一;

图5是本发明实施例提供的一种基于深度学习的快速全身弥散加权成像装置的结构示意图之二。

具体实施方式

下面将结合附图对本发明实施例中的技术方案进行描述。

请参见图1,图1是本发明实施例提供的一种基于深度学习的快速全身弥散加权成像方法,该方法包括但不限于如下步骤:

步骤S110:获取待重建图像。

步骤S120:将所述待重建图像输入图像重建模型,得到重建全采样图像。

具体而言,图像重建模型为深度学习模型基于全身弥散加权成像图像训练集通过模型训练得到的,全身弥散加权成像图像训练集包括多个训练样本对,每个训练样本对包括样本冠状位全采样图像和对应的冠状位零填充图像。

可选的,在执行步骤S120之前,还可以通过步骤S131-S133来得到图像重建模型。

S131:构建所述全身弥散加权成像图像训练集。

可选的,首先,获取多个样本全采样图像;然后,分别对多个样本全采样图像进行回顾性下采样后进行零填充重建,得到多个零填充图像;再然后,对多个样本全采样图像和多个零填充图像进行冠状位重建,得到多个样本冠状位全采样图像和对应的冠状位零填充图像;最后将多个样本冠状位全采样图像分别与对应的冠状位零填充图像组合,得到多个训练样本对,从而形成全身弥散加权成像图像训练集。其中,多个样本全采样图像可以包括健康人的全采样图像和/或疾病患者的全采样图像。并且,样本冠状位全采样图像和冠状位零填充图像均被进行归一化处理。

可选的,首先,收集多个样本全采样图像,将每个样本全采样图像进行冠状位重建后作为训练集中的参考图像y;然后,回顾性图像欠采样,使用双三次插值的退化策略对回顾性WB-DWI进行2、4、8倍下采样,获得含有伪影并丢失部分细节信息的零填充图像(如图2所示),零填充图像进行冠状位重建后作为训练集中的输入图像x;最后,构建训练数据,输入图像x和参考图像y组成全身弥散加权成像图像训练集,i表示第i个训练样本,N表示训练样本总数。

例如,首先,回顾性收集整理60名志愿者的全采样WB-DWI,全采样WB-DWI采用单次激发平面回波成像序列(single-shot echo-planar-imaging,ss-EPI)序列采集,采样矩阵大小为300×300,b=0s/mm、600/800s/mm,层数50层,共采集头、胸、腹、盆四段。将每组全采样WB-DWI作为训练集中的参考图像y,共得到12000幅参考图像。

然后,使用双三次插值的退化策略对回顾性WB-DWI进行2、4、8倍下采样,然后采用零填充重建的方法对欠采样数据进行重建获得零填充图像。零填充图像作为训练集中的输入图像x。

最后,输入图像x和参考图像y组成WB-DWI图像训练数据集,i表示第i个训练样本,N=12000表示训练样本总数。并且,本实施例中,x和y都归一化到[0,1]。

S132:获取所述深度学习模型和损失函数。

可选的,深度学习模型采用深度级联卷积神经网络(DC-CNN),DC-CNN模型包括输入层、隐含层和输出层,其中隐含层包括卷积层、激活层和池化层等。DC-CNN模型可以在Python3.7环境中用Keras工具箱搭建。DC-CNN模型表示为G(x,θ),θ为模型参数,x表示网络输入,输出为重建图像xG,xG=G(x,θ)。深度学习模型还可以采用RDN模型等其他深度学习模型。

损失函数LG(θ)采用基于像素的均方误差(Mean squared error,MSE),评估像素水平的图像损失,利用反向传播算法寻找损失函数最小对应的θ作为深度学习模型的最优参数θG,从而利用反向传播算法和均方误差法确定所述损失函数最小时的模型参数。

S133:以所述冠状位零填充图像作为输入且所述样本冠状位全采样图像作为输出,对所述深度学习模型进行模型训练,以确定所述损失函数最小时的模型参数,得到所述图像重建模型。

可选的,模型训练就是利用反向传播和基于动量的随机梯度下降法寻找使损失函数最小的模型参数首先从训练集中随机挑选数量为n的训练样本对作为批训练集。将xi输入DC-CNN模型,经过正向传播得到重建图像xG;然后计算损失函数值LG(θt),θt为第t次迭代θ的取值,损失函数值LG(θt)最小时对应的θt即为深度学习模型的最优参数θG。

如图3所示,得到训练好的模型(即图像重建模型)后,将输入图像x输入到图像重建模型,经过正向传播,即可得到重建图像。

在图1至图3所描述的方法中,将深度学习技术应用于WB-DWI快速成像中,在保证图像质量的前提下,极大的提高了WB-DWI的采集速度,有利于WB-DWI的推广应用,提高MRI设备的工作效率。

请参见图4,图4是本发明实施例提供的一种基于深度学习的快速全身弥散加权成像装置40,基于深度学习的快速全身弥散加权成像装置40可以为执行图1至图3所示的方法实施例的图像处理装置。基于深度学习的快速全身弥散加权成像装置40包括图像获取模块401和图像重建模块402,基于深度学习的快速全身弥散加权成像装置40的各个模块和单元的详细描述如下。

图像获取模块401,用于获取待重建图像;

图像重建模块402,用于将所述待重建图像输入图像重建模型,得到重建全采样图像,其中,所述图像重建模型为深度学习模型基于全身弥散加权成像图像训练集通过模型训练得到的,所述全身弥散加权成像图像训练集包括多个训练样本对,每个所述训练样本对包括样本冠状位全采样图像和对应的冠状位零填充图像。

在一种可选的方案中,还包括模型训练模块,所述模型训练模块用于所述将所述待重建图像输入图像重建模型,得到重建全采样图像之前,构建所述全身弥散加权成像图像训练集;获取所述深度学习模型和损失函数;以所述冠状位零填充图像作为输入且所述样本冠状位全采样图像作为输出,对所述深度学习模型进行模型训练,以确定所述损失函数最小时的模型参数,得到所述图像重建模型。

在一种可选的方案中,所述模型训练模块用于构建所述全身弥散加权成像图像训练集,具体为:

获取多个样本全采样图像;

分别对多个所述样本全采样图像进行回顾性下采样后进行零填充重建,得到多个零填充图像;

对多个所述样本全采样图像和对应的所述零填充图像进行冠状位重建,得到多个所述样本冠状位全采样图像和对应的所述冠状位零填充图像;

将多个所述样本冠状位全采样图像和对应的所述冠状位零填充图像组合,得到多个所述训练样本对。

在一种可选的方案中,所述模型训练模块用于以所述冠状位零填充图像作为输入且所述样本冠状位全采样图像作为输出,对所述深度学习模型进行模型训练,以确定所述损失函数最小时的模型参数,得到所述图像重建模型,具体为:

以所述冠状位零填充图像作为输入且所述样本冠状位全采样图像作为输出,利用反向传播算法和均方误差法确定所述损失函数最小时的模型参数。

在一种可选的方案中,所述样本冠状位全采样图像和所述冠状位零填充图像均被进行归一化处理。

在一种可选的方案中,多个所述样本全采样图像包括健康人的全采样图像和/或疾病患者的全采样图像。

在一种可选的方案中,所述深度学习模型为DC-CNN模型或者RDN模型。

图4所示的图像处理装置中各个模块和单元的具体实现及有益效果还可以对应参照图1至图3所示的方法实施例的相应描述,此处不再赘述。

请参见图5,图5是本发明实施例提供的一基于深度学习的快速全身弥散加权成像装置50,基于深度学习的快速全身弥散加权成像装置50可以为执行图1至图3所示的方法实施例的图像处理装置。该基于深度学习的快速全身弥散加权成像装置50包括处理器501、存储器502和通信接口503,所述处理器501、存储器502和通信接口503通过总线504相互连接。

存储器502包括但不限于是随机存储记忆体(random access memory,RAM)、只读存储器(read-only memory,ROM)、可擦除可编程只读存储器(erasable programmableread only memory,EPROM)、或便携式只读存储器(compact disc read-only memory,CD-ROM),该存储器502用于相关计算机程序及数据。通信接口503用于接收和发送数据。

处理器501可以是一个或多个中央处理器(central processing unit,CPU),在处理器501是一个CPU的情况下,该CPU可以是单核CPU,也可以是多核CPU。

该基于深度学习的快速全身弥散加权成像装置50中的处理器501用于读取所述存储器502中存储的计算机程序代码,执行以下操作:

获取待重建图像;

将所述待重建图像输入图像重建模型,得到重建全采样图像,其中,所述图像重建模型为深度学习模型基于全身弥散加权成像图像训练集通过模型训练得到的,所述全身弥散加权成像图像训练集包括多个训练样本对,每个所述训练样本对包括样本冠状位全采样图像和对应的冠状位零填充图像。

在一种可能的实施方式中,所述将所述待重建图像输入图像重建模型,得到重建全采样图像之前,还执行:

构建所述全身弥散加权成像图像训练集;

获取所述深度学习模型和损失函数;

以所述冠状位零填充图像作为输入且所述样本冠状位全采样图像作为输出,对所述深度学习模型进行模型训练,以确定所述损失函数最小时的模型参数,得到所述图像重建模型。

在一种可能的实施方式中,所述构建所述全身弥散加权成像图像训练集,具体为:

获取多个样本全采样图像;

分别对多个所述样本全采样图像进行回顾性下采样后进行零填充重建,得到多个零填充图像;

对多个所述样本全采样图像和对应的所述零填充图像进行冠状位重建,得到多个所述样本冠状位全采样图像和对应的所述冠状位零填充图像;

将多个所述样本冠状位全采样图像和对应的所述冠状位零填充图像组合,得到多个所述训练样本对。

在一种可能的实施方式中,所述以所述冠状位零填充图像作为输入且所述样本冠状位全采样图像作为输出,对所述深度学习模型进行模型训练,以确定所述损失函数最小时的模型参数,得到所述图像重建模型,具体为:

以所述冠状位零填充图像作为输入且所述样本冠状位全采样图像作为输出,利用反向传播算法和均方误差法确定所述损失函数最小时的模型参数。

在一种可能的实施方式中,所述样本冠状位全采样图像和所述冠状位零填充图像均被进行归一化处理。

在一种可能的实施方式中,多个所述样本全采样图像包括健康人的全采样图像和/或疾病患者的全采样图像。

在一种可能的实施方式中,所述深度学习模型为DC-CNN模型或者RDN模型。

图5所示的图像处理装置中各个模块的具体实现及有益效果还可以对应参照图1至图3所示的方法实施例的相应描述,此处不再赘述。

本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机程序,当计算机程序在图像处理装置上运行时,实现图1至图3所示的方法。

综上所述,将深度学习技术应用于WB-DWI快速成像中,在保证图像质量的前提下,极大的提高了WB-DWI的采集速度,有利于WB-DWI的推广应用,提高MRI设备的工作效率。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,可以通过计算机程序来指令相关的硬件来完成,该的程序可存储于计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可存储程序代码的介质。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号