当前位置:高等教育资讯网  >  中国高校课件下载中心  >  大学文库  >  浏览文档

协和医学杂志:人工智能在超声医学领域中的应用(2018年9月)

资源类别:文库,文档格式:PDF,文档页数:5,文件大小:403.87KB,团购合买
深度学习模型使得相关图像算法甚至达到了比人眼更高的识别准确率,这为医学影像的发展提供了巨大契机。超声医学作为影像领域的重要分支,利用A相关算法进行声像图分析的研究不断涌现,不仅为临床科研提供了新思路,亦有助于提高超声诊断的准确性。
点击下载完整版文档(PDF)

协和医学杂志 Medical Journal of Peking Union Medical College Hospital 人工智能在超声医学领域中的应用 刘睿峰,夏宇,姜玉新 中国医学科学院北京协和医学院北京协和医院超声医学科,北京100730 通信作者:夏宇电话:010-69159311,E-mail:yuxiapumch@aliyun.com 【摘要】人工智能( artificial intelligence,AI)近几年再度成为各领域关注的焦点,其中深度学习的提出带来了一系列 革命性变化,而随着计算机视觉向深度学习过渡以及硬件和大数据的进步,A在图像识别领域展现出更广阔的发展前景 度学习模型使得相关图像算法甚至达到了比人眼更高的识别准确率,这为医学影像的发展提供了巨大契机。超声医学作 为影像领域的重要分支,利用AI相关算法进行声像图分析的研究不断涌现,不仅为临床科研提供了新思路,亦有助于提 高超声诊断的准确性 【关键词】人工智能;深度学习;超声成像;临床研究 【中图分类号】R445.1【文献标志码】A【文章编号】1674-9081(2018)05-0453-0 Do:10.3969/j.issn.16749081.2018.05.015 Application of Artificial Intelligence in Ultrasound Medicine LIU Rui-feng, XIA Yu, JIANG Yu-xin Department of Ultrasound, Peking Union Medical College Hospital, Chinese Academy of Medical Sciences Peking Union Medical College, Beijing 100730, China CorrespondingauthorXiaYuTel:010-69159311,E-mail:yuxiapumch@aliyun.com Abstract] As deep leaming brings a series of revolutionary change, artificial intelligence has become a focus in various fields again in recent years. With the transition from computer vision to deep learning and the pro hardware and big data, artificial intelligence, has demonstrated broader prospects for the development of image recogni tion Image algorithm exploiting deep leaming model has achieved better identification accuracy than the naked eye which offers the possibility of making breakthrough in medical imaging field. Ultrasonography is a main branch of medi cal imaging. An increasing number of papers on research of the application of artificial intelligence-related algorithms to analyzing ultrasonographic images provide new insights into clinical research. Meanwhile, specific software is able to compensate for the practitioners deficiency in experience and improve diagnostic accuracy as well. Key words] artificial intelligence; deep learning: ultrasonography clinical research Med J PUMCH,2018,9(5):453-457 1950年 Alan turing发表的《计算机器与智能》了从跳棋程序到专家系统,从发展逻辑推理的第5代 文中提出了“图灵测试”,首次预见性地展示机器计算机研制计划乃至今天基于网络大数据和深度学习 与人类难以分辨的智能行为;6年之后,达特茅斯模型的分布式A研究等阶段,已渐趋成熟。Suat 大学研讨会上科学家们对麦卡锡提出的新术语“人工 Russell在其1995年出版的著作《人工智能:一种现 智能( artificial intelligence,AI)”初步认同并接受,代方法》中将A定义为有关“智能主体研究与设计” 标志着这一概念的正式诞生。随后几十年间,M经历的学问,而智能主体是指可以观察周遭环境并作出行 vo.9No.5453

协 和 医 学 杂 志 Medical Journal of Peking Union Medical College Hospital Vol􀆰 9 No􀆰 5 453 􀅰综 述􀅰 人工智能在超声医学领域中的应用 刘睿峰ꎬ 夏 宇ꎬ 姜玉新 中国医学科学院 北京协和医学院 北京协和医院超声医学科ꎬ 北京 100730 通信作者: 夏 宇 电话: 010 ̄69159311ꎬ E ̄mail: yuxiapumch@ aliyun.com 【摘要】 人工智能 (artificial intelligenceꎬ AI) 近几年再度成为各领域关注的焦点ꎬ 其中深度学习的提出带来了一系列 革命性变化ꎬ 而随着计算机视觉向深度学习过渡以及硬件和大数据的进步ꎬ AI 在图像识别领域展现出更广阔的发展前景ꎮ 深度学习模型使得相关图像算法甚至达到了比人眼更高的识别准确率ꎬ 这为医学影像的发展提供了巨大契机ꎮ 超声医学作 为影像领域的重要分支ꎬ 利用 AI 相关算法进行声像图分析的研究不断涌现ꎬ 不仅为临床科研提供了新思路ꎬ 亦有助于提 高超声诊断的准确性ꎮ 【关键词】 人工智能ꎻ 深度学习ꎻ 超声成像ꎻ 临床研究 【中图分类号】 R445􀆰 1 【文献标志码】 A 【文章编号】 1674 ̄9081(2018)05 ̄0453 ̄05 DOI: 10􀆰 3969 / j􀆰 issn􀆰 1674 ̄9081􀆰 2018􀆰 05􀆰 015 Application of Artificial Intelligence in Ultrasound Medicine LIU Rui ̄fengꎬ XIA Yuꎬ JIANG Yu ̄xin Department of Ultrasoundꎬ Peking Union Medical College Hospitalꎬ Chinese Academy of Medical Sciences & Peking Union Medical Collegeꎬ Beijing 100730ꎬ China Corresponding author: XIA Yu Tel: 010 ̄69159311ꎬ E ̄mail: yuxiapumch@ aliyun.com 【Abstract】 As deep learning brings a series of revolutionary changeꎬ artificial intelligence has become a focus in various fields again in recent years. With the transition from computer vision to deep learning and the progress in hardware and big dataꎬ artificial intelligenceꎬ has demonstrated broader prospects for the development of image recogni ̄ tion. Image algorithm exploiting deep learning model has achieved better identification accuracy than the naked eyeꎬ which offers the possibility of making breakthrough in medical imaging field. Ultrasonography is a main branch of medi ̄ cal imaging. An increasing number of papers on research of the application of artificial intelligence ̄related algorithms into analyzing ultrasonographic images provide new insights into clinical research. Meanwhileꎬ specific software is able to compensate for the practitioner􀆳s deficiency in experience and improve diagnostic accuracy as well. 【Key words】 artificial intelligenceꎻ deep learningꎻ ultrasonographyꎻ clinical research Med J PUMCHꎬ 2018ꎬ9(5):453-457 1950 年 Alan Turing 发表的 « 计算机器与智能» 一文中提出了 “图灵测试”ꎬ 首次预见性地展示机器 与人类难以分辨的智能行为[1] ꎻ 6 年之后ꎬ 达特茅斯 大学研讨会上科学家们对麦卡锡提出的新术语 “人工 智能 (artificial intelligenceꎬ AI) ” 初步认同并接受ꎬ 标志着这一概念的正式诞生ꎮ 随后几十年间ꎬ AI 经历 了从跳棋程序到专家系统ꎬ 从发展逻辑推理的第 5 代 计算机研制计划乃至今天基于网络大数据和深度学习 模型的分布式 AI 研究等阶段ꎬ 已渐趋成熟ꎮ Stuart Russell 在其 1995 年出版的著作 «人工智能: 一种现 代方法» 中将 AI 定义为有关 “智能主体研究与设计” 的学问ꎬ 而智能主体是指可以观察周遭环境并作出行

协和医学杂志 动以达到目标的系统。自2016年3月 Alphagan与围于诊断的思维过程,是最典型的科研问题。 棋世界冠军李世石的人机大战后,A又一次进入公众 视野,备受关注。基于医学影像特点和提高影像诊断2人工智能在超声医学领域的应用 效能的诉求,A有望在将来成为影像医生诊治过程中 的有效辅助工具。本文将结合具体案例介绍AI在超2.1传统人工神经网络研究 声医学领域的可行性和局限性,并对未来应用前景进2.1.1大脑中动脉痉挛所致狭窄诊断方法效能评估 行分析与预测,希望为进一步研究提供依据 大脑中动脉痉挛是蛛网膜下腔出血的严重并发 症,早期诊断和干预对预防卒中十分重要。数字减影 1人工智能与医学影像 血管造影( digital subtraction angiography,DsA)是作 出该诊断的金标准,但鉴于其为有创性操作并可导致 鉴于医学影像领域信息更加结构化,大部分基于图相关并发症,不宜作为常规监测手段。经颅多普勒 像的判断相比临床电子病历总结式的描述更加客观,深( transeranial Doppler,TCD)作为一项非侵入性监测方 度学习取得突破前就有学者利用A方法中的人工神经法,可在床旁操作,且指导临床实践准确性高,因此 网络来分析医学图像,然而受限于梯度消失和过拟合问被广泛应用;同时,有文献显示,经颅双功能彩色 题,模型很难构建深层次的架构来学习,同时还要面对多普勒超声( transcranial color- coded duplex sonography 数据量和终端计算能力不足的困难,相关研究取得的成T℃CS)在大脑中动脉痉挛所致狭窄的诊断上比TCD 果有限。而如今,基于放射信息系统( radiology infor-具有更高准确性,但这些文献存在TCD和TCS入 mation svstem,RlS)、医学图像存档和传输系统组人群不同、研究组与对照组基线特征不同、受试者 ( picture archiving and communication system,PACS)中工作特征曲线( receiver operating characteristic curve 的大量病例图像,A可更好地进行深度学习,同时利ROC)仅包括一项脑动脉血流动力学参数等不足,横向 用深度学习中一系列具有不同优势和适用性的模型,如比较存在较大争议,研究结果缺乏说服力。于是 循环神经网络、卷积神经网络等,建立输入图片特征与 Swierez等匀利用传统人工神经网络建模,并将经TCD 输出目标结果之间的对应关系,更加高效识别图片中的和TCCS获得的数据处理后的输出值与DSA的结果进行 对象,为相关研究与发展提供了更多可行性。 匹配,以匹配程度最高的模型作为评判TCD和TCCS诊 深度学习作为此次A兴起以及相关医学影像研究断准确性的仲裁者,该模型能够将大脑中动脉平均流速 兴盛的核心技术,其主流模型延续了早期机器学习中的( mean velocity, Vmean)、收缩期峰值流速( systolic 个重要算法,即人工神经网络,原理是模拟人脑多层 peak velocity,wps)及舒张末期流速( end of diastol 神经网络结构并作出判断,而应用于医学影像的深度学 velocity,ved)整合为一个集合参数,建立ROC并进行 习以神经网络为主,大致分为两类:(1)监督学习,相关比较,从而避免了超声医生解读数据作出判断时的 包括递归神经网络、卷积神经网络和普通深度神经网络主观影响,减少了混杂因素,但该研究由于样本量有 等主流模型;(2)无监督学习,包括深度生成模型限,阳性病例数相对较少,模型的准确性受到质疑。 (预训练)和自编码器等模型。二者主要区别在于对2.1.2建立非侵入性肝脏纤维化评级体系 具有相关特征的训练数据进行分类时,训练数据是 慢性肝炎或肝损伤所致肝纤维化是肝硬化的共同 否有人工标注的标签,如数据有标签则称为监督学特征,肝纤维化是可逆的病理过程,及时有效的治疗 习,无标签即为无监督学习,又称聚类。监督学习可避免其进一步发展为肝硬化。为了在治疗过程中定 中的卷积神经网络正是目前医学影像领域AI的研究期进行纤维化或硬化评级,常常选择超声作为监测手 热点,作为一种具有自主学习能力的神经网络,其段。 Zhang等6将传统人工神经网络的训练规则调整 多层结构可基于多级抽象提取一系列辨识性特征,为错误反向传播算法,即将输入值包括肝脏实质、脾 从而识别图像中的目标,超声医学中的前沿研究方厚度、肝动脉搏动指数、衰减指数及肝静脉频谱经过 法也多以此为核心。该神经网络模型对于解决现阶一系列不可知的调整后与已有的肝纤维化分级进行比 段科研中分类、检测、分割这3个主要问題均具有较,如有偏差则返回上一步的层级训练,直至单位错 重要意义,其中分类问题主要涉及完成探测组织结误总和被调整至最小,训练出的相应模型经过评估, 构异常并将其划归至各个疾病类别中的任务,类似其准确性可达88.3%(曲线下面积0.922)。相较肝 454 Septembe,4018

协 和 医 学 杂 志 454 Septemberꎬ 2018 动以达到目标的系统[2] ꎮ 自 2016 年 3 月 Alphago 与围 棋世界冠军李世石的人机大战后ꎬ AI 又一次进入公众 视野ꎬ 备受关注ꎮ 基于医学影像特点和提高影像诊断 效能的诉求ꎬ AI 有望在将来成为影像医生诊治过程中 的有效辅助工具ꎮ 本文将结合具体案例介绍 AI 在超 声医学领域的可行性和局限性ꎬ 并对未来应用前景进 行分析与预测ꎬ 希望为进一步研究提供依据ꎮ 1 人工智能与医学影像 鉴于医学影像领域信息更加结构化ꎬ 大部分基于图 像的判断相比临床电子病历总结式的描述更加客观ꎬ 深 度学习取得突破前就有学者利用 AI 方法中的人工神经 网络来分析医学图像ꎬ 然而受限于梯度消失和过拟合问 题ꎬ 模型很难构建深层次的架构来学习ꎬ 同时还要面对 数据量和终端计算能力不足的困难ꎬ 相关研究取得的成 果有限ꎮ 而如今ꎬ 基于放射信息系统 ( radiology infor ̄ mation systemꎬ RIS )、 医 学 图 像 存 档 和 传 输 系 统 (picture archiving and communication systemꎬ PACS) 中 的大量病例图像ꎬ AI 可更好地进行深度学习ꎬ 同时利 用深度学习中一系列具有不同优势和适用性的模型ꎬ 如 循环神经网络、 卷积神经网络等ꎬ 建立输入图片特征与 输出目标结果之间的对应关系ꎬ 更加高效识别图片中的 对象ꎬ 为相关研究与发展提供了更多可行性ꎮ 深度学习作为此次 AI 兴起以及相关医学影像研究 兴盛的核心技术ꎬ 其主流模型延续了早期机器学习中的 一个重要算法ꎬ 即人工神经网络ꎬ 原理是模拟人脑多层 神经网络结构并作出判断ꎬ 而应用于医学影像的深度学 习以神经网络为主ꎬ 大致分为两类: (1) 监督学习ꎬ 包括递归神经网络、 卷积神经网络和普通深度神经网络 等主流模型ꎻ (2) 无监督学习ꎬ 包括深度生成模型 (预训练) 和自编码器等模型ꎮ 二者主要区别在于对 具有相关特征的训练数据进行分类时ꎬ 训练数据是 否有人工标注的标签ꎬ 如数据有标签则称为监督学 习ꎬ 无标签即为无监督学习ꎬ 又称聚类ꎮ 监督学习 中的卷积神经网络正是目前医学影像领域 AI 的研究 热点ꎬ 作为一种具有自主学习能力的神经网络ꎬ 其 多层结构可基于多级抽象提取一系列辨识性特征ꎬ 从而识别图像中的目标ꎬ 超声医学中的前沿研究方 法也多以此为核心ꎮ 该神经网络模型对于解决现阶 段科研中分类、 检测、 分割这 3 个主要问题均具有 重要意义ꎬ 其中分类问题主要涉及完成探测组织结 构异常并将其划归至各个疾病类别中的任务ꎬ 类似 于诊断的思维过程ꎬ 是最典型的科研问题ꎮ 2 人工智能在超声医学领域的应用 2􀆰 1 传统人工神经网络研究 2􀆰 1􀆰 1 大脑中动脉痉挛所致狭窄诊断方法效能评估 大脑中动脉痉挛是蛛网膜下腔出血的严重并发 症ꎬ 早期诊断和干预对预防卒中十分重要ꎮ 数字减影 血管造影 ( digital subtraction angiographyꎬ DSA) 是作 出该诊断的金标准ꎬ 但鉴于其为有创性操作并可导致 相关并发症ꎬ 不宜作为常规监测手段ꎮ 经颅多普勒 (transcranial Dopplerꎬ TCD) 作为一项非侵入性监测方 法ꎬ 可在床旁操作ꎬ 且指导临床实践准确性高ꎬ 因此 被广泛应用[3] ꎻ 同时ꎬ 有文献显示ꎬ 经颅双功能彩色 多普勒超声 (transcranial color ̄coded duplex sonographyꎬ TCCS) 在大脑中动脉痉挛所致狭窄的诊断上比 TCD 具有更高准确性[4] ꎬ 但这些文献存在 TCD 和 TCCS 入 组人群不同、 研究组与对照组基线特征不同、 受试者 工作特征曲线 ( receiver operating characteristic curveꎬ ROC) 仅包括一项脑动脉血流动力学参数等不足ꎬ 横向 比较存在较大争议ꎬ 研 究 结 果 缺 乏 说 服 力ꎮ 于 是ꎬ Swiercz 等[5]利用传统人工神经网络建模ꎬ 并将经 TCD 和 TCCS 获得的数据处理后的输出值与 DSA 的结果进行 匹配ꎬ 以匹配程度最高的模型作为评判 TCD 和 TCCS 诊 断准确性的仲裁者ꎬ 该模型能够将大脑中动脉平均流速 (mean velocityꎬ Vmean)、 收 缩 期 峰 值 流 速 ( systolic peak velocityꎬ Vps) 及舒张末期流速 ( end of diastolic velocityꎬ Ved) 整合为一个集合参数ꎬ 建立 ROC 并进行 相关比较ꎬ 从而避免了超声医生解读数据作出判断时的 主观影响ꎬ 减少了混杂因素ꎬ 但该研究由于样本量有 限ꎬ 阳性病例数相对较少ꎬ 模型的准确性受到质疑ꎮ 2􀆰 1􀆰 2 建立非侵入性肝脏纤维化评级体系 慢性肝炎或肝损伤所致肝纤维化是肝硬化的共同 特征ꎬ 肝纤维化是可逆的病理过程ꎬ 及时有效的治疗 可避免其进一步发展为肝硬化ꎮ 为了在治疗过程中定 期进行纤维化或硬化评级ꎬ 常常选择超声作为监测手 段ꎮ Zhang 等[6]将传统人工神经网络的训练规则调整 为错误反向传播算法ꎬ 即将输入值包括肝脏实质、 脾 厚度、 肝动脉搏动指数、 衰减指数及肝静脉频谱经过 一系列不可知的调整后与已有的肝纤维化分级进行比 较ꎬ 如有偏差则返回上一步的层级训练ꎬ 直至单位错 误总和被调整至最小ꎬ 训练出的相应模型经过评估ꎬ 其准确性可达 88􀆰 3% (曲线下面积 0􀆰 9222)ꎮ 相较肝

人工智能在超声医学领域中的应用 活检,结合了A技术的超声监测不存在样本取材问均可为难以确诊又高度怀疑阑尾炎的患者增加诊断依 题以及医师经验水平差异所导致的误差,为慢性肝病据,其中阑尾外径在探头加压探查下>6mm作为诊断时 患者的临床决策提供了另一种参考 准确性最高的超声征象0。有研究利用一系列A算法 2.1.3早期甲状腺结节良恶性分类 除噪,提高亮度对比,提取出更加完整的筋膜底线以确 类似的基于传统人工神经网络的研究还涉及甲状定阑尾所在区域,并避免了大量腹水影响,其中的核心 腺结节良恶性诊断,由于医疗资源普及和定期体检的算法 Fuzzy Art是一种无监督神经网络学习算法,亦属 推广,许多甲状腺结节被发现,为进一步定义其良恶深度学习模型的一种,具有实时学习、无固定目标值、 性,不得不施行细针穿刺活检或定期随访,给医院诊对经验知识归类等特点,其应用显著提高了确定阑尾区 疗和患者均增加了负担,为了提高单次诊断的准确域的准确性,在已确诊阑尾炎的40幅声像图中,最新 性,Zhu等利用具有显著统计学意义(P6m、钙化灶及其壁上血流信号增强、管腔内积液络作为基础,将其中的经验知识转移到用来识别定 vo.9No.5455

人工智能在超声医学领域中的应用 Vol􀆰 9 No􀆰 5 455 活检ꎬ 结合了 AI 技术的超声监测不存在样本取材问 题以及医师经验水平差异所导致的误差ꎬ 为慢性肝病 患者的临床决策提供了另一种参考ꎮ 2􀆰 1􀆰 3 早期甲状腺结节良恶性分类 类似的基于传统人工神经网络的研究还涉及甲状 腺结节良恶性诊断ꎬ 由于医疗资源普及和定期体检的 推广ꎬ 许多甲状腺结节被发现ꎬ 为进一步定义其良恶 性ꎬ 不得不施行细针穿刺活检或定期随访ꎬ 给医院诊 疗和患者均增加了负担ꎬ 为了提高单次诊断的准确 性ꎬ Zhu 等 [7]利用具有显著统计学意义 (P6 mm、 钙化灶及其壁上血流信号增强、 管腔内积液 均可为难以确诊又高度怀疑阑尾炎的患者增加诊断依 据ꎬ 其中阑尾外径在探头加压探查下>6 mm作为诊断时 准确性最高的超声征象[10] ꎮ 有研究利用一系列 AI 算法 除噪ꎬ 提高亮度对比ꎬ 提取出更加完整的筋膜底线以确 定阑尾所在区域ꎬ 并避免了大量腹水影响ꎬ 其中的核心 算法 Fuzzy ART 是一种无监督神经网络学习算法ꎬ 亦属 深度学习模型的一种ꎬ 具有实时学习、 无固定目标值、 对经验知识归类等特点ꎬ 其应用显著提高了确定阑尾区 域的准确性ꎬ 在已确诊阑尾炎的 40 幅声像图中ꎬ 最新 算法可成功识别其中 38 幅ꎬ 真阳性率可达 95%ꎬ 与 CT 诊断能力相当ꎬ 且无辐射[11] ꎮ 2􀆰 2􀆰 3 处理分割问题 劲动脉相关参数及病变测量: 颈动脉内 ̄中膜厚度 (carotid intima ̄media thicknessꎬ CIMT) 对预测心血管 病风险十分重要ꎬ 超声检查时需医师测量声像图中远 端血管壁管腔与内膜交界至中膜与外膜交界的距离ꎬ 此人工标记耗时乏味ꎬ 于是有研究者提取 92 份 CIMT 检查录像作为数据库ꎬ 每一份均由专家划出 3 个感兴 趣区 ( region of interestꎬ ROI)ꎬ 之后再在 276 份 ROI 中分别标识出管腔 ̄内膜交界平面和内膜 ̄中膜交界平 面作为训练的图像块进而建立卷积神经网络ꎬ 经过特 定训练的卷积神经网络即可自动分割出需要的界面交 由电脑测量ꎬ 结果优于人工测量[12] ꎮ 也有学者设计调 整了卷积神经网络模型用于颈动脉斑块的测量ꎬ 并且 相较以纹理特征作为输入支持向量机 ( support vector machineꎬ SVM) 分类器的传统机器学习方法ꎬ 卷积神 经网络的结果在准确度 (0􀆰 9733 比 0􀆰 9638)ꎬ 敏感性 (0􀆰 9653 比 0􀆰 9746)ꎬ 特异性 (0􀆰 9720 比 0􀆰 9602)ꎬ 马 修相关指数 (0􀆰 9444 比 0􀆰 9254)ꎬ 约登指数 (0􀆰 9466 比 0􀆰 9256) 方面均更优[13] ꎬ 提示了卷积神经网络在 临床图像识别中应用的可行性与巨大潜力ꎮ 2􀆰 2􀆰 4 卷积神经网络迁移学习 中孕期胎儿畸形筛查标准平面自动定位: 产前 畸形筛查是胎儿超声检查的重要内容ꎬ 不同医疗机 构敏感性从 27􀆰 5%至 96%不等[14] ꎬ 其中很重要的一 个影响因素即为标准平面的获取ꎬ 通常需要医师具 备全面的解剖知 识 和 大 量 的 经 验ꎮ 胎 儿 腹 围 平 面 ( fetal abdominal standard planeꎬ FASP) 的自动定位因 涉及复杂的解剖结构ꎬ 可获取的样本量较少ꎬ 缺乏 足够的数据来训练卷积神经网络模型ꎬ 这一直是一 个充满挑战性的难题ꎬ 于是有学者利用已被大量不 相干原始图片训练过的卷积神经网络的较低层级网 络作为基础ꎬ 将其中的经验知识转移到用来识别定

协和医学杂志 位FASP的卷积神经网络模型中,其表现明显胜过之取、识别和定量分析,在可携带计算机上施行实时超 前的基于少量数据训练的低维度模型,准确率、精声心动图分析其实已有据可循,同时深度学习相 确率、召回率和综合评价指标分别达到了0.904、关算法模型的嵌入,相较于现阶段研究中传统的其他 0.908、0.995和0.950151。科研中使用患者的数据机器学习方法,有望为AI在心脏疾病诊断方面带来 常常涉及隐私等伦理冋题,需征得患者同意,这就更广阔的发展前景 大大减少了可使用的图像素材;且鉴于医学影像图2.3超声医学科产品化应用实例 像对比度较低,训练数据量级要求不高,利用由其 我国自主研发的DE-超声机器人已投入临床进行 他图片(通常是自然图片)训练生成的神经网络进试验,这是一款基于超声影像,辅助医生进行甲状腺 行迁移学习来处理这类问题也很常见。这种方法很结节良恶性识别的智能诊断系统。测试环节中选取省 好地处理了因数据过少导致的模型过拟合问题,将级三甲教学医院不同级别大夫对同一帧图像进行识 卷积神经网络在临床应用的可行性进一步拓展,展别,诊断准确率在60%~70%,该设备协助医生工作 现了其处理医学图像的可预见前景 同步进行诊断,自动采集图像并给出结果及其概率 2.2.5超声心动图相关综合应用 值,准确性可高达87%。总的来说,该系统大幅减轻 涉及二维及多普勒超声心动图的研究常常伴随大了医生工作量,提升了影像诊断的精准性,既可节约 量的测量参数,这些参数对于评价心肌及瓣膜的结构医疗资源及社会成本,又可支持国家分级诊疗医改战 和功能十分重要。然而在实际工作中,理清并针对性略,但由于智能程序潜在的不稳定性及运算错误,同 地使用如此巨大的潜在数据组合对于一个忙碌的临床时考量到医学的发展与进步,如何安全有效在工作中 医生可行性不高,而且操作者的手法、技巧、经验对使用甚至推广该类AI产品仍需进一步探索。 于最终测量结果影响均较大,甚至由于不同时间操作 者本身状态不同,同一个人所测量的结果可重复性也3前景与局限 很难得到保证。相关研究将供训练的数据集(心脏四 腔心切面图)由心脏专家按不被接收(0分)至极佳 随着医院管理信息化和智能化水平的不断提高,AI (5分)进行总体质量评分,利用卷积神经网络模型与医疗行业的结合已是未来医疗发展的必然方向。2017 更不容易过拟合、更容易训练、加权调整更少的特年2月17日,国家卫生和计划生育委员委发布了2017 性,根据上述数据集即时生成自动化回声评分(auto-版“人工智能辅助诊断技术管理规范”及“人工智能 mated echo score,AES)作为质量反馈1,促进低年辅助诊断技术临床应用质量控制指标”,提示A已经真 资医生获取更高质量、更标准的相应切面声像图,提正开始走入临床工作并引起相关部门重视,但这是一个 高了医疗效率;同时也有研究显示运用算法对左心室多学科交叉合作的过程,需要广大高水平专科医生积极 射血分数进行自动测量计算,相对于传统的手工裸眼参与,提供高质量数据集训练AI,并为保障相关应用 标记测量,平均处理时间仅需8s,且可重复性高,结的准确性和稳定性进一步完善评估方案。 果相对精确[;针对此类研究尚存的争议:算法和计 AI在医疗领域的应用已有相对成熟的系统如“沃 算机技术领域的矛盾,医学方面比如金标准、心室肌森(BM公司)”作为参考,由于医学影像领域的特 小梁等问题[悶,有研究者使用融合了机器学习算法殊性,例如数据特征、人文交互少等,AI的应用阻力 的软件对二尖瓣相关的6项参数:二尖瓣环三维前外相对较小,国内外涉及图像区域分割、图像目标检 后内径、二尖瓣环三维前后径、瓣环面积、非平面角测、图像配准等多个领域的研究也逾渐火热,相关模 度、二尖瓣环总周长、总瓣叶进行测量比较,观察检型以深度学习为主,结合机器学习多种方法,其发展 测器本身是否会影响参数,设定P=0.0083,无影响对科研和临床的助力不可小觑,但由于不同组织变异 为无效假设,得到6项参数的相应P值分别为0.72、性大,边界模糊,微细血管神经分布复杂等原因,通 0.25、0.07、0.03、0.13、0.15,结果显然瑕不掩瑜,常仅针对某一特定器官或疾病,多种类型方法结合与 即使测量数据存在微小的不一致性,研究者也相信软改进使用以便相互弥补算法缺陷,尚未有普适的方法 件可以通过自主学习适应调整以改善表现[。更多可以对任意一张超声声像图进行解析21。 的研究也提示未来机械臂与影像自动化分析的共同发关于A是否会取代医生的问题,应基于A应用于 展,有望实现无人干预的全自动化超声心动图的获超声诊断需要完成两项基本任务,即扫查和读片进行分 456 Septembe,4018

协 和 医 学 杂 志 456 Septemberꎬ 2018 位 FASP 的卷积神经网络模型中ꎬ 其表现明显胜过之 前的基于少量数据训练的低维度模型ꎬ 准确率、 精 确率、 召回率和综合评价指标分 别 达 到 了 0􀆰 904、 0􀆰 908、 0􀆰 995 和 0􀆰 950 [15] ꎮ 科研中使用患者的数据 常常涉及隐私等伦理问题ꎬ 需征得患者同意ꎬ 这就 大大减少了可使用的图像素材ꎻ 且鉴于医学影像图 像对比度较低ꎬ 训练数据量级要求不高ꎬ 利用由其 他图片 (通常是自然图片) 训练生成的神经网络进 行迁移学习来处理这类问题也很常见ꎮ 这种方法很 好地处理了因数据过少导致的模型过拟合问题ꎬ 将 卷积神经网络在临床应用的可行性进一步拓展ꎬ 展 现了其处理医学图像的可预见前景ꎮ 2􀆰 2􀆰 5 超声心动图相关综合应用 涉及二维及多普勒超声心动图的研究常常伴随大 量的测量参数ꎬ 这些参数对于评价心肌及瓣膜的结构 和功能十分重要ꎮ 然而在实际工作中ꎬ 理清并针对性 地使用如此巨大的潜在数据组合对于一个忙碌的临床 医生可行性不高ꎬ 而且操作者的手法、 技巧、 经验对 于最终测量结果影响均较大ꎬ 甚至由于不同时间操作 者本身状态不同ꎬ 同一个人所测量的结果可重复性也 很难得到保证ꎮ 相关研究将供训练的数据集 (心脏四 腔心切面图) 由心脏专家按不被接收 (0 分) 至极佳 (5 分) 进行总体质量评分ꎬ 利用卷积神经网络模型 更不容易过拟合、 更容易训练、 加权调整更少的特 性ꎬ 根据上述数据集即时生成自动化回声评分 ( auto ̄ mated echo scoreꎬ AES) 作为质量反馈[16] ꎬ 促进低年 资医生获取更高质量、 更标准的相应切面声像图ꎬ 提 高了医疗效率ꎻ 同时也有研究显示运用算法对左心室 射血分数进行自动测量计算ꎬ 相对于传统的手工裸眼 标记测量ꎬ 平均处理时间仅需 8 sꎬ 且可重复性高ꎬ 结 果相对精确[17] ꎻ 针对此类研究尚存的争议: 算法和计 算机技术领域的矛盾ꎬ 医学方面比如金标准、 心室肌 小梁等问题 [18] ꎬ 有研究者使用融合了机器学习算法 的软件对二尖瓣相关的 6 项参数: 二尖瓣环三维前外 后内径、 二尖瓣环三维前后径、 瓣环面积、 非平面角 度、 二尖瓣环总周长、 总瓣叶进行测量比较ꎬ 观察检 测器本身是否会影响参数ꎬ 设定 P = 0􀆰 0083ꎬ 无影响 为无效假设ꎬ 得到 6 项参数的相应 P 值分别为 0􀆰 72、 0􀆰 25、 0􀆰 07、 0􀆰 03、 0􀆰 13、 0􀆰 15ꎬ 结果显然瑕不掩瑜ꎬ 即使测量数据存在微小的不一致性ꎬ 研究者也相信软 件可以通过自主学习适应调整以改善表现[19] ꎮ 更多 的研究也提示未来机械臂与影像自动化分析的共同发 展ꎬ 有望实现无人干预的全自动化超声心动图的获 取、 识别和定量分析ꎬ 在可携带计算机上施行实时超 声心动图分析其实已有据可循[20] ꎬ 同时深度学习相 关算法模型的嵌入ꎬ 相较于现阶段研究中传统的其他 机器学习方法ꎬ 有望为 AI 在心脏疾病诊断方面带来 更广阔的发展前景ꎮ 2􀆰 3 超声医学科产品化应用实例 我国自主研发的 DE ̄超声机器人已投入临床进行 试验ꎬ 这是一款基于超声影像ꎬ 辅助医生进行甲状腺 结节良恶性识别的智能诊断系统ꎮ 测试环节中选取省 级三甲教学医院不同级别大夫对同一帧图像进行识 别ꎬ 诊断准确率在 60% ~ 70%ꎬ 该设备协助医生工作 同步进行诊断ꎬ 自动采集图像并给出结果及其概率 值ꎬ 准确性可高达 87%ꎮ 总的来说ꎬ 该系统大幅减轻 了医生工作量ꎬ 提升了影像诊断的精准性ꎬ 既可节约 医疗资源及社会成本ꎬ 又可支持国家分级诊疗医改战 略ꎬ 但由于智能程序潜在的不稳定性及运算错误ꎬ 同 时考量到医学的发展与进步ꎬ 如何安全有效在工作中 使用甚至推广该类 AI 产品仍需进一步探索ꎮ 3 前景与局限 随着医院管理信息化和智能化水平的不断提高ꎬ AI 与医疗行业的结合已是未来医疗发展的必然方向ꎮ 2017 年 2 月 17 日ꎬ 国家卫生和计划生育委员委发布了 2017 版 “人工智能辅助诊断技术管理规范” 及 “人工智能 辅助诊断技术临床应用质量控制指标”ꎬ 提示 AI 已经真 正开始走入临床工作并引起相关部门重视ꎬ 但这是一个 多学科交叉合作的过程ꎬ 需要广大高水平专科医生积极 参与ꎬ 提供高质量数据集训练 AIꎬ 并为保障相关应用 的准确性和稳定性进一步完善评估方案ꎮ AI 在医疗领域的应用已有相对成熟的系统如 “沃 森 (IBM 公司) ” 作为参考ꎬ 由于医学影像领域的特 殊性ꎬ 例如数据特征、 人文交互少等ꎬ AI 的应用阻力 相对较小ꎬ 国内外涉及图像区域分割、 图像目标检 测、 图像配准等多个领域的研究也逾渐火热ꎬ 相关模 型以深度学习为主ꎬ 结合机器学习多种方法ꎬ 其发展 对科研和临床的助力不可小觑ꎬ 但由于不同组织变异 性大ꎬ 边界模糊ꎬ 微细血管神经分布复杂等原因ꎬ 通 常仅针对某一特定器官或疾病ꎬ 多种类型方法结合与 改进使用以便相互弥补算法缺陷ꎬ 尚未有普适的方法 可以对任意一张超声声像图进行解析[21] ꎮ 关于 AI 是否会取代医生的问题ꎬ 应基于 AI 应用于 超声诊断需要完成两项基本任务ꎬ 即扫查和读片进行分

人工智能在超声医学领域中的应用 析。目前更多研究集中于读片场景的应用,而针对患者 289-301 的操作扫查研究,有学者提出可用一个计算机控制的机9]ChiJ, Walia e, Babyn F,etal. Thyroid nodule classific 械臂控制探头的位置和角度进行不同标准切面的扫查, in ultrasound images by fine-tuning deep convolutional neural network [J]. J Digit Imaging, 2017, 30: 477-486 根据高矮胖瘦不一,机械臂借助一些辅助参数和标记部[10]kesr, Cyteval c, Gallix h,ctal. Appendiciti:eal 位精确调整扫查图像的位置和范围从而得到标准切面图 ation of sensitivity, specificity, and predictive values of US 像2。但是实际工作中,一个超声诊断临床决策的实 doppler US, and laboratory findings [J]. Radiology, 2004 现往往要结合多个切面、直接与间接征象以及临床信息 230:472-478 的分析,这样的能力或许需要到强A阶段才能实现。 [11 Kim KB, Park HJ, Song DH, et al. Developing an 一种新药从研发到推广应用至少需要经过3个阶 intelligent automatic appendix extraction method from ultra- IT and image processing [J 段,表明医疗创新实例往往需要面临更高的门槛,这主 Comput Math Methods Med, 2015, 2015: 389057. 要是由于医疗行业的预防原则所致。A亦是如此,其[12] Tajbakhsh N, Shin JY, Gurudu sr,etal. Convolutional 需要经历大量的测试,测试越多,暴露的信息与问题越 neural networks for medical image analysis: full training or 多,继而越能够预测后续可能产生的风险,同时考虑到 fine tuning? [J]. IEEE Trans Med Imaging, 2016, 35 法律法规、民众接受度以及潜在的医疗事故背后相应的 1299-1312. [13]孙夏,吴蔚,吴鹏,等.基于卷积神经网络的颈动脉斑 权责等问题,在大量测试后A能否切实应用于实际工 块超声图像特征识别[J].中国医疗器械信息,2016 作尚未可知,而如果AI能够代替医生完成大部分工作, 医生就可将工作重心放在临床决策的审核及科学研究方[14] Salomon, Winer n, Bernard JP,etal. A score-based 面,这一应用将解放医生们的生产力,使医生更加具有 创新动力,为专科发展带来裨益! mester ultrasound examination [J]. Prenat Diagn, 2008 822827 n H, Ni D, Qin J, et al. Standard plane localization in 参考文献 ultrasound via domain transferred deep neural network ]. IEEE J Biomed Health Inform, 2015 [1 Turing AM. Computing machinery and intelligence [J]. [16] Abdi AH, Luong C, Tsang T, et al. Automatic quality assess- Mind,1950,59:433-460. ment of echocardiograms using convolutional neural networks Peter N. Artificial intelligence, modern asibility on the apical four-chamber view []. IEEE Tran [M]. Englewood: Prentice Hall, 1995 Med Imaging,2017,36:;122-1230 3 Sekhar L, Wechsler L, Yonas H, et al. Value of transcranial [17 Knackstedt C, Bekkers SC, Schummers G, et al. Fully au- e dagnosIs after subarachnoid hemorrhage [J]. Neurosurgery, 1988 fraction and longitudinal strain: the fast-EFs multicenter study I. J Am Coll Cardiol, 2015, 66: 1456-1466 [4] Baumgartner RW, Mattle HP, Schroth G. Assessment of 2 [18] Furiasse N, Thomas JD. Automated algorithmic software in 50% and <50% intracranial stenoses by transcranial color-co. echocardiography: artificial intelligence? [J].J Am Coll Car ded duplex sonography [J]. Stroke, 1999, 30:87-92 diol,2015,66:1467-1469 [5] Swiercz M, Swiat M, Pawlak M, et al. Narrowing of the [19 Jeganathan J, Knio Z, Amador Y, et al. Artificial intellige middle cerebral artery: Ann Card Anaesth. 2017. 20 parison of transcranial color coded duplex sonography with con- 129134 ventional TCD [J]. Ultrasound Med Biol, 2010, 36: 17-28. [20 Kumar S, Nilsen WJ, Abernethy A, et al. Mobile health [6] Zhang L, Li QY, Duan YY, et al. Artificial neural network technology evaluation: the health evidence workshop [J] aided non-invasive grading evaluation of hepatic fibrosis by Am J Prev Med,2013,45:228-236. duplex ultrasonography[J]. BMC Med Inform Decis Mak,[2l]王弈,李传富.人工智能方法在医学图像处理中的研究新进 展[J].中国医学物理学杂志,2013,3:4138-4143 7] Zhu LC, Ye YL, Luo WH, et al. A model to discriminate [22] Priester AM, Natarajan S, Culjat MO. Robotic ultrasound alignant from benign thyroid nodules using artificial neural systems in medicine [J]. IEEE Trans Ultrason Ferroelectr etwork [J]. PLos One, 2013: e82211 Freq Control, 2013, 60: 507-523 [8 Acharya UR, Swapna G, Sree SV, et al. A review on ultra- und-based thyroid cancer tissue characterization and auto- 收稿日期:2017-09-06) mated classification [J]. Technol Cancer Res Treat, 2014 vo.9No.5457

人工智能在超声医学领域中的应用 Vol􀆰 9 No􀆰 5 457 析ꎮ 目前更多研究集中于读片场景的应用ꎬ 而针对患者 的操作扫查研究ꎬ 有学者提出可用一个计算机控制的机 械臂控制探头的位置和角度进行不同标准切面的扫查ꎬ 根据高矮胖瘦不一ꎬ 机械臂借助一些辅助参数和标记部 位精确调整扫查图像的位置和范围从而得到标准切面图 像[22] ꎮ 但是实际工作中ꎬ 一个超声诊断临床决策的实 现往往要结合多个切面、 直接与间接征象以及临床信息 的分析ꎬ 这样的能力或许需要到强 AI 阶段才能实现ꎮ 一种新药从研发到推广应用至少需要经过 3 个阶 段ꎬ 表明医疗创新实例往往需要面临更高的门槛ꎬ 这主 要是由于医疗行业的预防原则所致ꎮ AI 亦是如此ꎬ 其 需要经历大量的测试ꎬ 测试越多ꎬ 暴露的信息与问题越 多ꎬ 继而越能够预测后续可能产生的风险ꎬ 同时考虑到 法律法规、 民众接受度以及潜在的医疗事故背后相应的 权责等问题ꎬ 在大量测试后 AI 能否切实应用于实际工 作尚未可知ꎬ 而如果 AI 能够代替医生完成大部分工作ꎬ 医生就可将工作重心放在临床决策的审核及科学研究方 面ꎬ 这一应用将解放医生们的生产力ꎬ 使医生更加具有 创新动力ꎬ 为专科发展带来裨益! 参 考 文 献 [1] Turing AM. Computing machinery and intelligence [ J ]. Mindꎬ 1950ꎬ 59: 433 ̄ 460. [2] Stuart JRꎬ Peter N. Artificial intelligence: modern approach [M]. Englewood: Prentice Hallꎬ 1995. [3] Sekhar Lꎬ Wechsler Lꎬ Yonas Hꎬ et al. Value of transcranial doppler examination in the diagnosis of cerebral vasospasm after subarachnoid hemorrhage [ J ]. Neurosurgeryꎬ 1988ꎬ 22: 813 ̄ 821. [4] Baumgartner RWꎬ Mattle HPꎬ Schroth G. Assessment of ≥ 50% and <50% intracranial stenoses by transcranial color ̄co ̄ ded duplex sonography [J]. Strokeꎬ 1999ꎬ 30: 87 ̄ 92. [5] Swiercz Mꎬ Swiat Mꎬ Pawlak Mꎬ et al. Narrowing of the middle cerebral artery: artificial intelligence methods and com ̄ parison of transcranial color coded duplex sonography with con ̄ ventional TCD [J]. Ultrasound Med Biolꎬ 2010ꎬ 36: 17 ̄ 28. [6] Zhang Lꎬ Li QYꎬ Duan YYꎬ et al. Artificial neural network aided non ̄invasive grading evaluation of hepatic fibrosis by duplex ultrasonography [ J]. BMC Med Inform Decis Makꎬ 2012ꎬ 12: 55. [7] Zhu LCꎬ Ye YLꎬ Luo WHꎬ et al. A model to discriminate malignant from benign thyroid nodules using artificial neural network [J]. PLoS Oneꎬ 2013: e82211. [8] Acharya URꎬ Swapna Gꎬ Sree SVꎬ et al. A review on ultra ̄ sound ̄based thyroid cancer tissue characterization and auto ̄ mated classification [J]. Technol Cancer Res Treatꎬ 2014: 289 ̄ 301. [9] Chi Jꎬ Walia Eꎬ Babyn Pꎬ et al. Thyroid nodule classification in ultrasound images by fine ̄tuning deep convolutional neural network [J]. J Digit Imagingꎬ 2017ꎬ 30: 477 ̄ 486. [10] Kessler Nꎬ Cyteval Cꎬ Gallix Bꎬ et al. Appendicitis: evalu ̄ ation of sensitivityꎬ specificityꎬ and predictive values of USꎬ doppler USꎬ and laboratory findings [ J]. Radiologyꎬ 2004ꎬ 230: 472 ̄ 478. [11] Kim KBꎬ Park HJꎬ Song DHꎬ et al. Developing an intelligent automatic appendix extraction method from ultra ̄ sonography based on fuzzy ART and image processing [ J]. Comput Math Methods Medꎬ 2015ꎬ 2015: 389057. [12] Tajbakhsh Nꎬ Shin JYꎬ Gurudu SRꎬ et al. Convolutional neural networks for medical image analysis: full training or fine tuning? [ J ]. IEEE Trans Med Imagingꎬ 2016ꎬ 35: 1299 ̄ 1312. [13] 孙夏ꎬ 吴蔚ꎬ 吴鹏ꎬ 等. 基于卷积神经网络的颈动脉斑 块超声图像特征识别 [ J]. 中国医疗器械信息ꎬ 2016ꎬ 9: 4 ̄ 8. [14] Salomon LJꎬ Winer Nꎬ Bernard JPꎬ et al. A score ̄based method for quality control of fetal images at routine second ̄tri ̄ mester ultrasound examination [ J ]. Prenat Diagnꎬ 2008ꎬ 28: 822 ̄ 827. [15] Chen Hꎬ Ni Dꎬ Qin Jꎬ et al. Standard plane localization in fetal ultrasound via domain transferred deep neural networks [J]. IEEE J Biomed Health Informꎬ 2015ꎬ 19: 1627 ̄ 1636. [16] Abdi AHꎬ Luong Cꎬ Tsang Tꎬ et al. Automatic quality assess ̄ ment of echocardiograms using convolutional neural networks: feasibility on the apical four ̄chamber view [J]. IEEE Trans Med Imagingꎬ 2017ꎬ 36: 1221 ̄ 1230. [17] Knackstedt Cꎬ Bekkers SCꎬ Schummers Gꎬ et al. Fully au ̄ tomated versus standard tracking of left ventricular ejection fraction and longitudinal strain: the fast ̄EFs multicenter study [J]. J Am Coll Cardiolꎬ 2015ꎬ 66: 1456 ̄ 1466. [18] Furiasse Nꎬ Thomas JD. Automated algorithmic software in echocardiography: artificial intelligence? [J]. J Am Coll Car ̄ diolꎬ 2015ꎬ 66: 1467 ̄ 1469. [19] Jeganathan Jꎬ Knio Zꎬ Amador Yꎬ et al. Artificial intelligence in mitral valve analysis [J]. Ann Card Anaesthꎬ 2017ꎬ 20: 129 ̄ 134. [20] Kumar Sꎬ Nilsen WJꎬ Abernethy Aꎬ et al. Mobile health technology evaluation: the health evidence workshop [ J ]. Am J Prev Medꎬ 2013ꎬ 45: 228 ̄ 236. [21] 王弈ꎬ 李传富. 人工智能方法在医学图像处理中的研究新进 展 [J]. 中国医学物理学杂志ꎬ 2013ꎬ 3: 4138 ̄ 4143. [22] Priester AMꎬ Natarajan Sꎬ Culjat MO. Robotic ultrasound systems in medicine [ J]. IEEE Trans Ultrason Ferroelectr Freq Controlꎬ 2013ꎬ 60: 507 ̄ 523. (收稿日期: 2017 ̄ 09 ̄ 06)

点击下载完整版文档(PDF)VIP每日下载上限内不扣除下载券和下载次数;
按次数下载不扣除下载券;
24小时内重复下载只扣除一次;
顺序:VIP每日次数-->可用次数-->下载券;
已到末页,全文结束
相关文档

关于我们|帮助中心|下载说明|相关软件|意见反馈|联系我们

Copyright © 2008-现在 cucdc.com 高等教育资讯网 版权所有