达摩院的AI研讨,让人类首次实现了大规模胰腺癌早筛

用人工智能挑战最致命的癌症。日常生活中,我们经常会与人工智能举行互动,从解锁手机,使用搜索引擎到地图导航……AI 正在为我们带来越来越多的便利。不过在临床医学中,AI 手艺的应用速度要慢得多,绝大多数诊疗和治疗建议仍然完全鉴于人类判断。直到最近,AI 在调理印象的新突破,让事情有了变化。上周,最新一期自然杂志子刊《自然医学》(Nature Medicine)上一个名为「PANDA」(PAncreatic cancer Detection with AI)的胰腺癌早筛 AI 模型正式亮相,成为了人们热议的话题。该研讨

用人工智能挑战最致命的癌症。

日常生活中,我们经常会与人工智能举行互动,从解锁手机,使用搜索引擎到地图导航……AI 正在为我们带来越来越多的便利。不过在临床医学中,AI 手艺的应用速度要慢得多,绝大多数诊疗和治疗建议仍然完全鉴于人类判断。

直到最近,AI 在调理印象的新突破,让事情有了变化。

上周,最新一期自然杂志子刊《自然医学》(Nature Medicine)上一个名为「PANDA」(PAncreatic cancer Detection with AI)的胰腺癌早筛 AI 模型正式亮相,成为了人们热议的话题。

达摩院的AI研讨,让人类首次实现了大规模胰腺癌早筛

该研讨通过「平扫 CT+AI」的方法,让我们首次拥有了大规模晚期胰腺癌的筛查手段。

据研讨团队介绍,PANDA 晚期筛查模型的特异性达到了 99.9%,这意味着每 1000 次测试中只出现一个假阳性;其检测胰腺肿瘤的能力可达 92.9%;鉴别胰腺癌的能力比放射科大夫独立判断时的平均表现提高了 34.1%。

这或许是人类在与「癌症之王」胰腺癌的斗争中第一次掌握了主动权。《自然医学》对此还专门刊发评论文章:「鉴于调理印象 AI 的癌症筛查即将进入黄金时代」。

达摩院的AI研讨,让人类首次实现了大规模胰腺癌早筛

癌症的早筛一直被认为充满挑战,人们一直期待出现一种简便通用的手艺,来对大规模无症状人群举行癌症筛查。利用 AI 算法的 PANDA 或许会成为给我们带来希望。

破解「癌症之王」

关于胰腺癌, 我们可以列举两个残酷的数据:平均五年生存率不到 10%,80% 的情况下发现就是晚期。时至今日,胰腺癌已经成为中国乃至全球生存率最低的恶性肿瘤。

达摩院的AI研讨,让人类首次实现了大规模胰腺癌早筛

 图片来源:http://www.china-rt.cn/special/856.html

胰腺癌晚期发现困难的原因之一在于其明显症状很少,而且在癌症进展之前很难举行自愿检查。此外,由于胰腺位于身体最深处,一些印象学检查(例如腹部超声检查)可能无法显示整个胰腺。而加强 CT、加强 MRI、PET 等印象诊疗,由于需要注射造影剂、辐射剂量、检查周期长、费用昂贵等原因,不太适合用于大规模胰腺癌筛查。

在体检及医院常用的平扫 CT 图象上,同样由于图象对比度低,很难鉴别晚期胰腺病变,容易出现漏诊或误诊。

因此,胰腺癌的早筛早治具有重要的临床意义,在筛查手段上举行革新也显得尤为必要和关键。AI 手艺或许能够帮助我们解决这个问题。

在 PANDA 论文中,鉴于阿里达摩院的调理 AI 手艺,上海市胰腺疾病研讨所、浙江大学医学院附属第一医院、中国医科大学附属盛京医院、复旦大学附属肿瘤医院、布拉格查理大学第一附属医院、上海交通大学医学院附属新华医院、约翰霍普金斯大学等机构首次提出以「平扫 CT+AI」举行大规模的胰腺癌晚期筛查

PANDA 模型在这十多家顶尖调理机构举行了大规模多中心验证,显示了稳定的泛化性能。此外,在上海市胰腺疾病研讨所的体检、急诊、门诊、住院等场景中实验,仅通过最简单的平扫 CT,就在 2 万多真实世界连续病人群体中发现 31 例临床漏诊病变,至今已有两例晚期胰腺癌病患已完成手术治愈。

目前,这项研讨成果已向全球大夫和研讨人员开放。

这也是中国放射印象领域的科研成果首次登上《自然医学》杂志:

达摩院的AI研讨,让人类首次实现了大规模胰腺癌早筛

论文链接:https://www.nature.com/articles/s41591-023-02640-w

开放地址:https://g.alicdn.com/medical-engineering/d3viewer/0.0.87/index.html#/panda

在 AI 加调理领域,我们见证过很多调理印象的研讨成果,本次登上 Nature 子刊的工作有哪些创新之处?首先,针对胰腺癌变位置隐匿、在平扫 CT 图象中无明显表征等特点,达摩院为 PANDA 设计了独特的深度学习框架,模型概览图如下所示。

达摩院的AI研讨,让人类首次实现了大规模胰腺癌早筛

上图 a 为模型开发,PANDA 以平扫 CT 为输入,输出可能发生胰腺病变(包括 PDAC 和其他 7 种非 PDAC 亚型)的概率和分隔掩码。PANDA 接受了病理学确认的病患级标签和加强 CT 图象上标注的病变掩码的训练。b 为模型评估,评估 PANDA 在内部测试组、平扫和加强 CT 、外部测试组、胸部 CT 组等真实世界多场景研讨中的性能。c 为模型临床转化。

达摩院调理 AI 高级算法专家、也是这次 PANDA 项目负责人张灵进一步解释称,PANDA 并不是一个单纯的视觉分隔模型,它兼具了分隔、检测和分类功能,其深度学习框架(下图)包括以下三阶段,每个阶段「各司其职」。

第一,通过构建分隔网络(U-Net)来定位胰腺;

第二,采用多任务网络(CNN)来检测异常情况;

第三,采用双通道 Transformer 来分类并鉴别胰腺病变的类型。

达摩院的AI研讨,让人类首次实现了大规模胰腺癌早筛

达摩院在 PANDA 模型的训练策略上也做了一系列手艺创新,从而实现了高效、安全的大规模胰腺癌早筛。其中的关键在于如何更加准确地鉴别平扫 CT 图象中肉眼难以鉴别的细微病例特征。

同样重要的是数据,AI 筛查模型的训练需要大夫手工标注大量肿瘤,但平扫 CT 图象对比度极低导致大夫几乎无法标注。达摩院调理 AI 团队先让合作大夫们在加强 CT 上勾画,然后利用提出的知识迁移训练方法,通过精确的适用于腹部 CT 图象配准的算法将加强 CT 上的先验知识迁移到平扫 CT 相应位置。这样一来,以往 AI 鉴别癌症普遍存在的勾画难、标注难、训练难等问题得到有效解决。

同时,由于该研讨主要通过腹部 CT 训练,而现实中胸部 CT 大量存在,达摩院算法团队提出一种鉴于模拟裁剪的数据加强方法,解决了模型泛化到胸部 CT 通常可能出现胰腺肿瘤扫描不全的问题。

得益于 PANDA 训练架构和策略的创新,该研讨构建了迄今最大的胰腺癌肿瘤 CT 训练集(包含 3208 名真实病人)。该 AI 算法在一个由全球十多家医院约 6200 名患者组成的多中心队列中举行了验证,其中包括确诊的胰腺癌病例和无胰腺病变的对照病例。

随后,PANDA 进一步在包含 20530 名真实世界连续病例的多场景验证中测得了 92.9% 的敏感性(判断存在胰腺病变的准确率)和 99.9% 的特异性(正确判断无病的几率)。

达摩院的AI研讨,让人类首次实现了大规模胰腺癌早筛

截至目前,PANDA 模型已在医院、体检等场景被调用超过 50 万次,帮助大夫成功发现多起临床漏诊的晚期胰腺肿瘤病例,平均每 1000 次只出现一次假阳性。研讨人员表示,未来还将持续举行多中心前瞻性临床验证, 以期改写「胰腺肿瘤不推荐筛查」的悲观论点。

复旦大学附属肿瘤医院放射诊疗科主任顾雅佳教授表示,这篇论文提出了一种有潜力的大规模胰腺癌筛查方法,在提升检出率的同时,又不会给病人带来额外的辐射与经济负担,「设想一下,我们去体检时做个最简单的平扫 CT,就能查出有无胰腺癌,这将帮助到很多胰腺病人,减少悲剧的发生。」

达摩院调理 AI 团队负责人、IEEE Fellow 吕乐表示,这项研讨是一个重要的里程碑,在临床上证实了「平扫 CT+AI」的癌症筛查手艺路径的可靠性。

构建实用的 AI 印象诊疗体系

AI 加持的调理印象手艺,正在为当前的医学带来各种新的可能性。

迄今为止,美国食品药品监督管理局 FDA 已批准了 300 多种调理印象相关的人工智能工具。通过深度学习手艺,大夫们可以在一些领域的病灶鉴别、标注、靶区勾画等任务上获得帮助,更快发现隐藏病灶,完成诊疗、治疗工作。

在癌症的 AI 调理印象工作上,此前大多数方法聚焦于协助大夫举行病灶检测和诊疗。此次 PANDA 研讨带来的突破,则为人们在鉴于印象的大规模多癌筛查上开辟了一条新道路,有望提高重大癌症的晚期检出率。

对于达摩院的 AI 加调理探索来说,这只是近年来成果的一小部分。

「AI 应该解决那些尚未得到解决、而病人又真切需要的临床需求。我们需要在病人性命攸关的临床问题上,做出不可或缺的贡献。」这是达摩院调理 AI 团队秉持的调理手艺第一性原则。

我们了解到,达摩院调理 AI 团队长期致力于 AI 与调理印象的融合研讨,重点布局精确癌症诊疗、精确慢性病诊疗、神经退行性疾病预筛三大方向,其中研发了包括规模筛查、精确诊疗、预后治疗、响应评估在内的全流程的癌症诊疗手艺。

除了手艺探索之外,达摩院调理 AI 团队还与全球多家顶尖调理机构的合作,利用 AI 手艺探索低廉、高效的多癌筛查新方法,希望通过一次平扫 CT 就能查出多种晚期癌症。

截至目前,相关工作已经在胰腺癌、食管癌肺癌、乳腺癌、肝癌、胃癌、结直肠癌等七种高发癌症上取得阶段性进展,相关研讨成果先后登上 Nature Medicine、Nature Communications 等医学期刊及 CVPR/MICCAI/IPMI 等 AI 顶会。可以说鉴于调理印象 AI 的前沿手艺与癌症筛查这个领域实现了「双向奔赴」。

达摩院的 AI + 调理印象重要研讨,还包括但不限于:

2022 年 10 月,其调理 AI 团队初步验证了 AI 与平扫 CT 结合的手艺可行性,敏感性和特异性均超过专家大夫水平,有望用于晚期食管癌检查,相关论文发表在了 MICCAI 2022;同月鉴于深度学习对头颈癌 42 个危及器官举行高效精确自动规划,有效减少放射治疗并发症,研讨登上 Nature Communications。

达摩院的AI研讨,让人类首次实现了大规模胰腺癌早筛

论文地址:https://www.nature.com/articles/s41467-022-33178-z

2023 年 6 月,针对 CV 领域的 OOD 难题提出全新医学图象语义分隔框架,让 AI 更准确鉴别肿瘤中的疑难罕见案例,并已在胰腺和肝脏肿瘤上得到验证。该研讨被 CV 顶会 CVPR 2023 评为 Highlight 论文。同月鉴于加强 CT 的胰腺肿瘤鉴别诊疗也有了新进展,成果在医学图象处理顶会 IPMI 2023 上发表。

2023 年 8 月,发布多癌印象分析通用模型 CancerUniT ,利用加强 CT 实现 8 种主流癌症的辅助诊疗,研讨成果被 CV 顶会 ICCV 2023 收录。同月发布的首个可以分隔全身 143 个器官的连续深度学习框架也被 ICCV 2023 接收。

达摩院的AI研讨,让人类首次实现了大规模胰腺癌早筛

CancerUniT 检测、分隔和诊疗 8 种癌症肿瘤的示例。图源:https://arxiv.org/pdf/2301.12291.pdf

不久后,达摩院免费开放 100 件 AI 专利许可,其中有 3 件是专门针对癌症的精确治疗和解决关键的调理图象配准问题(后来在 10 月份 MICCAI 2023 Learn2Reg 竞赛上, 达摩院相关调理图象配准手艺以比较明显的优势,获得所有两个赛道的冠军)。

2023 年 10 月,鉴于 CT 图象的肝脏肿瘤筛查与诊疗、胃癌筛查、肺结节自动检测及良恶性鉴别、胰腺癌预后等几项工作也在 MICCAI 2023 发表。

再加上胰腺癌晚期检测模型 PANDA,达摩院的调理 AI 手艺,成为了一个又一个 AI for Science 的范例。

不仅如此,在达摩院的设想中,AI 不仅可以辅助大夫举行多个癌症疾病筛查,同时还可以举行心脏病、腰椎、骨骼等疾病筛查,希望能在一张平扫 CT 的基础上同时检测出 8 种肿瘤和 5 种慢性病,实现鉴于调理 AI 的普惠筛查。

据了解,达摩院已与浙大一院、复旦肿瘤、北医三院等多家三甲医院建立了临床科研合作关系,其调理 AI 产品已成功对接落地 30+ 家调理印象合作伙伴,累计落地调理机构数超过 1000 家,为全球 2000 万人次提供了智能化调理健康服务。

结语

有了 AI + 平扫 CT 手艺,我们或许可以想象:在未来通过完成常规、有限的体检项目,我们就能在 AI 加持辅助下获得很多疾病的筛查结果。

此外,在 AI 手艺进一步实用化以后,不仅是调理印象数据,人们的就诊记录、行为模式,甚至声音等各种信息都可以作为数据举行模型的训练,并用于检测病症,为病人提供精确治疗的数据决策支持。

而这些能帮助人们获得健康的科技,会有一部分来自于阿里达摩院。

达摩院自 2017 年成立以来,一直以探索未知,以人类愿景为驱动力为目标,面向未来开展基础科学和创新性手艺研讨。位于科技趋势重要位置的 AI for Science,是其努力方向的重中之重。随着近年来一系列手艺突破和应用的铺开,很多原本存在于我们想象中的事正在逐步实现。

「任何一家公司生命周期都是有限的,但能留下来的,是阿里巴巴的手艺、经验以及对社会的担当。达摩院必须要解决社会问题,才能活得长。」正如马云在达摩院创立之初所期许的,达摩院要成为一家面向未来、以科技解决重大社会问题的企业研讨机构。

迎战「癌王」,实现大规模癌症早筛的 PANDA,只是一个开始。

给TA打赏
共{{data.count}}人
人已打赏
工程

ChatGPT狂吐训练数据,还带个人信息:DeepMind发现大bug引争议

2023-11-30 15:15:00

工程

最强的GPT-4V都考不过?鉴于大学考试的尝试基准MMMU诞生了

2023-12-1 14:36:00

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
今日签到
搜索