AI大模型新突破!达摩院发布“八大癌”通用模型
时间:2023-08-17 04:00:01来源:中国电子报、电子信息产业网


【资料图】

大模型正在加速拥抱医疗行业。8月16日,阿里达摩院发布多癌影像分析通用模型,可检测、分割和诊断八种主要的高发致死癌症,有助于实现多癌统一诊断,降低漏诊概率。据悉,该模型的论文成果已被计算机视觉顶会ICCV 2023收录,目前已在上海市第一人民医院等多家合作医院进行应用测试。

浙江大学医学院附属第一医院放疗科副主任叶香华表示,多癌图像分析统一模型特别符合临床医生的实际需求,不仅可以像一名住院医生给出影像里的各个癌症和常见疾病的初步诊断,还可以高效检测出早期癌症的病灶,大幅减低医生的看片时间,并辅助医生提高癌症的准确诊断率,是临床医生不可多得的好助手。

当前,医疗AI模型虽然已经足够“大”,可完成单个器官疾病识别,辅助医生进行诊断,但在实现多个器官的精准识别时遇到较大挑战。一方面,在进行器官疾病识别时存在过高的假阳性问题;另一方面,存在一定概率的漏诊,这对于癌症多发病人的诊疗影响颇深。为避免错诊与漏诊,放射科医生通常对全身的多器官进行多疾病的检测和诊断。因此,临床治疗迫切需要一个更高效的多癌统一诊断模型。

针对上述痛点,达摩院医疗AI团队联合中山大学肿瘤防治中心、四川省肿瘤医院、浙大附属第一医院、盛京医院、广东省人民医院等单位,提出了一个统一的多癌影像分析通用模型(cancerUniT),以Mask Transformer语义分割为基础,解决多种肿瘤图像此前难以统一检测、分割和诊断的问题,适用于八种主流的高发高致死癌症(肺、结直肠、肝、胃、乳腺、食管、胰腺、肾)以及相关器官中的肿瘤子类型。

据了解,多癌问题的复杂性主要体现在器官、恶性肿瘤和其他肿瘤类型之间存在许多关联性。例如,肝癌和肝囊肿虽都位于肝脏内,但在纹理和良恶性方面存在差异;而肝癌和胰腺癌虽形态相似,但却是分属不同器官的恶性癌症。

为了有效建模多癌之间的差异和相似性,达摩院医疗AI团队借助Transformer提出了一种新颖的肿瘤表示学习方法,将肿瘤表示为Transformer中的语义Query,并为不同器官中肿瘤及其子类型建立语义层次结构,让模型学习过程更加有效,并提高肿瘤及其子类型预测的一致性,实现同时输出分割、检测和诊断的预测,从而解决临床上复杂的多癌多肿瘤的识别任务。在一组631名患者的对比测试中,其肿瘤检测、分割和诊断任务的性能均优于8个特定器官的单模型组合,检测任务的平均敏感性达到93%,平均特异性达到82%。

阿里达摩院医疗AI团队负责人、IEEE Fellow吕乐表示,该工作以统一模型首次实现“一次调用即诊断八种最致命的癌症”,在简化AI模型复杂度的同时,保持较高的敏感度。这将为放射科医生提供全面的AI辅助诊断支持,尤其在癌症复发、远端转移等临床场景发挥重要效用。

自生成式AI浪潮席卷全球以来,大模型的落地问题备受业界瞩目。业内专家认为,医疗行业AI大模型或将率先落地,相关应用有望显著缓解医疗行业痛点,且未来随着应用场景的进一步深化,行业长期机遇巨大。

标签:

生活指南
  • 西山瑶族乡:巧用绩效考评指挥棒,着力提升防止返贫信息数据质量

    2023年以来,为做好防止返贫信息数据工作,灌阳县西山瑶族乡巧用绩效考

  • 一汽入股智慧出行平台服务商八维通

    证券时报e公司讯,企查查APP显示,近日,八维通科技有限公司发生工商变

  • 世界最大清洁能源走廊全力保供运行机组100台

    据悉,世界最大清洁能源走廊运行机组达100台,开机台数创年内新高,全

  • 最高法明确破坏森林资源犯罪的定罪量刑标准

    最高人民法院14日召开新闻发布会,发布《最高人民法院关于审理破坏森林

  • 8月14日新股提示:波长光电等申购

    据交易所公告,波长光电今日申购,申购代码:301421,发行价格:29 38

  • 猪肉放在冰箱里冷藏可以多久 猪肉放在冰箱里冷藏可以多久吃

    1、冷藏。肉类食物放在冷藏室能保存5-7天,在冷藏室存放的猪肉也受打开

  • 降价这张牌,能解合资车企几多愁?

    时值月初,又到了各大品牌公布成绩单的时候。8月1日,一众新势力品牌迫

  • 12.39万元起售,2024款哈弗大狗正式上市

    7月25日,2024款哈弗大狗(参数|询价)正式上市,新车共推出三款车型。20

  • 湖南郴州上线旅游“神器”“郴心游” 发放百万元文旅消费券

    郴州市人民政府副市长周海林表示,郴州将立足郴州文旅资源,持续加强产

  • 星图画师推荐 第四期

    前排提醒:本人仅为推荐画师作此专栏,未勾选原创,不会有任何收益如果

  • 微软将向Microsoft 365商业用户开放Clipchamp应用

    微软近日宣布,将在未来几周内向Microsoft365商业用户开放Clipchamp应

  • 观热点:投影仪扩展模式怎么用?投影仪怎么铺满全屏显示?

    投影仪扩展模式怎么用?1 首先我们点击开始菜单然后点击其中的设置按

  • 连续3天35℃+!山西发布高温预警

    7月6日15时46分,山西省气象台发布高温黄色预警。预警区域:阳泉市、晋

  • 股票减持是利空还是利好?减持股票交什么税?

    股票减持相对利空,就是坏事的意思。股票回购则相对利好,股票回购

  • 赛腾股份董秘回复: 锂电池切叠一体机是公司新研发的产品,公司对该领域的前景看好

    赛腾股份(603283)07月04日在投资者关系平台上答复了投资者关心的问题。

  • 环球速看:工行信用卡违约金怎么计算?工行信用卡违约金和透支利息是什么?

    工行信用卡违约金怎么计算根据工行规定,未能在到期还款日(含)前偿

  • 民生
    • 李宇嘉:全国商品房销售面积跌幅明显扩大,开发商资金来源进一步恶化

    • 全程有票而中途站无票?火车票为何难买?铁路部门权威回应

    • 沃森生物(300142):8月15日北向资金减持160.58万股

    • 先进数通:大中型企业数据中心建设是公司主要的业务