整理 | Jane出品 | AI科技大本营(ID:rgznai100)
近日,腾讯优图首个医疗AI深度学习预训练模型 MedicalNet 正式对外开源。这也是全球第一个提供多种 3D 医疗影像专用预训练模型的项目,将为全球医疗AI发展提供基础。 许多研究表明,深度学习的发展非常依赖数据量。自然图像领域中存在着许多海量数据集,如 ImageNet,MSCOCO。基于这些数据集产生的预训练模型推动了分类、检测、分割等应用的进步。不同于自然图像,医疗影像大部分都是 3D 结构形态的,同时,由于数据获取和标注难度大,数据量稀少,目前尚未存在海量数据集及对应的预训练模型。 MedicalNet 是腾讯优图首个专为3D医疗影像在深度学习应用上所开发的一系列预训练模型,为任何3D医疗影像AI应用起到“打地基”的作用,加快模型收敛,减轻模型对数据量的依赖,MedicalNet具备以下特性: 1、MedicalNet提供的预训练网络可迁移到任何3D医疗影像的AI应用中,包括但不限于分割、检测、分类等任务;2、尤其适用小数据医疗影像AI场景,能加快网络收敛,提升网络性能;3、通过简单配置少量接口参数值,即可进行微调训练;4、项目提供多卡训练以及测试评估代码,接口丰富,扩展性强;5、提供不同深度3D ResNet预训练模型,可供不同数据量级应用使用。 为了产生3D医疗影像的预训练模型,MedicalNet聚集多个来自不同3D医疗领域的语义分割小规模数据集,并提出了基于多分支解码器的多域联合训练模型来解决数据集中的标注缺失问题。我们的预训练模型可以迁移到任何3D医疗影像应用的深度学习模型中。整个系统的工作流程如下图所示:  我们将MedicalNet模型迁移到预训练时未接触过的Visceral和LIDC数据集中,完成全新的肺部分割和肺结节分类任务,并与目前常用的从零训练(train from scratch)以及Kinetics视频3D预训练模型在性能以及收敛速度上做了比较。 性能提升:在肺部分割应用上,相比于Train from Scratch,MedicalNet在Dice上有16%到33%幅度的提升,相比于Kinetics有4%到7%幅度的提升。在肺结节良恶性分类应用上,相比于Train from Scratch,MedicalNet有6%到23%幅度的预测正确率(Acc)提升,相比于Kinetics有7%到20%幅度的提升。 收敛速度:实验证明,无论是在肺分割任务还是肺结节分类任务上,MedicalNet均能为模型提供一个较低的初始化损失值,明显加快损失下降速度,下图为MedicalNet性能的一个简单示例,展示了在全器官分割应用中,不同预训练方式在一定训练迭代次数下的测试结果。可以看出,基于我们的预训练模型(MedicalNet)的结果最接近标签(ground truth),且远优于从零训练(train from scratch)的结果,更多细节请参考论文。  随着人工智能的火热化,医疗影像AI也成为了当前各应用领域中最热门的版块。区别于其他人工智能应用,人工智能在医疗领域的应用门槛最高,最大的原因在于标注数据的匮乏。医疗影像数据的获取通常需要经历重重关卡,同时,由于领域的专一性,数据通常需要资深医师标注,而每个3D数据的标注耗时耗力。在当前紧张的医护资源下,医疗影像数据的获取战线将非常漫长,阻碍了应用落地的进程。再者,标注数据量相当有限,大部分医疗部门都需要面临数据量稀少和深度学习之间的鸿沟。 
专有领域专有模型,MedicalNet为各个3D医疗影像应用准备了具备临床通用知识的数据库。即使在小数据量中,该数据库的有效特征也能帮助落地应用取得较好的医疗检测性能,这减轻医疗影像AI应用对数据量的依赖,实现了落地需求,加快落地速度。

MedicalNet是腾讯在医疗AI领域的首个开源项目

Github 地址:

https://github.com/Tencent/MedicalNet

【END】

精彩推荐

AI ProCon 2019 邀请到了亚马逊首席科学家@李沐,在大会的前一天(9.5)亲授「深度学习实训营」,通过动手实操,帮助开发者全面了解深度学习的基础知识和开发技巧。  距离「培训+会议」优惠票 2149 元(3.5折)限时抢购结束仅剩 2 天,扫描下方二维码购票,即享折扣。 3.5 折最后倒计时 2 天,8 月 12 日将开启 5 折票

社群福利

扫码添加小助手,回复:大会,加入2019 AI开发者大会福利群,每周一、三、五 更新学习资源、技术福利,还有抽奖活动~

推荐阅读

  • 连续亏损6年,负债超10亿美元,DeepMind靠烧钱模式能走多远?

  • 在线教育公司的硬件雄心:1秒查词,网易有道发布词典笔二代

  • 七夕大礼包:26个AI学习资源送给你

  • 玩王者荣耀用不好英雄?两阶段算法帮你精准推荐精彩视频

  • 突发!Python再次第一,Java和C下降,凭什么?

  • 白话中台战略:中台是个什么鬼?

  • 伟创力回应扣押华为物资;谷歌更新图片界面;Python 3.8.0b3 发布 | 极客头条

  • 沃尔玛也要发币了,Libra忙活半天为他人做了嫁衣?

  • 知名饮料制造商股价暴涨500%惊动FBI,只因在名字中加入了"区块链" ?

你点的每个“在看”,我都认真当成了喜欢

腾讯优图开源业界首个3D医疗影像大数据预训练模型相关推荐

  1. 腾讯开源首个医疗AI项目,业内首个3D医疗影像大数据预训练模型

    乾明 发自 凹非寺  量子位 报道 | 公众号 QbitAI 腾讯AI,开源又有新动作. 旗下顶级AI实验室腾讯优图,对外开源了腾讯首个医疗AI项目--深度学习预训练模型MedicalNet. 这一项 ...

  2. 全球首个!腾讯优图开源3D医疗影像大数据预训练模型

    点击我爱计算机视觉标星,更快获取CVML新技术 本文转载自腾讯优图. 近日,腾讯优图首个医疗AI深度学习预训练模型MedicalNet正式对外开源.这也是全球第一个提供多种3D医疗影像专用预训练模型的 ...

  3. 腾讯开源首个医疗AI项目,业内首个3D医疗影像大数据预训

    腾讯AI,开源又有新动作. 旗下顶级AI实验室腾讯优图,对外开源了腾讯首个医疗AI项目--深度学习预训练模型MedicalNet. 这一项目,专为3D医疗影像在深度学习上的应用开发,也是业内首个同方向 ...

  4. 重构ncnn,腾讯优图开源新一代移动端推理框架TNN

    来源 | 腾讯优图 从学界到工业界,"开源"已经成为AI领域的一个关键词.一方面,它以"授人以渔"的方式为AI构建了一个开放共进的生态环境,帮助行业加速AI应用 ...

  5. 腾讯优图开源深度学习推理框架 TNN,助力 AI 开发降本增效

    从学界到工业界,"开源"已经成为AI领域的一个关键词.一方面,它以"授人以渔"的方式为AI构建了一个开放共进的生态环境,帮助行业加速AI应用落地:另一方面,在解 ...

  6. 打破两项世界纪录,腾讯优图开源视频动作检测算法DBG

    近日,腾讯优图实验室提出一种新的视频动作检测算法DBG并开源,这是继今年4月人脸检测算法DSFD开源后,优图的又一次开源动作. 目前,DBG算法在全球两大权威视频动作数据集ActivityNet-1. ...

  7. 腾讯优图开源项目全景图!

    点击上方"3D视觉工坊",选择"星标" 干货第一时间送达 腾讯优图属于国内工业界CV领域实验室的第一梯队,其不仅服务腾讯内部线上产品,也开源了多个前沿研究和工程 ...

  8. ECCV2022|腾讯优图开源DisCo:拯救小模型在自监督学习中的效果

    作者丨Linz@知乎 (已授权) 来源丨https://zhuanlan.zhihu.com/p/366819594 编辑丨极市平台 导读 本文通过解读DisCo,一种基于蒸馏的轻量化模型的自监督学习 ...

  9. 腾讯优图开源项目TNN总结与实践

    一.Github的license 1.开源软件的License,一般是授权用户使用.拷贝.修改和再发布的合法权利及应当遵守的约定,同时包含作者的免责声明和使用自担责声明. 2.使用合适的开源许可证可以 ...

最新文章

  1. Python爬虫高级之JS渗透登录新浪微博 | 知了独家研究
  2. python myqr 二维码生成
  3. 像素级动态模糊(Pixel Motion Blur)
  4. [Firebug]用来武装Firebug的十三款Firefox插件
  5. 【iCore1S 双核心板_ARM】例程三:EXTI中断输入实验——读取ARM按键状态
  6. C++编程笔记:贪心算法实现活动安排问题
  7. 45 SD配置-销售凭证设置-分配订单类型/状态参数文件
  8. jQuery事件对象event的属性和方法
  9. 2021年Node.js开发人员学习路线图
  10. Win7下PDF文件无法显示缩略图的解决方法
  11. 二阶系统响应指标图_一阶和二阶系统的动态特性参数
  12. ones刻录软件怎么用
  13. 基于 AngularJS 的 UI 框架 Suave UI
  14. 线代9讲 第八讲 相似理论
  15. 转运RNA(tRNA)甲基化修饰7-甲基胞嘧啶(m7C)|tRNA-m7G
  16. 万里挑一!热门机器学习开源资源最强盘点
  17. 如何把流程图转换为软件设计(初稿)
  18. 我的世界java版是免费,我的世界Java版
  19. 使用Java计算生辰八字五行属性
  20. 河边的小屋原来是这么俗气的一个名字

热门文章

  1. Tomcat的配置及优化
  2. JAVA的StringBuffer类
  3. HQL中的Like查询需要注意的地方
  4. [NHibernate]代码生成器的使用
  5. 暑期集训3:几何基础 练习题D:  HDU - 2036 ​​​​​​​
  6. 网页失去焦点事件 visibilitychange
  7. 洛谷P3122 [USACO15FEB]圈住牛Fencing the Herd(计算几何+CDQ分治)
  8. windows10上使用一个tomcat部署2个项目
  9. POJ - 3660 Cow Contest(flod)
  10. 基于visual Studio2013解决面试题之0804复杂链表