近日，全球计算机视觉三大顶会之一的 CVPR（IEEE 国际计算机视觉与模式识别会议）公布了 2021 年度的论文录用结果。腾讯医典 AI 与北京大学合作完成的论文《Exploring and Distilling Posterior and Prior Knowledge for Medical Report Generation》，凭借在医学图像报告自动生成领域的研究突破成功入选。

医学图像被广泛应用于诊断参考，基于肺部 CT 的新冠肺炎诊断也在疫情期间成为防控的关键。在医疗实践中，医生需要针对医学图像按标准撰写和输出医学报告。

面对庞大的患者数量，为所有的图像逐一撰写报告占据了医生大量工作时间。不同医生的经验差异也使得部分图像中的异常被忽略，无法体现在报告中。如何借助人工智能快速、准确地自动生成报告，对于提升医生工作效率和服务质量具有重要的实用价值，也成为了近年来医学图像研究领域中的一个重要课题。

然而，先进的医学图像报告自动生成系统也很容易受到医学图像报告中的数据偏差误导。本次腾讯医典 AI 入选的论文《Exploring and Distilling Posterior and Prior Knowledge for Medical Report Generation》，创新地提出了后验-先验知识探索及蒸馏（PPKED）框架，模拟人类医生的判读方式，结合先验和后验知识来生成报告，以提高最终生成的医学报告质量，针对性弥补了这一不足。

方法

模型框架。

模型中的先验探索（PrKE）模块可以通过预构建包含心脏肥大、脊柱侧弯、钙化点、肺炎等常见异常特征信息的知识图谱，模拟医生学习过的医学知识，以更好地识别出各种图像中的异常。

另一方面，通过在训练集中匹配、提取已知的相似图像和报告，可以与病人的历史报告做比对参考，模型亦在一定程度上模拟了医生根据自身丰富的经验来做决策的过程，实现利用先验知识来指导报告的生成。

后验探索（PoKE）模块可实现将当前图像进行标签分类，模拟医生找寻图像异常的过程，大致框定异常的区域，提醒医生针对该区域做进一步识别处理。

在经过多领域知识蒸馏（MKD）模块的综合过滤后，先验和后验知识可以生成最终的报告。

这一创新模型在 IU-Xray 和 MIMIC 两个国际公认的公开数据集上取得了比以往所有同类模型更好的结果，可以有效地生成更高质量的报告。

总结

医学图像报告自动生成模型的论文登上人工智能领域第一的行业会议，是腾讯医典在人工智能领域的又一次深入探索。

腾讯医典 AI 团队专注于医学知识图谱、医学自然语言理解、多模态深度学习等领域的研究，将持续在医学知识生成和推送、人工智能辅助诊疗等领域向行业输出切实可行的解决方案和领先技术，用科技提升医疗服务效率，助力医疗行业的数字化转型。

重磅！DLer-CVPR2021论文分享交流群已成立！

大家好，这是CVPR2021论文分享群里，群里会第一时间发布CVPR2021的论文解读和交流分享会，主要设计方向有：图像分类、目标检测、目标跟踪、点云与语义分割、GAN、超分辨率、人脸检测与识别、动作行为与时空运动、模型压缩和量化剪枝、迁移学习、人体姿态估计等内容。

进群请备注：研究方向+学校/公司+昵称（如图像分类+上交+小明）

???? 长按识别，邀请您进群！

模拟人类医生，自动生成靠谱医学报告，腾讯医典创新方法入选CVPR 2021相关推荐

  1. 懒人小工具1：winform自动生成Model,Insert,Select,Delete以及导出Excel的方法

       懒人小工具2:T4自动生成Model,Insert,Select,Delete以及导出Excel的方法    github地址:https://github.com/Jimmey-Jiang/J ...

  2. 快递取件码生成软件_一种自动生成取件码的快递柜及其使用方法与流程

    本发明涉及快递柜技术领域,尤其是自动生成取件码的快递柜及其使用方法. 背景技术: 近年来,随着快递业的迅速发展,快递柜的应用也越发广泛.为了解决快递智能存储问题,许多小区已经安装了智能快递柜,快递员将 ...

  3. Word进行自动生成目录右边页面等格操作简单详细方法

    Word进行自动生成目录右边页面等格操作简单详细方法 Word文档自动生成的目录,但是由于目录的右边不等(见下图),看起来不美观,所以我们可以将目录右边页面进行等格处理. 方法步骤如下: 一.首先选择 ...

  4. 无需向量监督的矢量图生成算法，入选CVPR 2021 | 代码开源

    说起图像生成算法,大家也许并不陌生. 不过,大多数算法都针对栅格图像,也就是位图,而不支持矢量图. 虽然也有一些生成矢量图形的算法,但是在监督训练中,又受限于矢量图数据集有限的质量和规模. 为此,来自 ...

  5. AI能写出靠谱医学报告了，CVPR2021收录 | 腾讯医典出品

    允中 发自 凹非寺 量子位 编辑 | 公众号 QbitAI 近日,全球计算机视觉三大顶会之一的CVPR(IEEE国际计算机视觉与模式识别会议)公布了2021年度的论文录用结果.腾讯医典AI团队与北京大 ...

  6. python groupby_用python自动生成全校学生成绩报告

    在高中阶段,学生考试成绩的分析是一个重要的而频繁的应用场景,快速.有效.精准的生成学生成绩的分析报告,是学情监控和开展个性化教学的前提.这个问题是基础性问题,实现的方法非常多,主要是基于Excel.在 ...

  7. python3根据excel表数据自动生成word格式数据报告

    目录 1. 完成xlsx数据读取 2.对数据做一些处理 3.生成图表 4.创建word文件 5.将分析结果保存入word文件中 本文主要是讲如何根据简单的xlsx数据,生成word数据报告,首先需要先 ...

  8. 【ArcGIS风暴】ArcGIS自动生成标识码（BSM）的两种方法案例教程

    1. 标识码编制规则 按照每个图层要素的标识码应具有唯一代码的基本要求,根据<GB/T 7027-2002 信息分类和编码的基本原则与方法>规定的信息分类原则和方法,要素标识码采用二层 2 ...

  9. C语言中怎么自动生成时间,在C语言中转换时间的基本方法介绍

    C语言mktime()函数:将时间转换成经过的秒数头文件: #include 定义函数: time_t mktime(strcut tm * timeptr); 函数说明:mktime()用来将参数t ...

最新文章

  1. 【Android 多媒体开发】 MediaPlayer 状态机 接口 方法 解析
  2. [OSDI 12] PoweGraph: 分布式图并行计算框架 学习总结
  3. 关于数据中心机房的专业名词
  4. 深度学习的150多篇文章和10多个专栏推荐
  5. pyrealsense2 frame_metadata_value类（帧的元数据）（帧的元数据指可能针对每个单独的帧公开的一组只读属性）
  6. Docker Registry本地私有仓库搭建
  7. TCP服务器/客户端实例(C/C )
  8. Power BI 如何获取数据做可视化
  9. 【重磅】世界上最可信、最权威的人工智能数据和洞察来源：2021年人工智能指数报告...
  10. java excel类库_Java 操作 Excel 的类库 jExcelApi
  11. 基于arduino的WiFi无线传输
  12. Windows C盘清理
  13. Java日期时间主要API：java.time.Duration类和java.time.Period类
  14. Unity学习推荐书籍
  15. trove mysql 镜像_trove 基于 centos7 制作 mysql5.5 镜像
  16. 三维管廊大规模实时渲染方案
  17. 一文了解下一代互联网核心技术HTTP/3及技术发展
  18. CLSID {10020200-E260-11CF-AE68-00AA004A34D5} failed due to the following error: 80040154. 错误的解决办法
  19. 行通选、列通选、片选
  20. 我的职业理想 有关计算机应用300字,我的理想职业作文300字三篇

热门文章

  1. Ubuntu下QT控制台程序无法运行的解决方案以及XTerm的配置方法
  2. ORA-24247: network access denied by access control list (ACL)
  3. win系统下nodejs安装及环境配置
  4. Linux上制作可执行的共享库示例
  5. DNS 映射解析应用（二）
  6. 用python编程代码画图形_python编程：如何使用python代码绘制出哪些常见的机器学习图像？...
  7. 什么是C++模板？_百度知道
  8. 机器学习（四）——模型调参利器 gridSearchCV（网格搜索） scoring的
  9. transforms.compose()
  10. windows下DOS命令关闭占用的端口