「PhD Talk」是 PaperWeekly 的学术直播间,旨在帮助更多的青年学者宣传其最新科研成果。我们一直认为,单向地输出知识并不是一个最好的方式,而有效地反馈和交流可能会让知识的传播更加有意义,从而产生更大的价值。
这是第 24 期「PhD Talk」


在本期 PhD Talk 中,来自香港大学的博士生顾佳涛,将向大家介绍他们在加速神经机器翻译(NMT)方向的一些进展。

本次 Talk 分为三部分:

第一部分将以 Google Brain 的 Transformer 为基础,简要介绍一些神经机器翻译的基本知识、主要进展和局限

第二部分是这期的主要内容,嘉宾将以第一作者身份,为大家详细介绍他们最近在 ICLR2018 上发表的文章 Non-autoregressive Neural Machine Translation。本文尝试用非自回归的方式改造 Transformer,在性能下降不多的情况下实现 10 倍左右的解码速度。

最后,作为 brainstorming,嘉宾会和大家一起交流对于非自回归解码几个已经实现或者可能的研究方向和应用

■ 论文 | Non-Autoregressive Neural Machine Translation

■ 链接 | https://www.paperweekly.site/papers/1093

■ 作者 | Jiatao Gu, James Bradbury, Caiming Xiong, Victor O.K. Li, Richard Socher

嘉宾介绍


顾佳涛

香港大学博士生

Jiatao Gu is currently a 4th year Ph.D. student at the Hong Kong University in Victor O.K. Li’s research group.

He was a former research intern at Salesforce Research (September ~ December 2017) and Microsoft Research (April ~ August 2017). He was also a former visiting student in Kyunghyun Cho’s group at NYU (June 2016 ~ January 2017). Before that, he received his Bachelor's degree at Tsinghua University in 2014. Jiatao's research interests cover natural language processing and deep learning, especially on neural machine translation.

He has published papers on ACL, EMNLP, NAACL, EACL, AAAI, and ICLR.

PhD Talk

 

非自回归神经机器翻译

香港大学博士生顾佳涛

内容分享√在线Q&A√

活动形式:PPT直播

 活动时间 

3 月 9 日(周五)20:00-21:00

45 min 分享 + 15 min Q&A

长按识别二维码,进入直播间

*或使用斗鱼App搜索「1743775」


往期回顾

腾讯AI Lab涂兆鹏:如何提升神经网络翻译的忠实度

微软亚洲研究院论文解读:GAN在网络特征学习中的应用

微软亚洲研究院吴俣:基于动态词表的对话生成研究

基于生成模型的事件流研究 + NIPS 2017 论文解读

亚马逊高级应用科学家熊元骏:人类行为理解研究进展

清华大学冯珺:基于强化学习的关系抽取和文本分类

基于双语主题模型的跨语言层次分类体系匹配

关于PaperWeekly


PaperWeekly 是一个推荐、解读、讨论、报道人工智能前沿论文成果的学术平台。如果你研究或从事 AI 领域,欢迎在公众号后台点击「交流群」,小助手将把你带入 PaperWeekly 的交流群里。

▽ 点击 | 阅读原文 | 加入社区刷论文

香港大学顾佳涛:非自回归神经机器翻译 | 直播预告相关推荐

  1. 今晚直播:非自回归神经机器翻译 | PhD Talk #24

    「PhD Talk」是 PaperWeekly 的学术直播间,旨在帮助更多的青年学者宣传其最新科研成果.我们一直认为,单向地输出知识并不是一个最好的方式,而有效地反馈和交流可能会让知识的传播更加有意义 ...

  2. 直播实录 | 非自回归神经机器翻译 + ICLR 2018 论文解读

    本文为 3 月 9 日,香港大学博士生--顾佳涛博士在第 24 期 PhD Talk 中的直播分享实录. 在本期 PhD Talk 中,来自香港大学的博士生顾佳涛,向大家介绍了他们在加速神经机器翻译( ...

  3. 线上直播 | NVIDIA TensorRT在神经机器翻译中的应用

    神经机器翻译(Neural Machine Translation,简称 NMT)存在于各种各样的消费者应用程序中,包括 web 站点.路标.在外语中生成字幕等. NVIDIA 的可编程推理加速器 T ...

  4. 直播预告 | 基于多智能体交流游戏的零资源机器翻译

    「PhD Talk」是 PaperWeekly 的学术直播间,旨在帮助更多的青年学者宣传其最新科研成果.我们一直认为,单向地输出知识并不是一个最好的方式,而有效地反馈和交流可能会让知识的传播更加有意义 ...

  5. TensorFlow+TVM优化NMT神经机器翻译

    TensorFlow+TVM优化NMT神经机器翻译 背景 神经机器翻译(NMT)是一种自动化的端到端方法,具有克服传统基于短语的翻译系统中的弱点的潜力.本文为全球电子商务部署NMT服务. 目前,将Tr ...

  6. 【论文翻译】联合学习对齐和翻译的神经机器翻译

    这篇论文在采用RNN编码器-解码器结构做端到端的神经机器翻译的基础上,使得模型可以在预测下一个词的时候,自动地搜索源句子相关的部分,这就是attention机制. 原论文链接: Neural Mach ...

  7. 【论文阅读】Paraformer工业级非自回归端到端语音识别模型

    Paraformer: Fast and AccurateTransformer for Non-autoregressive End-to-End Speech Recognition 摘要 介绍 ...

  8. 使用fairseq从头开始训练一个中英神经机器翻译模型

    前言 本文在news-commentary-v15语料上训练了中英NMT模型,并将整个流程,包括工具和数据的准备.数据的预处理.训练及解码,以及中途遇到的问题和解决方案记录在此,希望能够给予别人一些帮 ...

  9. 直播 | 浙江大学硕士生任意:非自回归语音合成

    「AI Drive」是由 PaperWeekly 和 biendata 共同发起的学术直播间,旨在帮助更多的青年学者宣传其最新科研成果.我们一直认为,单向地输出知识并不是一个最好的方式,而有效地反馈和 ...

最新文章

  1. [轉]如果把HTML當成飾品....
  2. 拆解 Linux 网络包发送过程
  3. mysql 5.6开启binlog_docker快速入门02——在docker下开启mysql5.6 binlog日志
  4. 如何用软件工程消灭软件危机?
  5. 数学建模算法:支持向量机_从零开始的算法:支持向量机
  6. Java并发编程实战——volatile
  7. ffmpeg合并音频(转)
  8. python 反传播_岗位 | 滴滴急招反欺诈数据分析实习生(可转正)!字节跳动+德勤实习生项目热招中...
  9. 快速生成HTML结构语法(HTML、CSS)
  10. Tomcat下载安装及配置
  11. FreeCAD 导出STL格式文件格式
  12. 高彩色显示图标(转)
  13. 材料成型及控制工程学计算机吗,材料成型及控制工程 硕士以后 工资多少,
  14. 【应用层】“世纪”大案之 我与网络地址的抗争
  15. 前端--阶段笔记(四)前后端交互
  16. 爬取某个微博用户的所有微博内容及照片
  17. HOG 特征的提取--基于scikit-image
  18. 第15课:生活中的命令模式——大闸蟹,走起
  19. 少年得志中年入狱,李一男能再造一个“四轮的小牛”吗?
  20. IT职场老油条亲传:教你如何在公司汇报工作时表现更亮眼

热门文章

  1. Linux 查看磁盘分区、文件系统、磁盘的使用情况相关的命令和工具介绍
  2. chromedriver与chrome版本映射表
  3. python ==》 内置函数
  4. idea中查看类的继承关系图
  5. window 内核详尽分析
  6. 【Linux】——搭建redis
  7. python 发布啦!!
  8. preg_match_all心得
  9. 悟透delphi 第十章 操作界面与操作逻辑
  10. java oom分析_OOM分析