只知道CS224N?斯坦福最新推出NLU公开课CS224U
点击上方,选择星标或置顶,每天给你送干货!
阅读大概需要5分钟
跟随小博主,每天进步一丢丢
转载:机器之心
参与:思源、一鸣、张倩
NLP 标准公开课 CS224N 已经开放一段时间了,相信很多读者已经学了一遍了。最近,斯坦福自然语言理解公开课 CS224u 也开放了,所有课件、代码和视频都已经开放。嗯,是时候该学一波 CS224u 了。
课程主页:
http://web.stanford.edu/class/cs224u/
代码地址:
https://github.com/cgpotts/cs224u/
视频地址:
https://www.youtube.com/playlist?list=PLoROMvodv4rObpMCir6rNNUlFAn56Js20
B 站视频地址:
https://www.bilibili.com/video/av56067156/
这门课讲了什么?有门槛吗?
这门面向项目的课程侧重于开发系统和算法,以实现对自然语言的鲁棒机器理解。课程利用了来自语言学、自然语言处理和机器学习的理论概念。本课程还将包含有关项目开发、研究结果呈现以及与业界沟通的特殊课程。
在这门课程中,你将会学到词汇语义学、语义的分布式表征、关系抽取、语义分析、情感分析以及对话智能体等相关课程。
当然,该课程也有一定的门槛,要求参与课程的学生必须学过一些自然语言处理、数据结构与算法等相关课程,机器学习的基础知识也是必需的。此外,该课程比较特殊的地方在于,它要求学生了解逻辑学和语义学等相关知识,或者学过这些课程。
总体而言,如果读者已经看完了 CS224N 2019 年的开放课程,且想要更详细地了解自然语言理解这一问题,学习 CS224u 2019 是一个极好的选择。
课程方向与目标
整个课程的主题可以分为两大问题,即合成与学习。对于语义合成,我们需要探索如何从小的语义单位构造出大的语义,例如单词的语义表征怎么就能够造出句子的语义表征。对于学习,那我们就比较熟悉了,也就是如何构建一个能从数据中学习语义解释的模型。
最后,该课程的目标非常明确,即为成为 NLU 研究者或工程师打造坚实的理论和实战基础。整体课程内容足够支持我们完成一个非常不错的 NLU 项目,并足够强大到在 NLP 会议上展示我们的成果。
什么是自然语言理解
自然语言理解指的是使电脑或机器理解人类语言的相关技术。自然语言理解是自然语言处理(NLP)的子任务,也是最为重要的任务。只有让机器理解人类语言,才能使其进行处理,甚至完成生成任务。
发展历史
和 NLP 类似,NLU 的发展也经历了从模式匹配、专家系统、机器学习到深度学习的发展过程。其历史可以概括为以下五个阶段:
1960 年代:小规则集的模式匹配;
1970-1980 年代:基于大量的语言学知识、逻辑驱动的基础系统,应用非常少;
1990 年代中期:NLP 领域迎来统计学革命,NLU 式微;
2000 年代后期:NLU 重回舞台,混合了现代和过去几十年的技术;
2010 年代中期:深度学习完全把持 NLU,如 LSTM、seq2seq 等
应用
自然语言理解技术被广泛应用于多个需要对语言进行深层理解的领域,如机器阅读理解、智能语音问答、人机对话等。例如,在一些差旅 app 上,已经可以根据用户语音,自动为其订购机票、酒店、安排出发返程的时间表。其背后使用的就是自然语言理解技术。
通过自然语言理解,智能体能「理解」说话内容,并给出回答。
自然语言理解能区分评论情感,并对航班做出正确评分。
课程大纲
以下就是主要的课程主题了,该课程从今年 4 月份开始到 6 月份结束,囊括了自然语言理解的方方面面。每一个课程主题又会引出各种话题扩展,包括前沿论文的讲解、优秀模型的实现或重要问题的圆桌讨论等。
课程概览
1. 分布式词表征
2. 有监督情感分析
3. 自然语言推理
4. 基础语言理解
5. 语义分析
6. 利用较难的生成任务评估 NLU 模型
7. 带语境词的表征
8. 针对 NLU 的长文本表征
9. 介绍如何写论文和做展示
10. NLP 数据增强
11. 探测黑箱子模型
如下展示了所有课程大纲,包括各种子话题与学习资源。在课程主页中,该大纲链接了对应的文本或代码,其中额外教程通过 Jupyter Notebook 展示、课程主题通过课件展示、参考论文则直接链接到了 PDF。
今天留言内容为:
【day n】今天我学到了什么或者今天打算学什么。
(至少10个字,越详细越好)
督促自己,每天进步一丢丢!
推荐阅读:
一大批历史精彩文章啦
详解Transition-based Dependency parser基于转移的依存句法解析器
干货 | 找工作的经验总结(一)
经验 | 初入NLP领域的一些小建议
学术 | 如何写一篇合格的NLP论文
干货 | 那些高产的学者都是怎样工作的?
是时候研读一波导师的论文--一个简单有效的联合模型
近年来NLP在法律领域的相关研究工作
只知道CS224N?斯坦福最新推出NLU公开课CS224U相关推荐
- 斯坦福大学 iOS 开发公开课总结
斯坦福大学 iOS 开发公开课总结 前言 iPhone 开发相关的教程中最有名的,当数斯坦福大学发布的 "iPhone 开发公开课 " 了.此公开课在以前叫做<iPhone ...
- ios专题 - 斯坦福大学iOS开发公开课总结
转自:http://blog.devtang.com/blog/2012/02/05/mvc-in-ios-develop/ 前言 iphone开发相关的教程中最有名的,当数斯坦福大学发布的" ...
- 斯坦福大学iOS开发公开课总结
前言 iphone开发相关的教程中最有名的,当数斯坦福大学发布的"iphone开发公开课"了.此公开课在以前叫做<iphone开发教程>,今年由于平板电脑的流行,所以也 ...
- 斯坦福大学深度学习公开课cs231n学习笔记(10)卷积神经网络
前记:20世纪60年代,Hubel和Wiesel在研究猫脑皮层中用于局部敏感和方向选择的神经元时,发现其独特的网络结构可以有效地降低反馈神经网络的复杂性,继而提出了卷积神经网络(Convolution ...
- 斯坦福大学机器学习公开课视频及课件
下面是这段时间学习机器学习时下载的一些视频学习资料,斯坦福这套机器学习公开课是其中相当牛X的一个. 公开课的教授Andrew Ng不得不提,能够把很抽象的机器学习过程讲得很清楚,小弟看了这套公开课资料 ...
- 机器学习入门的绝佳材料:斯坦福大学机器学习课程原始讲义(含公开课视频)
斯坦福大学机器学习课程原始讲义 本资源为斯坦福大学机器学习课程原始讲义,为 Andrew Ng 所讲,共计20个PDF,基本涵盖了机器学习中一些重要的模型.算法.概念,此次一并压缩上传分享给大家,朋 ...
- 斯坦福大学机器学习课程原始讲义 + 公开课视频
斯坦福大学机器学习课程原始讲义 + 公开课视频 斯坦福大学机器学习课程原始讲义 本资源为斯坦福大学机器学习课程原始讲义,为 Andrew Ng 所讲,共计20个PDF,基本涵盖了机器学习中一些重要的 ...
- 每周四JEECG社区公开课:微信公众账号运营(jeewx使用)入门讲解
JEECG即将推出免费公开课新专题,欢迎大家报名听课,共同交流! 课程名称:微信公众账号运营(jeewx使用)入门讲解 时 间:每周四晚九点 ...
- 《可解释机器学习公开课》来了!
Datawhale开源 联合发布:同济子豪兄.Datawhale 文章目录 1.什么是机器学习的可解释性分析. 2.学可解释机器学习有什么用? 3.可解释机器学习开源学习计划,同济子豪兄和 Dataw ...
- 斯坦福大学NLP公开课CS224n上映啦!华人助教陪你追剧
一只小狐狸带你解锁NLP/DL/ML秘籍 作者:小鹿鹿鹿,QvQ,夕小瑶 CS224n: Natural Language Processing with Deep Learning Stanford ...
最新文章
- 关于js中的this
- sublime福音:微信小程序组件及API补全插件
- QuarkXPress 2020中文版
- Day8 Python基础之遗漏知识点(六)
- @hdu - 6372@ sacul
- Linux内核相关书籍
- python importsystem
- android wear 运动程序,Android Wear 之 为通知添加动作
- U-mail邮件系统对故障的紧急措施有哪些?
- 日志解析LogParse启动参数配置
- css防爆电机,防爆马达
- 火剪剪辑系统,火剪矩阵系统,火剪系统源码框架
- C# 之 观察者模式实例 -- 订牛奶
- linux操作系统——linux删除个人账户密码
- Ubuntu/Windows配置AlphaPose填坑(亲测有效)
- linux下重要目录的作用
- LeetCode刷题汇总
- flink类加载器原理与隔离(flink jar包冲突)
- node-addon-api的设计和实现
- DM数据库的启停以及数据库状态检查