自然语言处理课程学习总结

2024-04-10 10:40:34

概念

自然语言处理, 主要是研究如何利用计算机来理解和生成自然语言, 其发展经历了三个阶段, 分别是:
Natural language understanding
Natural language processing
Computational Linguistics
现在的自然语言处理是一个门介乎语言学、计算机科学和认知心理学之间的交叉科学

主要应用

机器翻译、语言识别与合成、自动文摘、信息检索、自动问答、语料库建立

基本方法

基于规则的方法:
按照事先设计的自然语言的语法规则, 进行语法分析得到语法树,再根据另一套规则将语法树映射到语义符号结构(如语义网络)

基于统计的方法:
一般思想是为语言处理问题建立统计模型,并且训练语料库来估计统计模型中的参数, 然后把参数应用在模型中处理语言问题

两者的区别:
基于规则是利用了语言学家的语言学知识;
基于统计的方法获取的知识来自大规模真实文本,可以覆盖几乎所有语言现象, 可以克服语言学家总结语言规则的片面性和主观性,并使他们集中精力研究那些最常见的、在统计意义上最重要的语言现象.

传统语言学的分类

分析型语言
1.词基本没有专门表示语法意义的附加成分
2.形态变化少
3.语法关系靠词序、虚词来表示
4.例子:汉语、藏语

黏着型语言
1.词内有专门表示语法意义的附加成分, 一个附加成分表达一种语法意义,一种意义也基本上有一个附加成分来表达
2.词根或词干跟附加成分的结合不紧密
3.例子:日语

屈折型语言
1.用词的形态变化来表示语法关系, 一个形态成分可以表示若干种不同的语法意义
2.词根或词干跟词的附加成分结合得很紧密,往往不容易截然分开
3.例子:英语、德语、法语

自然语言处理课程学习总结相关推荐

【CS224n】2斯坦福大学深度学习自然语言处理课程笔记——词向量、词义和神经分类器
Natural Language Processing with Deep Learning 课程笔记2 1. 词向量和word2vec 2. 优化基础知识 3. 我们能否通过计数更有效地抓住词义的本 ...
基于课程学习（Curriculum Learning）的自然语言理解
©PaperWeekly 原创 · 作者|张琨学校|中国科学技术大学博士生研究方向|自然语言处理论文标题: Curriculum Learning for Natural Language Un ...
自然语言处理课程（二）：Jieba分词的原理及实例操作
上节课,我们学习了自然语言处理课程(一):自然语言处理在网文改编市场的应用,了解了相关的基础理论.接下来,我们将要了解一些具体的.可操作的技术方法. 作为小说爱好者的你,是否有设想过通过一些计算机工具 ...
一篇综述带你全面了解课程学习(Curriculum Learning)
本文转自知乎,已获作者授权转载,请勿二次转载. 原文:https://zhuanlan.zhihu.com/p/362351969 导读:课程学习 (Curriculum learning, CL) ...
gram矩阵的性质_第十七课：正交矩阵和GramSchmidt正交化——MIT线性代数课程学习笔记...
公众号关注 "DL_NLP" 设为 "星标",重磅干货,第一时间送达! ◎ 原创 | 深度学习算法与自然语言处理 ◎ 作者 | 丁坤博一. 知识概要这一节 ...
课程学习：让神经机器翻译模型像人类一样学习
点击蓝字关注我们 AI TIME欢迎每一位AI爱好者的加入! 近些年来,神经机器翻译得到了迅速发展,在特定翻译场景下甚至可以媲美人类翻译的水平.但是,在难以收集双语数据的语言方向和专业领域的情况下, ...
刘知远老师-自然语言处理表示学习
语义表示是自然语言处理的基础,我们需要将原始文本数据中的有用信息转换为计算机能够理解的语义表示,才能实现各种自然语言处理应用.表示学习旨在从大规模数据中自动学习数据的语义特征表示,并支持机器学习进一步 ...
自然语言nlp 课程汇总
1.斯坦福cs224n 斯坦福官网主页:斯坦福CS224N官网主页 syllabus: CS224N Syllabus 国内视频地址: 斯坦福CS224N深度学习自然语言处理课程(一) 课件:CS22 ...
TPAMI 2021 | 清华大学朱文武团队：首篇课程学习综述
©作者 | 机器之心编辑部来源 | 机器之心来自清华大学的研究者王鑫.陈禹东.朱文武撰写了一篇名为<A Survey on Curriculum Learning>的课程学习综述论文, ...

最新文章

热门文章