自然语言理解——introduction

1.基本概念：

NLP：自然语言处理是研究如何利用计算机技术对语言文本（句子、篇章或话语等）进行处理和加工的一门学科，研究内容包括对词法、句法、语义和语用等信息的识别、分类、提取、转换和生成等各种处理方法和实现技术。

语言的基本属性：语音和文字

2.研究内容：

3.基本问题：

a)形态学(morphology)问题：研究词(word) 由有意义的基本单位－词素(morphemes)的构成问题。单词的识别/ 汉语的分词问题。词素：词根、前缀、后缀、词尾。

b)语法学(syntax)问题：研究句子结构成分之间的相互关系和组成句子序列的规则。为什么一句话可以这么说也可以那么说？如何建立快速有效的句子结构分析方法？

c)语义学(semantics)问题：研究如何从一个语句中词的意义，以及这些词在该语句中句法结构中的作用来推导出该语句的意义。

d)语用学(pragmatics)问题：研究在不同上下文中语句的应用，以及上下文对语句理解所产生的影响。从狭隘的语言学观点看，语用学处理的是语言结构中有形式体现的那些语境。相反，语用学最宽泛的定义是研究语义学未能涵盖的那些意义。

e)语音学(phonetics)问题：研究语音特性、语音描述、分类及转写方法等。

4.主要困难：

a)大量歧义

b)大量新词和未知语言：

5.研究方法：

6.研究现状：

转载于:https://www.cnblogs.com/jizhiyuan/p/3759774.html

自然语言理解——introduction相关推荐

对话系统中的中文自然语言理解 (NLU) 任务介绍
每天给你送来NLP技术干货! 来自:看个通俗理解吧 Chinese Natural Language Understanding, NLU, in Dialogue Systems 1&2 T ...
基于TensorRT的BERT实时自然语言理解（下）
基于TensorRT的BERT实时自然语言理解(下) BERT Inference with TensorRT 请参阅Python脚本bert_inference.py还有详细的Jupyter not ...
基于TensorRT的BERT实时自然语言理解（上）
基于TensorRT的BERT实时自然语言理解(上) 大规模语言模型(LSLMs)如BERT.GPT-2和XL-Net为许多自然语言理解(NLU)任务带来了最先进的精准飞跃.自2018年10月发布以来 ...
基于cnn的短文本分类_自然语言理解之（二）短文本多分类TextCNN实践
本文包含:用keras实现文本分类的2种baseline结构:TextCNN.Bi-GRU+conv+pooling:网络结构可视化:采用小样本在本地(乞丐版MacBook Pro)评估baselin ...
自然语言处理NLP、自然语言理解NLU、自然语言生成NLG、任务家族
自然语言处理NLP.自然语言理解NLU.自然语言生成NLG.任务家族自然语言生成(NLG) 看图说话(image caption) 说话生图(text to image) 文本相似性(text si ...
CIIS 2020专题论坛丨突破自然语言理解，找到人工智能出口
11月14-15日,由中国人工智能学会.嘉兴市人民政府.嘉兴市南湖区人民政府主办,嘉兴科技城管理委员会.浙江未来技术研究院(嘉兴)承办的2020第十届中国智能产业高峰论坛(CIIS 2020),将在中 ...
新闻行业中，自然语言理解技术该如何应用？
在信息爆炸时代下,要想快速获取有价值的内容非常困难,这一点在新闻行业中尤为明显,而本文提到的自然语言理解技术将会是一个不错的解决建议. 自然语言理解技术在新闻行业中的应用现如今,人类生活在一个信息大 ...
阿里打破自然语言理解世界纪录，AI常识推理水平正在逼近人类
https://www.toutiao.com/a6714097810150523400/ 近日,阿里AI在常识QA领域的权威数据集CommonsenseQA上刷新世界纪录,超过微软取得第一名,显著提 ...
OpenAI最新研究：如何通过无监督学习提升「自然语言理解能力」？
来源:amazonaws.com 摘要:长期以来,使用无监督(预)训练来提高区别性任务的性能表现一直是机器学习研究的一个重要目标.最近,OpenAI通过使用一个具有可扩展性的任务不可知系统,在一系列不 ...

自然语言理解——introduction

自然语言理解——introduction相关推荐

最新文章

热门文章