《数学之美》第2章自然语言处理从规则到统计
1 机器智能
自然语言处理60多年的发展过程，基本上可以分为两个阶段。早期的20多年，从20世纪50年代到70年代，是科学家走弯路的阶段。局限：用电脑模拟人脑。直到20世纪70年代，找到了基于数学模型和统计的方法。
基于文法分析器是处理不了复杂的语句的。首先，要想通过文法规则覆盖哪怕20%的真实语句，文法规则的数量也至少是几万条。其次，即使能够写出涵盖所有自然语言现象的语法规则集合，也很难用计算机来解析。
2 从规则到统计
语义的处理遇到了更大的麻烦。自然语言中词的多义性很难用规则来描述，而是依赖上下文，甚至是世界知识。
转变：弗里德里克.贾里克尼和他领导的IBM华生实验室
自然语言规则和统计之争持续了15年，原因：首先，一种新的研究方法的成熟需要很多年。其次，用基于统计的方法代替传统的方法，需要等原有一批语言学家退休。
《数学之美》第2章自然语言处理从规则到统计相关推荐
- 数学之美 第3章 统计语言模型
数学之美 第3章 统计语言模型 回顾一下: 前面两章都是基础知识,告诉我们自然语言的起源基础,和一些发展过程遇到的问题,第二章告诉我们规则:理解自然语言(即分析语句和获取语义)这种处理方法不可能实现智 ...
- 《数学之美》选章精读
曾经花了一个月的时间阅读受推荐的书籍<数学之美>,对基于统计的自然语言处理的历史作一个大致的了解,每周精读一章,做下了一些粗略的笔记,算是有个交代吧. 第9章-图论和网络爬虫 概念 图论起 ...
- 《数学之美》——第一章 个人笔记
数学之美 最近在读<数学之美>这本书,做一下个人笔记.看的是PDF,看完后会买一本的哦!版权意识还是有的. ps:图片文字都是这本书中的内容,侵权立删.会有点自己的理解. 第一章 文 ...
- 《数学之美》——第九章 个人笔记
数学之美 最近在读<数学之美>这本书,做一下个人笔记.看的是PDF,看完后会买一本的哦!版权意识还是有的. ps:图片文字都是这本书中的内容,侵权立删.会有点自己的理解. 第九章 图 ...
- 数学之美札记：自然语言处理——从规则到统计
2019独角兽企业重金招聘Python工程师标准>>> 自然语言的处理,主要是实现人与计算机之间用自然语言进行有效通信的方法和理论,它经历了从规则到统计的阶段,所谓规则,是指根据定义 ...
- 《数学之美》第一章读后感
第一章分别讲述了早期信息的传播,文字和数字的发展,文字和语言背后的数学三个部分. 我从中了解到了信息传递,不论是早期的远古社会,还是如今快速发展的互联网时代,其规律都是异曲同工的.比如信息传播的模型都 ...
- 浅谈《数学之美》①——自然语言处理
小编看的书吴军博士的<数学之美>第二版,最近看完了前七章,做个小总结吧,毕竟本书的知识还是很值得去细细品味(虽然很多看不懂....),算是读书笔记吧,但是本书个人认为不是很适合不知道基础知 ...
- 《数学之美》-吴军 读书笔记
从吴军的<数学之美>找到了伽莫夫的<从一到无穷大>,前段时间先整理了<从一到无穷大>的笔记.现在整理下<数学之美>以巩固下. 近段时间AlfaGo 与人 ...
- 数学之美读书感悟01
文章目录 第1章 文字语言VS数字信息 第2章 自然语言处理--从规则到统计 第3章 统计语言模型 第4章 谈谈分词 第5章 隐含的马尔可夫模型 第6章 信息的度量和作用 第7章 贾里尼克和现代语言处 ...
最新文章
- 【强化学习】A3C代码注释版本
- 雅虎年底升级IPv6标准 100万用户恐受影响
- 链表_有序链表（给数组排序-应用）
- Android下常见的内存泄露 经典
- php 不申明构造函数,PHP的构造函数和同类名函数同时申明时调用的情况
- NameError: name 'words' is not defined
- svn比较本地与svn差异_如何从SVN差异中删除SVN属性
- 广工十四届校赛 count 矩阵快速幂
- ssh mysql视屏_ssh+mysql实现的Java web在线订电影票系统项目源码附带视频指导教程...
- LINUX安装7Zip
- excel二极管伏安特性曲线_【电子知识点】半导体二极管amp;三极管
- 视频教程-汇编语言程序设计-其他
- 网页(HTML)转换为PDF
- 浅谈非数学类全国大学生数学竞赛
- python把正整数翻译成英文_使用Python将Pig Latin翻译成英文3
- 三级等保 mysql8.0.24密码策略设置
- 数据可视化Matplotlib库
- hdu 5755 Gambler Bo【gauss】
- java短视频开发技术_看Java学员如何用前后端分离技术搭建短视频健身APP
- 【Unity3D小功能】Unity3D中在创建完项目后自动创建文件夹列表