自然语言处理-nltk学习(二)

nltk里面重要的函数

一、similar

用来识别文章中和搜索词相似的词语，可以用在搜索引擎中的相关度识别功能中。

text1.similar("monstrous")

查询出了text1中与monstrous相关的所有词语：

二、common_contexts

用来识别2个关键词相似的词语。

text2.common_contexts(["monstrous","very"])

三、generate

用来自动生成文章。

text3.generate()

四、len

可以用于判断重复词密度

from __future__ import divisionlen(text3) / len(set(text3))

图中显示正文字数/不重复词语字数 = 16，说明有15/16是无效字符。

五、count

可以用于判断关键词密度。

text3.count('smote') / len(text3)

自然语言处理-nltk学习(二)相关推荐

自然语言处理-nltk学习(一)
NLTK库安装 pip install nltk 执行python并下载书籍: [root@centos #] python Python 2.7.11 (default, Jan 22 2016, ...
NLTK学习笔记(一)
NLTK学习笔记(一) 文章目录 NLTK学习笔记(一) 一.概述二.NLTK语料库 2.1 语料库处理API 三.分词和分句四.词频统计五.单词分布六.词性标注七.去除停用词八.NLTK ...
python自然语言处理案例-Python自然语言处理 NLTK 库用法入门教程【经典】
本文实例讲述了Python自然语言处理 NLTK 库用法.分享给大家供大家参考,具体如下: 在这篇文章中,我们将基于 Python 讨论自然语言处理(NLP).本教程将会使用 Python NLTK ...
python学到哪知道baseline_Python NLTK学习6（创建词性标注器）
Python NLTK学习6(创建词性标注器) 发表于: 2017年1月5日阅读: 6487 除特别注明外,本站所有文章均为小杰Code原创本系列博客为学习<用Python进行自然语言处理 ...
机器学习之深度学习二分类、多分类、多标签分类、多任务分类
多任务学习可以运用到许多的场景. 首先,多任务学习可以学到多个任务的共享表示,这个共享表示具有较强的抽象能力,能够适应多个不同但相关的目标,通常可以使主任务获取更好的泛化能力. 此外,由于使用了共享表 ...
【自然语言处理】【多模态】CLIP：从自然语言监督中学习可迁移视觉模型
从自然语言监督中学习可迁移视觉模型 <Learning Transferable Visual Models From Natural Language Supervision> 论文地址 ...
知识图谱论文阅读（八）【转】推荐系统遇上深度学习(二十六)--知识图谱与推荐系统结合之DKN模型原理及实现
学习的博客: 推荐系统遇上深度学习(二十六)–知识图谱与推荐系统结合之DKN模型原理及实现知识图谱特征学习的模型分类汇总知识图谱嵌入(KGE):方法和应用的综述论文: Knowledge Gra ...
Python自然语言处理 NLTK 库用法入门教程【经典】
@本文来源于公众号:csdn2299,喜欢可以关注公众号程序员学府本文实例讲述了Python自然语言处理 NLTK 库用法.分享给大家供大家参考,具体如下: 在这篇文章中,我们将基于 Python ...
python 命名实体识别_Python NLTK学习11（命名实体识别和关系抽取）
Python NLTK学习11(命名实体识别和关系抽取) 发表于: 2017年7月27日阅读: 18262 除特别注明外,本站所有文章均为小杰Code原创本系列博客为学习<用Python进 ...

自然语言处理-nltk学习(二)

一、similar

二、common_contexts

三、generate

四、len

五、count

自然语言处理-nltk学习(二)相关推荐

最新文章

热门文章