一、关键词提取有以下几种方式

二、TF-IDF

TF-IDF算法，主要是通过统计方法，评估词对文档的重要性。一个基本思想是，一个词在文档中出现的次数越多，显然这个词会相对更具代表性，但是如果这个词在很多的文档中都有出现，那么他出现次数再多也不具备文档区分能力。所以他的另一个基本思想是如果一个词在越少的文档中多次出现，则其对文档的区分能力也就越强，而且也具有代表性。

三、TextRank

TextRank算法则可以脱离语料库的基础，仅对单篇文档进行分析就可以提取该文档的关键词。这也是TextRank算法的重要特点。TextRank算法的基本思想源于Google的PageRank算法。

四、LDA

LDA算法，是目前关键词检测技术中最流行的方法之一，每篇文档由不同的词组成的同时，同时也存在多个潜在的主题，比如体育，娱乐，新闻，政治。而每个主题也有属于它的不同的词，比如属于“体育”主题可能会有“足球，篮球，比赛”，属于“娱乐”主题可能会有“明星，电影，唱片”等等。但是一般而言，一篇文章的主要内容最有可能是集中于少数几个主题上，如果每个主题都有所涉及，显然这些主题是无法反映文章重点的。所以，LDA的目的就是在上述条件的基础之上，根据文档中的词来找到文档最可能的几个主题以及其中的词。

五、word2vec

Word2vec算法，主要研究词与词之间的关系，他将所有文本数据集中出现的全部不重复的词都转化成了向量，这种数据格式包含了这个词与其他所有词的相似度，因此我们就可以根据词之间的关系进行分类，通过分类算法得到多个类别的中心词，之后再计算每个类中词语与类别中心的相似度并排序，最后选择最接近的中心的前几个词作为关键词。

NLP- 关键词提取 - 综述相关推荐

NLP - 关键词提取 - TextRank
NLP - 关键词提取 - TextRank 一.TextRank介绍二.PageRank介绍三.PageRank计算过程四.关键词提取任务一.TextRank介绍 TextRank算法则可以 ...
[转]NLP关键词提取方法总结及实现
最近在研究关键词的提取算法,看到一篇关于关键词提取算法的总结,比较全面了,在这里分享给大家,希望能够帮助同学们~ 原文链接:https://blog.nowcoder.net/n/ac016f8256 ...
KeyBert、TextRank等九种本文关键词提取算法（KPE）原理及代码实现
关键词提取 (Keyphrase Extraction,KPE) 任务可以自动提取文档中能够概括核心内容的短语,有利于下游信息检索和 NLP 任务.当前,由于对文档进行标注需要耗费大量资源且缺乏大规模 ...
NLP学习笔记 01 分词、词性标注和关键词提取
目录 1.1 准确分词 level1 使用jieba自定义词典 + 正则表达式准确分词 1.2 准确分词 level2 1.3 词性标注 1.4 关键词提取 1.1 准确分词 level1 中文自动分 ...
自然语言处理NLP中文分词，词性标注，关键词提取和文本摘要
NLP相关工具包的介绍 1.1 jieba "结巴"中文分词,理念是做最好的 Python 中文分词组件. 支持三种分词模式: (1)精确模式,试图将句子最精确地切开,适合文本分析 ...
NLP标签/关键词-提取工具-java开发
一.简介旨在帮助用户自动挖掘文本标签,是特征关键词提取工具,工具中集成了TextRank.TF-IDF算法.词跨度(SPAN)算法和LDA主题模型算法. 使用方法: 二.使用方法 2.1.TextR ...
NLP实战文本关键词提取
+是加法.行尾的\在下一行继续当前语句或表达式,即续行. 实战项目简介文本关键词提取,顾名思义,关键词是能够表达文档中心内容的词语,常用于计算机系统标引论文内容特征.信息检索.系统汇集以供读者检阅. ...
【NLP】文本关键词提取的两种方法-TFIDF和TextRank
背景前两天看到论文<Chinese Poetry Generation with Planning based Neural Network>中使用TextRank进行关键词提取.在阅读 ...
NLP算法-关键词提取之Jieba算法库
关键词提取什么叫关键词提取? 关键词提取方法分类有监督无监督优缺点 Jieba 关键词提取 TF/IDF算法 TF-IDF的主要思想如何训练关键词提取算法 demo PageRank算法 T ...
NLP算法-关键词提取之Gensim算法库
Gensim工具包引入 Gensim简介一些基础概念 Gensim的使用方式 1. 训练语料的预处理 2.主题向量的变换 LDA模型 demo LSA/LSI 算法 LSA/LSI算法原理 LSA ...

NLP- 关键词提取 - 综述