python文本关联分析_如何对文本内的某个词的关联词进行提取?
简单提供几个思路。
比较常见的做法是通过训练词向量,计算词向量的相似度。正如题主所说的word2vec就是最常见的是训练词向量的方法。
word2vec是Google的一个开源工具,通过将词转化成向量的形式,可以把对文本內容的处理简化为向量空间中的向量运算,往往会结合余弦相似度来计算向量空间上的相似度,來表示文本语意上的相似度。
例如:
word2vec训练词向量的方法是通过上下文去预测某个词或者通过一个词去预测上下文,所以除了得到语义相近的词,往往还会得到搭配比较多的关联词。所以word2vec是可行的。同理,其他训练词向量的方法也是可以的,比如glove或者fasttext等。而对于计算相似度的方法就更多了,就不概述了。
还有通过句子结构分析和词与词之间的事理关系也是可以得到一些关联词,比如存在“不仅A而且B”这种句式时,A和B是很有可能是关联词,甚至是近义词。除了并列,还有顺承,转折等关系也是可以寻找关联词的。
只从词本身看,有时候研究词与词的共现关系或者根据相同上下文相邻词的频数也可以挖掘关联词。
python文本关联分析_如何对文本内的某个词的关联词进行提取?相关推荐
- 【关联分析实战篇】为什么 BI 软件都搞不定关联分析
文章目录 做不好关联分析的原因 在数据模型层面解决关联 给业务人员看的懂的数据结构 多级关联表 自关联表 互关联表 重复关联表 结语 润乾报表资料 事物都是普遍联系的,很难有一个独立的事物不和其它发生 ...
- python实现文本情感分析_用python实现简单的文本情感分析
很久没在公众号发布新内容,在这段时间内没想到有这么多python爱好者关注了我,港真的,心里很兴奋激动. 今天给大家带来我刚刚实现了的简单多文本情感分析代码,代码环境python3.5 原理 比如这么 ...
- python snownlp情感分析_白杨数说 | 不会做文本情感分析?试试这两个Python包
情感分析是自然语言处理(NLP)领域的一类任务,又称倾向性分析,意见抽取,意见挖掘,情感挖掘,主观分析等,它是对带有情感色彩的主观性文本进行分析.处理.归纳和推理的过程.具体到数据新闻领域,文本情感分 ...
- 文本分类模型_多标签文本分类、情感倾向分析、文本实体抽取模型如何定制?...
文心(ERNIE)是依托百度深度学习平台飞桨打造的语义理解技术与平台,集先进的预训练模型.全面的NLP算法集.端到端开发套件和平台化服务于一体,为企业和开发者提供一整套NLP定制与应用能力.在2020 ...
- python 写txt 换行_写入txt文本的内容为什么没换行效果?
PHP把内容写入文件,并每次自动换行 weixin_4089680029712018-07-20 Java文本追加.换行.输出到TXT u01422837514692015-12-15 Android ...
- python 灰色关联分析_基于灰色关联分析和功效组分的大黄药材质量评价
基于灰色关联分析和功效组分的大黄药材质量评价* 拱健婷 1,2 ,李 莉 1,2 **,邹慧琴 3 ,张金霞 1,2 ,徐 东 3 ,毛克臣 1 ,陈慧 荣 3 ,张明明 3 ,杨瑞琦 3 [摘 要] ...
- python灰色关联度分析_灰色关联分析法 python
广告关闭 腾讯云11.11云上盛惠 ,精选热门产品助力上云,云服务器首年88元起,买的越多返的越多,最高返5000元! 本文2290字,预计阅读需10分钟: 关联分析(association anal ...
- python 小说人物分析_用Python来看金庸先生的小说,这一生向大侠致敬
从小就是武侠迷,可以说是看着金庸先生的作品长大的,无论是书还是电视剧都非常着迷,飞雪连天射白鹿,笑书神侠倚碧鸳.金老一生共著15部武侠作品,在那个电子产品和互联网尚未普及的年代带给我们太多的欢乐和回忆 ...
- python新闻评论分析_使用 python 抓取并分析京东商品评论数据
本篇文章是python爬虫系列的第三篇,介绍如何抓取京东商城商品评论信息,并对这些评论信息进行分析和可视化.下面是要抓取的商品信息,一款女士文胸.这个商品共有红色,黑色和肤色三种颜色, 70B到90D ...
- python实现情感分析_使用python+机器学习方法进行情感分析(详细步骤)
使用python+机器学习方法进行情感分析(详细步骤) 2021-02-07 不是有词典匹配的方法了吗?怎么还搞多个机器学习方法.因为词典方法和机器学习方法各有千秋.机器学习的方法精确度更高,因为词典 ...
最新文章
- php 导航高亮,zblogphp导航高亮代码分享教程
- 使用ASP.NET Atlas编写显示真实进度的ProgressBar(进度条)控件
- JS中location对象使用
- [LGP4707] 重返现世
- 超棒的javascript移动触摸设备开发类库-QUOjs
- Mybatis参数传递及返回类型
- linux下统计文件的数目,Linux下如何统计文件数目
- element ui border表头设置背景颜色
- 初窥JQuery(二)-事件机制(1)
- validated 验证数组_SpringBoot整合表单验证注解@Validated,以及分组验证
- android 调出键盘表情_keyboard dialog 仿微博表情键盘输入框,keyboarddialog
- PLSQL Developer 64位下载
- ADS仿真 之 交流仿真和S参数仿真示例
- 大华设备播放过程中设置播放速度
- 用友t3系统打印机如何连接到服务器,用友T3打印设置方法
- android onupgrade调用,Android Sqlite中常见的对于onUpgrade的处理方法
- 手绘与码绘————用代码表现出花瓣飞舞的效果
- 苹果手机相机九宫格怎么设置_瞧不起iPhone相机?苹果手机5个逆天拍照功能,效果惊艳堪比单反...
- 数据可视化——echarts
- linux cpu睿频,如何实现CPU单核睿频?