中文词频统计及词云制作

1.中软国际华南区技术总监曾老师还会来上两次课，同学们希望曾老师讲些什么内容？（认真想一想回答）

希望老师能讲讲更多关于python的知识，并且讲讲大数据的的另一些方向

2.中文分词

a。下载一中文长篇小说，并转换成UTF-8编码。

b.使用jieba库，进行中文词频统计，输出TOP20的词及出现次数。

import jieba
ff=open('wdqk.txt','r',encoding='utf-8')
wdqk=ff.read()
for i in ',.""?!，。？！“”\n':wdqk=wdqk.replace(i,' ')
wdqk=list(jieba.cut(wdqk))
zd={}
paichu={'我','的','心','好','冷','在','有','了','浩','然',}
key=set(wdqk)-paichu
for i in key:zd[i]=wdqk.count(i)
lb=list(zd.items())
lb.sort(key=lambda x:x[1],reverse=True)
print('频率最高top10：\n')
for i in range(10):print(lb[i])
ff.close()

Building prefix dict from the default dictionary ...
Loading model from cache C:\Users\ADMINI~1\AppData\Local\Temp\jieba.cache
Loading model cost 0.723 seconds.
Prefix dict has been built succesfully.
我 575
的 413
心 375
好 286
冷 251
在 198
有 155
了 135
浩 124
然 113

转载于:https://www.cnblogs.com/hzlhzl/p/7592940.html

中文词频统计及词云制作相关推荐

+中文词频统计及词云制作9-25
1.我希望老师能讲一点python在数据挖掘,数据分析领域的应用,最好能举些实例,或者说带我们实际操作一波. 2.中文分词下载一中文长篇小说,并转换成UTF-8编码使用jieba库,进行中文词频统 ...
中文词频统计与词云生成
本次作业要求来自于:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2822 中文词频统计 1. 下载一长篇中文小说. 2. 从文件读取 ...
统计csv词频_中文词频统计与词云生成
一.中文词频统计 1. 下载一长篇中文小说. 2. 从文件读取待分析文本. 3. 安装并使用jieba进行中文分词. pip install jieba import jieba jieba.lcut ...
python词频统计完整步骤_Python中文文本分词、词频统计、词云绘制
本文主要从中文文本分词.词频统计.词云绘制方面介绍Python中文文本分词的使用.会使用到的中文文本处理包包括:wordcloud,jieba,re(正则表达式),collections. 1 准备工 ...
【实战】词频统计及词云图制作
写在开头最近对词云有些兴趣,就自己瞎琢磨研究一些这方面的知识,期间也遇到一些小问题,写下此篇文章留作备注吧. 研究对象金庸老先生的<天龙八部> 正式开始(微笑脸) 统计字频 (1)先统 ...
【文本挖掘】——词频统计、词云绘制与美化+[微微一笑很倾城]实战
词频统计.词云+实战一.词频统计: 1.基本概念及原理 2.词频统计方法二.词云 1.词云绘制工具: 2.python词云绘制--Wordcloud 三.基于分词频数绘制词云 1.利用词频绘制词云 ...
爱奇艺评论爬虫、词频统计、词云、PaddleHub内容审核
需求第一步:爱奇艺<青春有你2>评论数据爬取(参考链接:https://www.iqiyi.com/v_19ryfkiv8w.html#curid=15068699100_9f9bab7 ...
python词频统计生成词云
博客简介本篇博客介绍2个第三方库,中文分词库jieba和词云库WordCloud,我们将完成三个例子: 统计英文词汇频率统计中文文本词汇频率使用jieba库生成词云在正式开始之前,我们先安装两 ...
词云制作与词性统计——采用爬取的歌曲评论数据
文章目录前言一.评论数据清洗整理二.词云与词性统计 1.词云制作 2. 词性统计 3. 词云与词性部分的全部代码三.selenium评论获取部分总结前言 python课实验, 将爬取到QQ ...

中文词频统计及词云制作

中文词频统计及词云制作相关推荐

最新文章

热门文章