大家好,本篇文章主要讲的是用Python采集《雪中悍刀行》弹幕做成词云实例,感兴趣的同学赶快来看一看吧,对你有帮助的话记得收藏一下。编程学习资料点击免费领取

目录

前言

知识点介绍

环境介绍

代码实现

1. 导入模块

2. 发送网络请求

3. 获取数据 弹幕内容

4. 解析数据(筛选数据) 提取想要的一些内容 不想要的忽略掉

5. 保存数据

6. 词云图可视化

总结


前言

最近已经播完第一季的电视剧《雪中悍刀行》,从播放量就可以看出观众对于这部剧的期待,总播放量达到50亿,可让人遗憾的是,豆瓣评分只有5.7,甚至都没有破6。

很多人会把这个剧和《庆余年》做对比,因为主创班底相同

400余万字的同名小说曾被捧为网文界里的“名著”,不少粉丝早就对跨界改编有所期待,剧版的主创班底、出品方与2019年的爆款剧《庆余年》相同则放大了这份期待。然而《雪中悍刀行》播出后,书粉的怒火蔓延到了各类讨论场合。

今天就来采集这部剧的一部分视频弹幕,看看观众都说了啥,为什么播放量高,口碑却低

知识点介绍

requests模块的使用

pandas保存表格数据

pyecharts做词云图可视化

环境介绍

python 3.8

pycharm

requests >>> pip install requests

pyecharts >>> pip install pyecharts

代码实现

1. 导入模块

1

2

3

4

import re

import requests     # 发送网络请求

import pandas as pd # 保存数据

2. 发送网络请求

1

2

3

4

5

6

7

8

headers = {

    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/97.0.4692.71 Safari/537.36'

}

# 构建一个列表储存数据

data_list = []

for page in range(15, 1500, 30):

    url = f'https://mfm.video.qq.com/danmu?otype=json&target_id=7626435152%26vid%3Dp0041oidttf&session_key=0%2C174%2C1642248894&timestamp={page}'

    esponse = requests.get(url=url, headers=headers)

3. 获取数据 弹幕内容

1

json_data = response.json()

<Response [200]>: 告诉我们响应成功

4. 解析数据(筛选数据) 提取想要的一些内容 不想要的忽略掉

1

2

3

4

5

6

7

8

9

10

11

12

comments = json_data['comments']

print(comments)

for comment in comments:

    data_dict = {}

    data_dict['commentid'] = comment['commentid']

    content = comment['content']

    content = re.sub(r'[\x0e\xa0]', '', content)

    data_dict['content'] = content

    data_dict['opername'] = comment['opername']

    print(data_dict)

    data_list.append(data_dict)

5. 保存数据

1

2

3

df = pd.DataFrame(data_list)

# 乱码, 指定编码 为 utf-8 或者是 gbk 或者 utf-8-sig

df.to_csv('data.csv', encoding='utf-8-sig')

6. 词云图可视化

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

import jieba

from pyecharts.charts import WordCloud

import pandas as pd

from pyecharts import options as opts

wordlist = []

data = pd.read_csv('data.csv')['content']

data

a = [list(z) for z in zip(word, count)]

c = (

    WordCloud()

    .add('', a, word_size_range=[10, 50], shape='circle')

    .set_global_opts(title_opts=opts.TitleOpts(title="词云图"))

)

c.render_notebook()

总结

到此这篇关于用Python采集《雪中悍刀行》弹幕做成词云实例的文章就介绍到这了。

用Python采集《雪中悍刀行》弹幕做成词云实例相关推荐

  1. Python爬虫+数据分析+数据可视化(分析《雪中悍刀行》弹幕)

    Python爬虫+数据分析+数据可视化(分析<雪中悍刀行>弹幕) 哔哔一下 爬虫部分 代码部分 效果展示 数据可视化 代码展示 效果展示 视频讲解 福利环节 哔哔一下 雪中悍刀行兄弟们都看 ...

  2. 用 Python 爬取了《雪中悍刀行》数据,终于知道它为什么这么火了

    转载来源/志斌的python笔记 绪论 大家好,我是J哥. 本期是对腾讯热播剧--雪中悍刀行的一次爬虫与数据分析,耗时一个小时,总爬取条数1W条评论,很适合新人练手. 爬虫方面:由于腾讯的评论数据是封 ...

  3. Python爬取了《雪中悍刀行》数据,数据可视化分析

    Python爬取了<雪中悍刀行>数据,数据可视化分析 如何查找视频id 项目结构 制作词云图 制作最近评论数条形图与折线图 制作每小时评论条形图与折线图 制作最近评论数饼图 制作每小时评论 ...

  4. Python分析《雪中悍刀行》danmu,看看网友们观看时有什么吐槽

    1. 数据说明 这里只是为了学习,利用python爬取它的第1,2和3集danmu评论数据,具体的过程就不细述了,下面我们来细说,处理和分析<雪中悍刀行>的danmu评论. 2. 数据处理 ...

  5. 为什么这么火?用 Python 爬取并分析了《雪中悍刀行》数据,发现了其中的秘密

    大家好,今天本文我们对腾讯热播剧<雪中悍刀行>的一次爬虫与数据分析,总爬取条数1W条评论并对数据进行可视化分析,喜欢本文记得收藏,点赞.关注.需要进交流群可以文末进来. 干货推荐 Pyth ...

  6. 通过学习Python+request,爬取《雪中悍刀行》小说

    @TOC获取雪中悍刀行的小说章节 1.获取雪中悍刀行的小说网址:https://www.37zw.net/0/761/ 先获取需要爬取小说的网址,然后再在当前页面中解析,它每一章的具体后缀网址信息和章 ...

  7. Python可视化分析《雪中悍刀行》,看看它为什么这么火?

    本期是对热播网剧<雪中悍刀行>的一次爬虫与数据分析,总爬取条数1W条评论,很适合新人练手.案例中还特别加入了对评论的情绪文本分析处理,供大家参考. 爬虫方面:由于腾讯的评论数据是封装在js ...

  8. 《雪中悍刀行》你追了吗?他凭什么这么火。有啥不知情的内容吗?Python来告诉你。

    本期是对热播网剧<雪中悍刀行>的一次爬虫与数据分析,总爬取条数1W条评论,很适合新人练手.案例中还特别加入了对评论的情绪文本分析处理,供大家参考. 爬虫方面:由于腾讯的评论数据是封装在js ...

  9. R语言 基于共现提取《雪中悍刀行》人物关系并画网络图

    概述 雪中悍刀行作为现象级的网文,电视剧版即将上映,作为曾经的一员"妖孽"书粉,按捺不住想做点啥.最近在研究知识图谱,就以此为契机展开相关研究吧. 本文将基于简单共现关系,编写 R ...

最新文章

  1. 智能会议白板系统每日开发记录
  2. 如何用Python实现iPhone X的人脸解锁功能?
  3. 数据统计之日增用户统计
  4. python控制台输出颜色
  5. leetcode笔记:Gray Code(2016腾讯软件开发笔试题)
  6. 基于Android的校园二手商品交易平台,基于Android校园二手交易网站毕业设计论文.doc...
  7. IPV4 VS IPV6 谈谈省级ipv6的必要性
  8. Hive几种数据导入方式
  9. 前端学习(2197):__WEBPACK_IMPORTED_MODULE_1_vuex__.a.store is not a constructor
  10. Unity2018.3中文更新日志速览版
  11. 头部导航菜单选中状态切换
  12. C++类型转换方式总结
  13. react组件卸载调用的方法_react相关基础知识
  14. Docker入门之安装Tomcat
  15. 卖地方特色才产品,类似湖南味道那样的网上专卖店
  16. mac2600r_水星MAC2600R路由器
  17. Nginx-负载均衡部署
  18. excel两列数据对比找不同_技巧不求人168期 Excel两列数据找不同的3种方法 Word快速更改文本排序...
  19. 金彩教育:详情页文案怎么写
  20. element提交图片限制一张_ElementUI 上传文件以及限制

热门文章

  1. HTML URL转义字符
  2. 卸载vuecli2安装vuecli3,创建vuecli3项目具体步骤
  3. SteamVR2.0开篇——环境搭建及内容功能简介
  4. xynuoj昆虫繁殖
  5. 自动适应大小html框架,HTML的frame框架肿么自适应高度?
  6. 中国首家!985大学,布局元宇宙!
  7. ocx控件注册失败常见问题
  8. “秘密”的火爆注定将只是昙花一现?
  9. TREK1000概述--实时定位系统
  10. 6款神仙级别的矢量插画参考+500矢量人物插画素材