python电影评论的情感分析流浪地球_python爬取豆瓣流浪地球影评，生成词云

代码很简单，一看就懂。

（没有模拟点击，所以都是未展开的）

地址：

https://movie.douban.com/subject/26266893/reviews?rating=&start=0这里start就是后面参数变化的地方。一页20条，所以循环的话每次start加20就好。代码：

import requests

from bs4 import BeautifulSoup

page=0

# url = 'https://movie.douban.com/subject/26266893/reviews?rating=&start='+str(page)

# s = requests.session()

# res = s.get(url).text

# soup = BeautifulSoup(res,'html.parser')

# comments = soup.find_all("div",class_="short-content")

# print (comments[2].get_text().replace("(展开)"," ").strip())

while 1:

url = 'https://movie.douban.com/subject/26266893/reviews?rating=&start=' + str(page)

s = requests.session()

res = s.get(url).text

soup = BeautifulSoup(res, 'html.parser')

comments = soup.find_all("div", class_="short-content")

with open('流浪地球.txt', 'a', encoding='gb18030', errors='ignore') as f:

for comment in comments:

str_comment = comment.get_text().replace("(展开)"," ").strip()

text = str_comment.replace("这篇影评可能有剧透"," ").strip()

f.write(text+"\n")

page+=20

生成词云代码：

# -*- coding: utf-8 -*-

from wordcloud import WordCloud

import matplotlib.pyplot as plt

import jieba

# 生成词云

def create_word_cloud(filename):

text = open("流浪地球.txt".format(filename), encoding='gb18030', errors='ignore').read()

# 结巴分词

wordlist = jieba.cut(text, cut_all=True)

wl = " ".join(wordlist)

# 设置词云

wc = WordCloud(

# 设置背景颜色

background_color="white",

# 设置最大显示的词云数

max_words=2000,

# 这种字体都在电脑字体中，一般路径

font_path='C:\Windows\Fonts\simfang.ttf',

height=1200,

width=1600,

# 设置字体最大值

max_font_size=100,

# 设置有多少种随机生成状态，即有多少种配色方案

random_state=30,

)

myword = wc.generate(wl) # 生成词云

# 展示词云图

plt.imshow(myword)

plt.axis("off")

plt.show()

wc.to_file('py_book_流浪地球.png') # 把词云保存下

if __name__ == '__main__':

create_word_cloud('word_py')

结果：

撸码千万条，简洁第一条。代码不规范，编译两行泪。

python电影评论的情感分析流浪地球_python爬取豆瓣流浪地球影评，生成词云相关推荐

详解使用Python爬取豆瓣短评并绘制词云
使用Python爬取豆瓣短评并绘制词云成果如下(比较丑,凑合看) 1.分析网页打开想要爬取的电影,比如<找到你>,其短评如下: 查看源代码发现短评存放在<span>标签里 ...
python电影评论的情感分析流浪地球_爬虫实例 | Python爬取《流浪地球》豆瓣影评与数据分析（下）...
[芝麻IP代理]三.数据分析与可视化 1.获取cookies 城市信息筛选中文字匹配pyecharts支持的城市列表 2.基于snownlp的情感分析关于snownlp的作用,主要可以进行中文分词 ...
python电影评论的情感分析流浪地球_《流浪地球》影评分析（一）：使用Python爬取豆瓣影评...
本文爬虫的步骤: 使用Selenium库的webdriver进行网页元素定位和信息获取: 使用BeautifulSoup库进行数据的提取: 使用Pandas库进行数据的存储. 后台回复python爬虫 ...
python爬取流浪地球_python爬取《流浪地球》获十几万评论点赞，超给力！
原标题:python爬取<流浪地球>获十几万评论点赞,超给力! 我自己到现在其实还没看这部电影,毕竟这电影这么火,电影院现在都很难买到好的位置.所以我打算不如先看看大家是怎么评价这部电影的 ...
python爬取流浪地球_python爬取《流浪地球》十万个短评得出以下结论
作者: 小柒爬取逼乎上很多高手,对<流浪地球>在豆瓣的评分做了细思缜密的分析,有兴趣的也去自己搜索,这里主要是爬取<流浪地球>的好.中.差短评并分词分析. 爬取数据: im ...
qq动态名片代码_利用Python动态爬取QQ说说并生成词云，分析朋友状况！
今天我们要做的事情是使用动态爬虫来爬取QQ空间的说说,并把这些内容存在txt中,然后读取出来生成云图,这样可以清晰的看出朋友的状况. 这是好友的QQ空间10年说说内容,基本有一个大致的印象了. 爬取动 ...
python提取ajax异步加载数据_python爬取豆瓣电影分类排行榜引出的异步加载（AJAX）问题...
1.背景之前的文章中已经介绍过猫眼TOP100的电影信息爬取案例,网页每页有10条电影信息,通过翻页发现URL变化规律构造循环爬取10页100条全部电影信息.但是豆瓣电影分类排行榜的网页情况就所不同 ...
python爬取流浪地球_python爬取《流浪地球》16w评论
今年春节档电影<流浪地球>火的不要不要,截止到今天 2 月 17 日,上映 13 天,目前票房已达 36 亿,可喜可贺. 我自己到现在其实还没看这部电影,毕竟这电影这么火,电影院现在都很难 ...
python爬取bilibili弹幕_Python抓取BiliBili拦河坝并生成单词云,爬取,bilibili,弹幕
木秀于林,风亦惧之:虽为萤火,亦绽光芒. Python爬取bilibili弹幕并生成词云目标网站: 哔哩哔哩: https://www.bilibili.com/ 我这里以 TES vs SN 第四 ...

python电影评论的情感分析流浪地球_python爬取豆瓣流浪地球影评，生成词云

python电影评论的情感分析流浪地球_python爬取豆瓣流浪地球影评，生成词云相关推荐

最新文章

热门文章