python爬虫京东评论_python爬京东评论

我，找回，密码了！

就是这个网址助我！

# In[sy_final]:

#!/usr/bin/python

import requests

import json

#这个headers害惨了我，一定要有referer才可以运行

headers = {

'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/75.0.3770.142 Safari/537.36',

'Referer': 'https://item.jd.com/33919692427.html'

}

#这个url备用

url = 'https://sclub.jd.com/comment/productPageComments.action?callback=fetchJSON_comment98vv382&productId=33919692427&score=0&sortType=5&page=0&pageSize=10&isShadowSku=0&fold=1'

file = open("E:\\2020期末复习\\python\\军大衣前20页评论2.txt","w"); #打开一个文件

for i in range(20): #假定爬20页

url = 'https://sclub.jd.com/comment/productPageComments.action?callback=fetchJSON_comment98vv382&productId=33919692427&score=0&sortType=5&page=%d&pageSize=10&isShadowSku=0&fold=1' % i

r = requests.get(url,headers=headers)

#jd = json.loads(r.text.lstrip('fetchJSON_comment98vv382(').rstrip(');'))

#jd = json.loads(r.text)

jd = json.loads(r.text.strip('fetchJSON_comment98vv382();'))

com_list=jd['comments']

for j in com_list:

file.write(j['content']); #写入内容

print(j['content']);

file.write('\r\n'); #换行

file.close

标签：python,comment98vv382,headers,json,评论,https,jd,京东,com

来源： https://www.cnblogs.com/sakuraXiYue/p/12005991.html

python爬虫京东评论_python爬京东评论相关推荐

python爬虫微博图片_python爬取微博图片及内容
import random import urllib.request import json import re import requests import time id=(input(&quo ...
python爬虫下载小说_python 爬取小说并下载的示例
代码 import requests import time from tqdm import tqdm from bs4 import BeautifulSoup """ ...
python爬虫好友图片_Python爬取所有微信好友头像，制作微信好友图片墙
今天咱就试试怎么爬取微信列表中所有好友的头像,并做成一张图片墙,代码不长,60 行就可以搞定. 核心是利用三个库:wxpy 库,用于获取好友头像然后下载 Pillow 库,用于拼接头像 Pyinsta ...
python爬虫数据分析毕业论文_Python 爬虫实操，顺便做了个数据分析
[IT168 资讯]本文作者是一名地地道道的程序员,最大的乐趣就是爬各种网站.特别是在过去的一年里,为了娱乐和利润而爬掉了无数网站.从小众到主流电子商店再到新闻媒体和文学博客,通过使用简单的工具(如B ...
python爬虫天气数据_Python爬取真气网天气数据
使用工具:pycharm,Chrome driver 使用库:selenium 前言: 我们无时无刻不在呼吸着周围的空气, 可身边的空气质量怎样呢? 嗯~~~ 大多数人会沉思一会儿, 最后还是会说:不 ...
python爬虫企业数据_python爬取企业名录并入库
#!/usr/bin/env python2#-*-coding:utf-8-*- '''@version: python2.7 @author: 'zyjsuper' @license: Apach ...
python爬取评论_Python爬取豆瓣《复仇者联盟3》评论并生成乖萌的格鲁特
### 1. 需求说明本项目基于Python爬虫,爬取豆瓣电影上关于复仇者联盟3的所有影评,并保存至本地文件.然后对影评进行分词分析,使用词云生成树人格鲁特的形象照片. ### 2. 代码实现此部 ...
python爬虫豆瓣影评的爬取cookies实现自动登录账号
python爬虫豆瓣影评的爬取cookies实现自动登录账号频繁的登录网页会让豆瓣锁定你的账号-- 网页请求使用cookies来实现的自动登录账号,这里的cookies因为涉及到账号我屏蔽了,具 ...
python爬虫防屏蔽_python爬虫程序如何预防被限制
有一些网站不喜欢被爬虫程序访问,所以会检测连接对象,如果是爬虫程序,也就是非人点击访问,它就会不让你继续访问,所以为了要让程序可以正常运行,需要隐藏自己的爬虫程序的身份.此时,我们就可以通过设置Use ...

python爬虫京东评论_python爬京东评论

python爬虫京东评论_python爬京东评论相关推荐

最新文章

热门文章