python伪装浏览器什么意思_python爬虫伪装浏览器出现问题求助

运行报错：: 'str' object has no attribute 'items'

#-*-coding:utf-8 -*-

import urllib.request

def saveFile(data):

path = "E:\\123\\douban.out"

f = open(path,"wb")

f.write(data)

f.close()

url = "http://www.douban.com/"

headers = ("User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko)\

Chrome/58.0.3029.110 Safari/537.36 Edge/16.16299")

req = urllib.request.Request(url=url,headers=headers)

res = urllib.request.urlopen(req)

data = res.read()

saveFile(data)

data - data.decode("utf-8")

print(data)

print(type(res))

print(res.geturl())

print(res.info())

print(res.getcode())Traceback (most recent call last):

File "E:\抓取首图.py", line 13, in

req = urllib.request.Request(url=url,headers=headers)

File "C:\Users\w1553\AppData\Local\Programs\Python\Python36-32\lib\urllib\request.py", line 335, in __init__

for key, value in headers.items():

AttributeError: 'str' object has no attribute 'items'

python伪装浏览器什么意思_python爬虫伪装浏览器出现问题求助相关推荐

python爬虫模拟浏览器的两种方法_python爬虫模拟浏览器访问-User-Agent过程解析
这篇文章主要介绍了python爬虫模拟浏览器访问-User-Agent过程解析,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下模拟浏览器访问-Use ...
python requests库详解_python爬虫之路（一）-----requests库详解
requests库 requests库是python实现的最简单易用的http库. requests库的功能详解. 我们可以自然而然地想到这些方法其实就是http协议对资源的操作. 调用request ...
python爬取cctalk视频_python爬虫urllib使用和进阶 | Python爬虫实战二
python爬虫urllib使用和进阶上节课已经介绍了爬虫的基本概念和基础内容,接下来就要开始内容的爬取了. 其实爬虫就是浏览器,只不过它是一个特殊的浏览器.爬取网页就是通过HTTP协议访问相应的网 ...
python 无头模式绕过检测_python爬虫反反爬虫有绝技，轻松绕开百度人机验证！...
你可能已经了解到了无头浏览器的作用以及使用的方法,那么本篇文章就让我们一起用无头浏览器做点事情. 是的你没有看错,我们要"搞"的对象就是百度指数这个网站,不知道你平时是否会应用到这 ...
python爬取收费素材_Python爬虫练习：爬取素材网站数据
前言本文的文字及图片来源于网络,仅供学习.交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理. 在工作中的电子文案.ppt,生活中的新闻.广告,都离不开大量的素材,而素材 ...
python爬取头条图集_Python爬虫基础练习(六) 今日头条街头篮球图片爬取
今天我们要爬取的仍然是图片,不过与上一篇有所不一样的是,今天爬取的是今日头条上的图集,接着往下看吧~ 运行平台:Windows Python版本:Python3.6 IDE: Sublime Text ...
python通过ip池爬_python 爬虫代理ip池（适合初学者）
初次学习python爬虫的朋友在频繁访问被爬取页面网站时都会被拦截,也就是限制ip.这里教教大家建立代理ip池. #!/usr/bin/env python3# -*- coding: utf-8 - ...
python 突破b站验证码_Python爬虫模拟登陆哔哩哔哩(bilibili)并突破点选验证码功能...
写在前面今天带给大家一个突破点选验证码的案例,利用爬虫模拟登陆哔哩哔哩,并且把一些采坑的地方给大家强调一下! 一.需求分析模拟登陆哔哩哔哩网站链接: https://passport.bilib ...
python 爬虫伪装浏览器_python爬虫之浏览器伪装设置
之前使用爬虫去爬取网页的时候,user-agent对应的是python自己的名字,这将会告诉网站管理员:我就是爬虫哦,我来爬取信息了,说不准就不能爬取信息了,因此,在实际操作中可以采用修改user-a ...

python伪装浏览器什么意思_python爬虫伪装浏览器出现问题求助

python伪装浏览器什么意思_python爬虫伪装浏览器出现问题求助相关推荐

最新文章

热门文章