Python将浏览器cookies共享给requests库

详情参考这里，下面提供核心代码。

#coding=utf-8
#author:walker
#date:2013-11-21from selenium import webdriver
import time
import requests
b = webdriver.Firefox()
#b = webdriver.Ie()
b.delete_all_cookies()
cookies = {}
while True:list_cookies = b.get_cookies()  #这里返回的是一个更多信息的字典列表print(list_cookies)for s in list_cookies:cookies[s['name']] = s['value']print(cookies)if cookies.has_key('BAIDUID'):b.close()breaktime.sleep(2)sn = requests.Session()
requests.utils.add_dict_to_cookiejar(sn.cookies, cookies)
#或者
requests.get(url, cookies=cookies)

Python将浏览器cookies共享给requests库相关推荐

Python爬虫之（六）requests库的用法
介绍对了解一些爬虫的基本理念,掌握爬虫爬取的流程有所帮助.入门之后,我们就需要学习一些更加高级的内容和工具来方便我们的爬取.那么这一节来简单介绍一下 requests 库的基本用法安装 pip i ...
python爬虫学习实践(一)：requests库和正则表达式之淘宝爬虫实战
使用requests库是需要安装的,requests库相比urllib 库来说更高级方便一点,同时与scrapy相比较还是不够强大,本文主要介绍利用requests库和正则表达式完成一项简单的爬虫小项 ...
【Python爬虫学习笔记3】requests库
在上一篇中学习了urllib库的基本使用,通过它我们可以完成爬虫中发送请求和处理响应的大部分功能,但在实际使用中多少会很繁琐,比如处理Cookie时需要创建handler和opener对象.正因为如此 ...
python获取浏览器Cookies作业
第一题 win10系统中本地cookie的存放位置为: IE浏览器:%APPDATA%\Microsoft\Windows\Cookies\ 目录中的xxx.txt文件 (IE浏览器分开存放的): ...
python获取浏览器cookies登录熊猫tv
在C:\Users\lenovo\AppData\Local\Google\Chrome\User Data\Default路径下查找已经在chrome上登录的cookies,然后用requests访 ...
Python 模拟浏览器访问网页，Selenium库的详细使用
(一)Selenium基础入门教程:Selenium官网教程 1.Selenium简介 Selenium是一个用于测试网站的自动化测试工具,支持各种浏览器包括Chrome.Firefox.Safar ...
Python爬虫从入门到精通─第2课 Requests库讲解
本教程所有源码下载链接:share.weiyun.com/5xmFeUO 密码:fzwh6g 本教程版权归作者GitOPEN所有,转载请征求作者同意本教程首发于GitOPEN's Home Requ ...
python requests下载图片_Python使用urllib库、requests库下载图片的方法比较
我们知道,使用Python制作一个爬虫程序,requests库是一个不错的选择,requests发送网络请求非常简单,比较使用urllib库,使用requests库可以大大减少代码量,它还可以定制请求 ...
python爬虫中requests库和正则表达式之淘宝爬虫实战
#python版本基于2.7 使用requests库是需要安装的,requests库相比urllib 库来说更高级方便一点,同时与scrapy相比较还是不够强大,本文主要介绍利用requests库和正 ...

Python将浏览器cookies共享给requests库

Python将浏览器cookies共享给requests库相关推荐

最新文章

热门文章