Request库的安装与使用

安装

pip install reqeusts

Requests库的7个主要使用方法

• requests.request() 构造一个请求,支撑以下各方法的基础方法
• requests.get() 获取HTML网页的主要方法,对应HTTP的GET方法
• requests.head() 获取HTML网页头信息的方法,对应HTTP的HEAD
• requests.post() 向HTML网页提交POST请求的方法,对应HTTP的POST
• requests.put() 向HTML网页提交PUT请求的方法,对应HTTP的PUT
• requests.patch() 向HTML网页提交局部修改请求,对应于HTTP的PATCH
• requests.delete() 向HTML页面提交删除请求,对应HTTP的DELETE

Response对象的属性

• r.status_code HTTP请求的返回状态,200表示连接成功,404表示失败
• r.text HTTP响应的正文字符串
• r.encoding 从HTTP header中猜测的响应内容编码方式
• r.apparent_encoding 从内容中分析出的响应编码方式
• r.content HTTP响应内容的二进制形式

使用get方法的流程

检查r.status_code,如果返回200,继续处理,如果返回404,则说明访问出错。

encoding 和 apparent_encoding的区别

encoding是header的charset中记录的编码,若没有改标签,则默认为iso-8859-1
apparent_encoding是分析文本内容中出现的字符确定的编码。
一般来说如果文本编码识别错误,可以将apprent_encoding赋值给r.encoding

Requests库的异常

requests.ConnectionError 网络连接错误异常,如DNS查询失败、拒绝连接
requests.HTTPError HTTP错误异常
requests.URLRquired URL确实异常
requests.TooManyRedirects 超过最大重定向次数,产生重定向异常
requests.ConnectTimeout: 远程连接超时异常
requests.Timeout: 请求URL超时,产生超时异常
r.raise_for_status() 如果返回的状态码不是200,则会产生requests HTTPError异常

request方法

requests.requst(method,url,**kwargs)

• method:请求方式,对应get/put/post等7种

  r = requests.request(‘GET’,url,**kwargs)
  r = requests.request(‘HEAD’,url,**kwargs)
  r = requests.request(‘POST’,url,**kwargs)
  r = requests.request(‘PUT’,url,**kwargs)
  r = requests.request(‘PATCH’,url,**kwargs)
  r = requests.request(‘DELETE’,url,**kwargs)
  r = requests.request(‘OPTIONS’,url,**kwargs)

url:页面的链接

**kwargs: 控制访问的参数,共13个

• params: 字典或字节序列,作为参数增加到url中
• data: 字典、字节序列或文件对象,作为Request的内容
• json: JSON格式的数据,作为Request的内容
• header: 字典,HTTP定制头

hd = {'user-agent':'Chrome/10'}
r = requests.request('POST','HTTP://python123.io/ws',headers=hd)

• cookies:字典或CookieJar,Request中的cookie
• auth ：元组,支持HTTP认证功能
• files: 字典类型,传输文件

fs = {'file':open('data.xls','rb')}
r = requests.request('POST','http://python123.io/ws',files=fs)

• timeout:给请求设置超时时间
• proxies: 字典类型,设定访问代理服务器,可以增加登录认证

pxs = {'http':'http://user:pass@10.10.10.1':1234'
'http':'http://10.10.10.1:4321'
}
r = requests.request('GET','http://www.baidu.com',proxies=pxs)

• allow_redirects: True/False,默认为True,重定向开关
• stream: True/False,默认为True，获取内容立即下载开关
• verify: True/False,默认为True,认证SSL证书开关
• cert: 本地SSL证书路径