python中的post和get请求_Get请求和Post请求
使用 GET 方式抓取数据
请求对象是www.cntour.cn,请求方式是GET(所有在源码中的数据请求方式都是GET)
确定好请求对象和方式后,在 PyCharm 中输入以下代码:import requests #导入requests包
url = 'http://www.cntour.cn/'
strhtml = requests.get(url) #Get方式获取网页数据
print(strhtml.text)
加载库使用的语句是 import+库的名字。在上述过程中,加载 requests 库的语句是:import requests。
用 GET 方式获取数据需要调用 requests 库中的 get 方法,使用方法是在 requests 后输入英文点号,如下所示:requests.get
将获取到的数据存到 strhtml 变量中,代码如下:strhtml = request.get(url)
这个时候 strhtml 是一个 URL 对象,它代表整个网页,但此时只需要网页中的源码,下面的语句表示网页源码:strhtml.text
使用 POST 方式抓取数据
准备
首先输入有道翻译的网址:http://fanyi.youdao.com/,进入有道翻译页面。
按快捷键 F12,进入开发者模式,单击 Network,此时内容为空
在有道翻译中输入“我爱中国”,单击“翻译”按钮
在开发者模式中,依次单击“Network”按钮和“XHR”按钮,找到翻译数据
单击 Headers,发现请求数据的方式为 POST。
找到数据所在之处并且明确请求方式之后,接下来开始撰写爬虫。
爬取
首先,将 Headers 中的 URL 复制出来,并赋值给 url,代码如下:url = 'http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule'
POST 的请求获取数据的方式不同于 GET,POST 请求数据必须构建请求头才可以。
Form Data 中的请求参数如图 15 所示:
将其复制并构建一个新字典:From_data={'i':'我愛中國','from':'zh-CHS',
'to':'en','smartresult':'dict','client':'fanyideskweb',
'salt':'15477056211258','sign':'b3589f32c38bc9e3876a570b8a992604',
'ts':'1547705621125','bv':'b33a2f3f9d09bde064c9275bcb33d94e',
'doctype':'json','version':'2.1','keyfrom':'fanyi.web',
'action':'FY_BY_REALTIME','typoResult':'false'}
接下来使用 requests.post 方法请求表单数据,代码如下:import requests #导入requests包
response = requests.post(url,data=payload)
将字符串格式的数据转换成 JSON 格式数据,并根据数据结构,提取数据,并将翻译结果打印出来,代码如下:import json
content = json.loads(response.text)
print(content['translateResult'][0][0]['tgt'])
使用 requests.post 方法抓取有道翻译结果的完整代码如下:import requests #导入requests包
import json
def get_translate_date(word=None):
url = 'http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule'
From_data={'i':word,'from':'zh-CHS','to':'en','smartresult':'dict','client':'fanyideskweb','salt':'15477056211258','sign':'b3589f32c38bc9e3876a570b8a992604','ts':'1547705621125','bv':'b33a2f3f9d09bde064c9275bcb33d94e','doctype':'json','version':'2.1','keyfrom':'fanyi.web','action':'FY_BY_REALTIME','typoResult':'false'}
#请求表单数据
response = requests.post(url,data=From_data)
#将Json格式字符串转字典
content = json.loads(response.text)
print(content)
#打印翻译后的数据
#print(content['translateResult'][0][0]['tgt'])
if __name__=='__main__':
get_translate_date('我爱中国')
python中的post和get请求_Get请求和Post请求相关推荐
- php 网络请求 get请求和post请求
微信小程序开发交流qq群 173683895 承接微信小程序开发.扫码加微信. 代码记录 <?php header('content-type:application:json;cha ...
- 微信小程序 数据请求 GET请求和POST请求
在微信小程序中想要对其他接口进行数据请求,首先在[微信公众平台]中登录小程序, 微信公众平台的地址为:微信公众平台 (qq.com),在服务器域名中配置request合法域名,配置完后,在自己的微信小 ...
- mvc ajax get请求,springMVC 中 ajax get 请求和 post 请求的坑以及参数传递
1, ajax 请求 无论为 post ,或者 get ,url中带有?形式的参数,后台都能以String类型变量接收,变量名称和参数名称必须一致 前台ajax: $.ajax( "prod ...
- WEB中get请求和post请求的区别
参考:https://blog.csdn.net/weixin_39361808/article/details/81136865 GET请求和POST请求是HTTP协议发送请求的两种基本方法. W3 ...
- axios中出现两次请求,OPTIONS请求和GET请求
在项目中发现ajax中出现两次请求,OPTIONS请求和GET请求 查看到浏览器NetWork有两次请求,请求url一样: 查找原因是浏览器对简单跨域请求和复杂跨域请求的处理区别. XMLHttpRe ...
- JSP、Servlet中get请求和post请求的区别总结
在学习JavaWeb最初的开始阶段,大家都会遇到HttpServlet中的doGet和doPost方法.前两天看<Head First Servlets & JSP>看到其中讲关于 ...
- java中的post的作用,JSP、Servlet中get请求和post请求的区别总结
在学习JavaWeb最初的开始阶段,大家都会遇到HttpServlet中的doGet和doPost方法.前两天看<Head First Servlets & JSP>看到其中讲关于 ...
- 客户端(前端)Ajax中Get请求和Post请求的区别
我们在使用Ajax时,当我们向服务器发送数据时,我们可以采用Get方式请求服务器,也可以使用Post方式请求服务器.那么,Get请求和Post请求的区别到底在哪呢? GET请求 get是最常见的请 ...
- iOS开发网络篇—GET请求和POST请求
一.GET请求和POST请求简单说明 创建GET请求 1 // 1.设置请求路径 2 NSString *urlStr=[NSString stringWithFormat:@"http ...
最新文章
- apache 2.4 配置php,Apache2.4 PHP 配置
- 敏捷开发流程的8个步骤
- 不要瞧不起技术,项目中有了技术管理会让项目经理很省心
- IBM的医疗AI为何失败
- Torchvision目标检测模型训练过程记录
- Python 3 开发钉钉群机器人
- 前端学习(1675):前端系列实战课程之无缝滚动思路
- 安装PowerDesigner造成Office2007鼠标无法正常使用
- python 小说爬虫_Python实现的爬取小说爬虫功能示例
- MIT6.830 lab4 SimpleDB Transactions 实验报告
- 机房收费系统重构版:照葫芦画瓢
- (转)SqlServer基础之(触发器)(清晰易懂)
- 安装配置管理 之 安装和配置 JPackage Java
- dnf服务器字幕乱码win10系统,Windows10下输入法设置 教你避免DNF卡顿
- CODESYS Automation Server
- 天顶角、太阳方位角和太阳高度角辨析
- gentoo 下Local time zone must be set--see zic manual page解决办法
- e4a怎么建立mysql_E4A编程MYSQL数据库操作
- MessageBox弹框写删除功能
- this.$emit()
热门文章
- 苹果发布会确认:好莱坞大咖助阵,AirPods 2 等新品或将亮相...
- 0351862 Boys Air Choir 微风少年合唱团 巴赫 G弦上的咏叹调等 Boys On Bach
- 1080P全高清@60fps的HDMI接收器方案
- Linux如何实现文件系统开机自动挂载
- 转载 北邮硕士总结 03
- (一百零二)Android O wpa_supplicant初始化学习
- Stream流学习(一) filter limit skip(n) distinct 中间操作
- 从有强迫行为的狗出发,研究人员找到8000万强迫症患者的突变基因
- 硬盘数据丢失的原因和恢复方法
- 2019年技术盘点容器篇(一):听UCloud谈风生水起的K8S | 程序员硬核评测