URL中中文转码和解码

在爬取数据是时候很多搜索的词语中在浏览器上显示的是中文，但是我们复制url到本地，中文就会出现我们看不懂的文字。
如果我们需要爬虫的时候也是一样，我们需要给浏览器传过去的也是对url中的中文进行转码之后的url地址，否则在url中的关键字直接出现中文会有问题。在python3的环境中的urllib库中 quote模块 提供了这一功能

一、URL转码

#!/usr/bin/env python
#-*- coding:utf-8 -*-from urllib.parse import quotename = '诗人李白'
url_encode_name = quote(name)
print(url_encode_name)输出：
%E8%AF%97%E4%BA%BA%E6%9D%8E%E7%99%BD

二、URL解码

#!/usr/bin/env python
#-*- coding:utf-8 -*-from urllib.parse import unquotename = '%E8%AF%97%E4%BA%BA%E6%9D%8E%E7%99%BD'
url_decode_name = unquote(name)
print(url_decode_name)输出：
诗人李白

三、使用urlencode对url转码

#!/usr/bin/env python
#-*- coding:utf-8 -*-from urllib.parse import urlencodestart_url='http://tieba.baidu.com/f?'
urldata = {'kw':'诗人李白','ie':'utf-8','pn':'100',
}print(start_url+urlencode(urldata))输出：
http://tieba.baidu.com/f?kw=%E8%AF%97%E4%BA%BA%E6%9D%8E%E7%99%BD&ie=utf-8&pn=100

URL中中文转码和解码相关推荐

decode函数吗 jsp_JSP中js传递和解析URL参数以及中文转码和解码问题
1.传递参数: var pmt = 'sensor='+ encodeURI(encodeURI(sensor))+'&device='+encodeURI(encodeURI(device) ...
使用URLEncoder、URLDecoder进行URL参数的转码与解码
url后参数的转码与解码 import java.net.URLDecoder; import java.net.URLEncoder; String strTest = "?=abc?中% ...
利用华为短信包开发短信功能中中文转码和msgId获取经验
1.华为短信包smproxy(20040730).jar开发短信,上行短信中文转码中文转码非我们预期的UTF-8.GBK.GB2312,而是UTF-16BE if(8==msg_fmt){ ...
中文转码 java_URL 中中文转码
js对文字进行编码涉及3个函数:escape,encodeURI,encodeURIComponent,相应3个解码函数:unescape,decodeURI,decodeURIComponent 1 ...
js处理url中的请求参数(编码/解码)
在处理 a 链接跳转其他页面时,总会遇到需要传递一些当前页面的信息到其他页面,然后其他页面利用这些信息进行相关操作.利用 get 请求或 hash 传递是常见的方式. 首先,需要对传递的参数进行编码, ...
java对url参数编码_对URL中的参数编码和解码
有时,我们希望点击页面中的链接跳转其他页面,并且以get的方式传递一些参数.如果不对这些参数编码,可能会造成一些问题: 1. 参数中的空格可能会让你无法打开页面 2. 参数中的&符号会影响 ...
在URL中传递中文的解决方式
在URL中传递中文的解决方式 2015年05月13日 17:13:55 thinkinglink 阅读数:10321 标签: URL编码中文编码乱码解决更多个人分类: web前端在URL中传递中 ...
URLEncoder和URLDecoder实现转码和解码
在Java开发中,URL跳转经常遇到中文乱码问题.实际上,如果细心的话,我们会发现在访问网页时经常会在URL中看到一些16进制格式的字符串,如:http://xxx.com/s?w=%e7%bc 这其 ...
url中传递中文参数时的转码与解码
URL传递中文参数时的几种处理方式,总结如下: 1.将字符串转码:newString("xxxxx".getBytes("iso-8859-1")," ...
js获取url中的参数,url中传递中文的时候通过js解码的方式
如果传递的参数是: <a href="${pageContext.request.contextPath}/productdisplay/productDisplay_productD ...

URL中中文转码和解码

一、URL转码

二、URL解码

三、使用urlencode对url转码

URL中中文转码和解码相关推荐

最新文章

热门文章