汉字转换成url编码

最近一直在搞爬虫，忽然间发现搜索关键字的链接爬到的结果将汉字转换成了以大串编码，哈哈，那么问题来了，不同网站的转化编码竟然不一样。

ok，google了一番，结果是每个网站的固定编码不一样，用的url编码也不一样。比如百度的为gbk，google的为utf8.那么怎么转化呢，下面是python的编码转换:

#-*- coding:utf8 -*-
'''
Created on Dec 3, 2014

@author : tutuhong
'''
import urllib,urllib2
import sys

def urlencode(word,codeType):
address = urllib.quote(word.decode(sys.stdin.encoding).encode(codeType))
return address

是的，就是这么简单！

转载于:https://my.oschina.net/tutuhong/blog/352368

汉字转换成url编码相关推荐

Python使汉字转换成url可识别的编码
将汉字转换成url可识别的编码,在爬虫时可根据输入的汉字,转换成url可识别的链接,如'新能源'转换后是'%E6%96%B0%E8%83%BD%E6%BA%90':'爬虫工程师'转换后为%E7%88% ...
汉字转换成NCR编码的字符
在 ISO-8859-1 编码的网页上显示汉字.一种解决办法就是我们不用 ISO-8859-1 或者 GB2312 编码,而统统都采用 UTF-8 编码.另一种就是把除了 ISO-8859-1 编码中 ...
将中文转换成URL编码
/** * 将中文转换成url编码 * 2016-4-26 10:17:39 */ public static String toUrlEncode(String s) { StringBuffer ...
Excel的html转换成unicode,EXCEL表格中把汉字转换成unicode编码
由于单片机程序的需要,要进行汉字和Unicode的编码的互换,因此要建立一张码表,格式是这样的 {"阿","963F"}, .但是常用汉字好几千个,通过转换软件 ...
C#编写Rtf文档，中文与字母区分，C#将汉字转换成GBK编码
最近两天在调试仰邦的LED双色屏.他们用的控制卡只能支持三种自定义传参方式,一.文本传值,二.Rtf文档传值,三.bmp图片传值.第一种第三种在仓库中传值无法做到.其主要原因是传的数据比较的多.对于R ...
如何将html转换成url,HTML之Data URL（转）
Data URL给了我们一种很巧妙的将图片"嵌入"到HTML中的方法.跟传统的用img标记将服务器上的图片引用到页面中的方式不一样,在Data URL协议中,图片被转换成base6 ...
java如何把汉字转换成机内码_java语言如何将汉字转化成五笔
java语言如何将汉字转化成五笔 [2021-01-31 08:32:59] 简介: php将汉字转ascii的方法:首先创建一个php示例文件:然后通过封装好的"public funct ...
C#怎么将GBK编码转换成UTF-8编码？
C#怎么将GBK编码转换成UTF-8编码? private void ChangeEncode(Encoding fromCoding,Encoding toCoding,string fileNam ...
base64转html文件,图片转换成Base64编码集成到html文件
首先为什么要这么做? 原因很简单这样可以减少与服务器的请求,当然对于一些浏览器并不支持,如IE8.通常用在手机版网站中,具体转化方法如下: 1.在线打开Base64的编码器将图片编码成Base64 ...

汉字转换成url编码

汉字转换成url编码相关推荐

最新文章

热门文章