urllib.error.URLError:urlopen error unknown url type:https 解决办法

前言：

在用Python3做爬虫实验的时候报了这个错误：urllib.error.URLError: <urlopen error unknown url type: https>

原因是代码中的url是https

url = "https..."
req = urllib.request.Request(url, data, headers)
response = urllib.request.urlopen(req)

因为python内置的urllib模块不支持https协议，而且编译安装python之前没有编译安装类似于openssl这样的SSL库，所以导致python不支持SSL。

如果你的环境已经支持ssl，那么在代码中加入import ssl就可以运行了。如果不支持，添加import ssl后会提示 ModuleNotFoundError: No module named '_ssl'。为了解决这个问题，可以按照以下步骤完成操作：

1.先安装依赖包

yum install openssl-devel bzip2-devel expat-devel gdbm-devel readline-devel sqlite-devel gcc gcc-c++ openssl-devel

2.找到这个文件/usr/local/python/Modules/Setup.dist(每个人安装的路径可能不一样)

取消注释 以下几行：
209 SSL=/usr/local/ssl
210 _ssl _ssl.c \
211 -DUSE_SSL -I$(SSL)/include -I$(SSL)/include/openssl \
212 -L$(SSL)/lib -lssl -lcrypto

3.重新编译python

./configure --prefix=/usr/local/python
make
make install

4.检验(没有错误提示就可以用了)

上述方法能够解决所遇到的问题(亲测)，如果尝试后仍然不行，有可能是python在安装的时候依赖包出现了错误。有时候缺少包，python依然能够使用，但遇到特定情况时，问题就出现一大堆。我之前也是因为这个原因才浪费了一些时间。卸载当前使用的python后，按以下方式安装。

1.安装依赖包

yum -y groupinstall "Development tools"yum -y install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-devel libpcap-devel xz-devel

2.下载压缩包

wget https://www.python.org/ftp/python/3.6.2/Python-3.6.2.tar.xz

3.解压

mkdir /usr/local/python
mv Python-3.6.2.tar.xz /usr/local/python
tar -xvJf  Python-3.6.2.tar.xz
cd Python-3.6.2

4.编译

./configure --prefix=/usr/local/python
make
make install

5.创建软连接

ln -s /usr/local/python/bin/python3 /usr/bin/python3

确保python的安装没有问题后，再使用上述方法。

urllib.error.URLError:urlopen error unknown url type:https 解决办法相关推荐

成功解决urllib.error.URLError urlopen error Errno 11004 getaddrinfo failed
成功解决urllib.error.URLError: <urlopen error [Errno 11004] getaddrinfo failed> 目录解决问题解决思路解决方法 ...
报错urllib.error.URLError:urlopen error [WinError 10060] 由于连接方在一段时间后没有正确答复或连接的主机没有反应，连接尝试失败
找了网上很多资料都没解决,试了下就没报错了, 原因是原代码导入库错了原来的是:from urllib import urlopen 应该改成:from urllib.request import ...
下载Pytorch的自带数据集时报错=urllib.error.URLError: urlopen error [SSL: CERTIFICATE_VERIFY_FAILED]
错误原因: 这是一个SSL证书验证错误,当请求一个https站点,但是证书验证错误时,就会报这样的错误. 解决办法: 只需在代码中加入如下两行将跳过证书的检查,即可成功访问网页. # 全局取消证书验证 ...
linux 挂载错误 mount: unknown filesystem type LVM2_member 解决方法
系统启动到request_module: runaway loop modprobe binfmt-464c挂起利用U盘系统,挂载硬盘出现:mount: unknown filesystem typ ...
python：urllib2.URLError urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed
现在随处可见 https 开头的网站,urllib2可以为 HTTPS 请求验证SSL证书,就像web浏览器一样,如果网站的SSL证书是经过CA认证的,则能够正常访问, 如果SSL证书验证不通过,或者 ...
urllib2.URLError: urlopen error [Errno 111] Connection refused
记录个还没解决的问题.下面爬虫代码是可以执行的,但是在我的Ubuntu的虚拟中刚开始是可以运行的,但是,后来不知道改了什么东西,用urllib2写的爬虫和用scrapy 的爬虫代码都不能运行了!!. ...
在测试tensorBroad中在运行mnist_with_summaries.py时URLError:urlopen error [WinError 10060] 由于连接方在一段时间后没有正确答
1,问题1 URLError: <urlopen error [WinError 10060] 由于连接方在一段时间后没有正确答复或连接的主机没有反应,连接尝试失败.> 这个问题,是数据下 ...
GAE使用时的一些问题：urllib2.URLError: urlopen error [Errno 10061]
问题描述: Win7系统下,在用GAE自己架设代理时,用appcfg.py update myapp/上传时出现urllib2.URLError: <urlopen error [Errno 1 ...
Centos下安装apahce的configure: error: APR not found. Please read the documentation解决办法
今天从Apache官网上http://httpd.apache.org/下载httpd web服务器,由于我的虚拟机上之前安装过,我先yum remove httpd进行卸载,然后重新安装.我采用的是 ...

urllib.error.URLError:urlopen error unknown url type:https 解决办法

前言：

urllib.error.URLError:urlopen error unknown url type:https 解决办法相关推荐

最新文章

热门文章