scrapy爬虫框架windows下的安装问题

windows操作系统

python版本是3.6.0

通过Anaconda命令conda install scrapy安装scrapy,安装过程中没有问题。

然后在命令行输入命令准备新建项目时，输入 scrapy startproject firstscrapy时出现了

from cryptography.hazmat.bindings._openssl import ffi, lib

ImportError: DLL load failed: 操作系统无法运行 %1。

上面的错误。通过百度查到了两种网友的解决方案：

1、用pip uninstall scrapy 和 conda remove scrapy 两次卸载掉scrapy,然后再重新安装

2、把c:/windows/system32 目录下的 ssleay32.dll和libeay32.dll两个文件删掉

之后再输入命令行准备新建项目时，输入scrapy startproject firstscrapy时出现了

from cryptography.hazmat.bindings._openssl im ImportError: DLL load failed: 找不到指定的程序问题

操作系统无法运行的问题确实解决了，但是openssl又找不到了

之后又重新去安装了openssl，

1）下载openssl程序并安装： https://slproweb.com/products/Win32OpenSSL.html 注意下载

Win64 OpenSSL v1.0.2j Light 版本就可以了，其它版本可能也会出现问题，反正官网上下载的试过下面的方法就不行；

2）将openssl安装路径下的bin文件夹内的ssleay32.dll和libeay32.dll两个文件复制到C:\system32文件夹下，覆盖原有的文件；

3）在系统的环境变量中增加openssl下bin文件夹路径，类似这样：C:\OpenSSL-Win64\bin。

但是问题依然没有解决：

输入conda list

发现openssl的版本依然是1.1.1

说明新安装的openssl并没有覆盖~~

之后打算将openssl删除，

conda remove openssl

但是删除不了~~~

输入conda install openssl重新安装也没有用

之后又继续去找方法

又有人说重新安装各种最新的版本包

conda create -n scrapyenv scrapy -c conda-forge

可以看到，他说下列的包将会被更新，但是实际情况是并没有更新

仍然停留在1.1.1

仍然报错：找不到指定程序

最后按照官网的

这个命令

输入后：

提示我openssl降级到1.0.2

可见之前的更新并没有用，还是在1.1.1

之后按y确定继续，并没有怎么抱希望的我，还是按照惯例的输入conda list

发现openssl竟然真的降级到了1.0.2

再创建一个新的项目

scrapy startproject tutorial

果不其然，成功了

饶了这么多的弯路，真的是~~~

之后又重新将scrapy删除，验证一下这方法是否真的可行

pip uninstall scrapy

conda remove scrapy

再conda install -c conda-forge scrapy安装

scrapy startproject tutoria

水到渠成~~~~~~~

转载于:https://www.cnblogs.com/little-orangeaaa/p/10259973.html

scrapy爬虫框架windows下的安装问题相关推荐

scrapy爬虫框架简绍与安装使用
Scrapy Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架. 其可以应用在数据挖掘,信息处理或存储历史数据等一系列的程序中. 其最初是为了页面抓取 (更确切来说, 网络抓取 )所 ...
python的scrapy框架的安装_Python3环境安装Scrapy爬虫框架过程及常见错误
Windows •安装lxml 最好的安装方式是通过wheel文件来安装,http://www.lfd.uci.edu/~gohlke/pythonlibs/,从该网站找到lxml的相关文件.假如是P ...
关于Scrapy爬虫框架中meta参数的使用示例演示（下）
点击上方"Python爬虫与数据挖掘",进行关注回复"书籍"即可获赠Python从入门到进阶共10本电子书今日鸡汤络纬秋啼金井阑,微霜凄凄簟色寒. ...
Python 网络爬虫笔记9 -- Scrapy爬虫框架
Python 网络爬虫笔记9 – Scrapy爬虫框架 Python 网络爬虫系列笔记是笔者在学习嵩天老师的<Python网络爬虫与信息提取>课程及笔者实践网络爬虫的笔记. 课程链接:Py ...
【数据分析】干货！一文教会你 Scrapy 爬虫框架的基本使用
出品:Python数据之道 (ID:PyDataLab) 作者:叶庭云编辑:Lemon 一.scrapy 爬虫框架介绍在编写爬虫的时候,如果我们使用 requests.aiohttp 等库,需要从 ...
linux scrapy 定时任务_2019Python学习教程（全套Python学习视频）：Scrapy爬虫框架入门...
Scrapy爬虫框架入门 Scrapy概述 Scrapy是Python开发的一个非常流行的网络爬虫框架,可以用来抓取Web站点并从页面中提取结构化的数据,被广泛的用于数据挖掘.数据监测和自动化测试等领 ...
python的scrapy爬虫模块间进行传参_小猪的Python学习之旅 —— 4.Scrapy爬虫框架初体验...
小猪的Python学习之旅 -- 4.Scrapy爬虫框架初体验 Python 引言: 经过前面两节的学习,我们学会了使用urllib去模拟请求,使用 Beautiful Soup和正则表达式来处理网 ...
python3 scrapy爬虫_Python3 Scrapy爬虫框架(Scrapy/scrapy-redis)
Python3 Scrapy爬虫框架(Scrapy/scrapy-redis) 本文由 Luzhuo 编写,转发请保留该信息. 原文: https://blog..net/Rozol/article/ ...
Scrapy爬虫框架学习_intermediate
一.Scrapy爬虫框架介绍 Scrapy是功能强大的非常快速的网络爬虫框架,是非常重要的python第三方库.scrapy不是一个函数功能库,而是一个爬虫框架. 1.1 Scrapy库的安装 pip ...

scrapy爬虫框架windows下的安装问题

scrapy爬虫框架windows下的安装问题相关推荐

最新文章

热门文章