由于是初学者,业余学习,习惯使用windows,初次了解到pyspider写代码和调试代码非常简便;作者binux是在Ubuntu下部署测试的。在作者的博客看到windows下安装的讨论。windows直接安装失败主要是lxml、pycurl安装失败,需要用第三方的库安装

pycurllxml等第三方包可以在这里下载

http://www.lfd.uci.edu/~gohlke/pythonlibs

  1. 安装lxml-xx.whl、pycurl-xx.whl,先下载lxml-xx.whl,然后切换到下载目录,用pip安装,命令pip install xx.whl(xx.whl改为 实际文件名)
  2. pip install pyspider。如果遇到提示缺少依赖包,请到这里找 http://www.lfd.uci.edu/~gohlke/pythonlibs/,然后pip install xx.whl (xx.whl改为实际文件名),然后重试。
  3. 完成后,请耐心看作者博客和文档学习。

文档 http://doc.scrapy.org/en/latest/

作者博客 http://binux.me/

pyspider 爬虫教程(一):HTML 和 CSS 选择器

pyspider 爬虫教程(二):AJAX 和 HTTP

pyspider 爬虫教程(三):使用 PhantomJS 渲染带 JS 的页面

转载于:https://www.cnblogs.com/pyspider/p/5890690.html

windows,python3.x下安装pyspider相关推荐

  1. Windows+python3.6+Anaconda安装shogun包

    Windows+python3.6+Anaconda安装shogun包 1. 打开anaconda prompt 2. 再进行shogun包的下载,同样是在prompt下进行. 3.注意点 1. 打开 ...

  2. Python3.X下安装Scrapy (转自鱼c论坛作者lumber2388779)

    相信很多同学对于爬虫需要安装Scrapy时候,不想特地去安装2.X版本 我也是这样一个懒人,我从网上找到这篇文章 在Python3.x下安装和测试Scrapy爬网站 根据上边的 教程 可以在我的电脑上 ...

  3. win10+python3.7下安装scrapy

    有很多同学反馈安装scrapy总失败,其实有个简单的方法,今天总结一下 一.爬虫框架Scarpy简介 Scrapy 是一个快速的高层次的屏幕抓取和网页爬虫框架,爬取网站,从网站页面得到结构化的数据,它 ...

  4. Python3 - Linux 下安装 LibreOffice 以及使用

    Python3 - Linux下安装 LibreOffice 以及使用 文章目录 Python3 - Linux下安装 LibreOffice 以及使用 1. 下载/安装 LibreOffice 2. ...

  5. Windows Server 2012下安装Hyper-V虚拟机

    Windows Server 2012下安装Hyper-V虚拟机 Win server 2012系统中Hyper-V 性能进一步提高,广大爱好者都尝试体验它,可是有不少朋友无法正确安装虚拟机,尽管在网 ...

  6. 求助下 Ubuntu 15.10(64 位)下安装 pyspider 下的问题 - V2EX

    https://www.v2ex.com/t/279405 求助下 Ubuntu 15.10(64 位)下安装 pyspider 下的问题 - V2EX pip 更新到最新 sudo apt inst ...

  7. 解决windows 2003 sp1下安装arcsde 9.0 for sql server 2000 sp4概要方案

    解决windows 2003 sp1下安装arcsde 9.0 for sql server 2000 sp4概要方案 安装sql server 2k sp4到windows 2003 sp1上: 安 ...

  8. Windows、Linux下安装Maven图文教程

    文章目录 一.前言 二.Maven到底是什么? 三.Windows下安装 1.前提 2.下载 3.配置Maven环境变量 4.检查Maven版本 5.安装好以后的几点注意 6.IDEA中修改Maven ...

  9. 用友t3 xp系统服务器,用友T3-财务通windows xp系统下安装sql2005

    用友T3-财务通windows xp系统下安装sql2005用友T3-财务通windows xp系统下安装sql2005 第一次安装好sql2005.T3普及版后点系统管理,会弹出环境监测,主要内容为 ...

最新文章

  1. 一图看懂所有机器学习概念
  2. java 实现违章_基于JAVA的车辆违章查询数据调用代码实例
  3. java.lang.AbstractMethodError: javax.servlet.jsp.JspFactory.getJspApplicationContext(Ljavax/servlet/
  4. Bitmasking for introspection of Objective-C object pointers i
  5. php ob_flush 和flush
  6. java点_java常见基础点
  7. Spring 系统学习:Spring的事务管理---事务回顾
  8. 从底层看云:云计算准备好了么?
  9. android 画布线条加粗,Android 对TextView添加删除线,下划线,加粗,斜体等效果
  10. 这个“达芬奇”不一般!它是美国医生的好帮手
  11. iOS开发中,实现本地推送
  12. 苹果 macOS 系统键盘快捷键列表大全整理
  13. 考研篇:如何在偶数年数学120+(刷同样的题,为什么有人的分数会更高?)
  14. 群晖硬盘已损毁 Linux 修复,群晖NAS提示空间损毁修复纪实 | Yeboyzq Blog
  15. “80后”博士,晋升正厅!
  16. Faker 新版本Faker类的用法
  17. 【Linux】Linux基础命令及英文全称
  18. linux PS命令详解
  19. 帆软报表制作过程的小知识
  20. 2020年度英国商业大奖获奖名单公布

热门文章

  1. matlab计算微分ppt,matlab-ch013(数值计算-微积分)20090923.ppt
  2. 【安卓开发 】Android初级开发(七)MD5加密
  3. 【WebRTC---入门篇】(十二)WebRTC传输协议
  4. 为什么说PHP是很糟糕的,也是很好的编程语言
  5. C this指针的理解和作用
  6. 字符斜杠是合法常量吗_【面试秘籍】你对String的intern方法了解吗
  7. mime类型是什么 node_Node.js - 文件系统获取文件类型
  8. 什么是模拟量光端机?模拟光端机品牌有哪些?
  9. 【渝粤教育】国家开放大学2018年春季 0471-21T畜牧学 参考试题
  10. 【渝粤教育】国家开放大学2018年春季 建筑结构基础 参考试题