现在学生都对爬虫感兴趣,这里发现一些好的github开源的代码,分享给各位

1、awesome-spider 该网站提供了近上百个爬虫案例代码,这是ID为facert的一个知乎工程师开源的,star6000+

https://github.com/facert/awesome-spider​github.com

不仅仅这些还有很多哦!需要的赶快拿去吧!

2、Nyspider 这是ID为Nyloner的一个今日头条的工程师弄的,star1000+,风格与上面的项目大有不同。

queensun/Nyspider​github.com

3、awesome-python-login-model

这是ID为CriseLYJ(职业不详)的用户,这个项目用于模拟各种网址登陆,也包含一些简单的爬虫,star6000+。

收集了一些各大网站登陆方式, 和一些网站的爬虫程序,有的是通过selenium登录,有的是通过抓包直接模拟登录,有的是利用scrapy,希望对小白有所帮助,本项目用于研究和分享各大网站的模拟登陆方式,和爬虫程序,会持续更新。。。

还有一个是模拟登录的:

https://github.com/CharlesPikachu/DecryptLogin​github.com

4、python-spiderJack-Cherish/python-spider

https://github.com/Jack-Cherish/python-spider​github.com

这是ID为Jack-Cherish的东北大学的一个学生整理的学习python爬虫的资料,star6000+,包含不少的实战项目,非常适合想学习的朋友。

另外还有一些;

jhao104/proxy_pool​github.com

Ehco1996/Python-crawler​github.com

希望对喜欢爬虫的各个小伙伴有帮助!

该文章是在一个回答中发现的:更多的可以去这个网址去看哦

GitHub 上有哪些优秀的 Python 爬虫项目?​www.zhihu.com

喜欢的小伙伴!点赞吧 !点赞吧! 点赞吧!有任何爬虫上的问题也可以交流,关注我私聊!

python爬虫案例_推荐上百个github上Python爬虫案例相关推荐

  1. 推荐上百个github上Python爬虫案例

    1.awesome-spider 该网站提供了近上百个爬虫案例代码,这是ID为facert的一个知乎工程师开源的,star6000+ https://github.com/facert/awesome ...

  2. python怎么发布pycharm_如何使用PyCharm将代码上传到GitHub上(图文详解)

    说明:该篇博客是博主一字一码编写的,实属不易,请尊重原创,谢谢大家! 一丶说明 测试条件:需要有GitHub账号以及在本地安装了Git工具,无论是Linux环境还是Windows都是一样的 二丶上传配 ...

  3. 如何把本地idea上的项目上传到github上以及出现invalid authentication data问题的解决措施

    注意看标题 是 上传到 github 上,所以你的 github 地址是 : github.com 而不是其他的,基于这个大方向下做以下修改: 第一步: 就需要正在github中创建一个账号:http ...

  4. 如何通过TortoiseGit(小乌龟)把本地项目上传到github上

    1.第一步: 安装git for windows(链接:https://gitforwindows.org/)一路next就好了, 如果遇到什么问题可以参考我另外一篇文章~^ - ^ 2.第二步:安装 ...

  5. 手把手教你把你的作品上传到github上

    原起 为什么要把自己做的一些东西上传到github上? 在软件行业竞争日益激烈的行情下,面试的时候,github上有高Star开源项目,绝对是个加分项.同时知识分享也是一种美德.这种双向受益的事,何乐 ...

  6. 将本地vue项目上传到github上

    将本地vue项目上传到github上 首先,打开本地创建好的vue项目文件,右键点击Git bash Here,打开Git命令工具,输入git init 回车运行,生成.git文件. 运行git ad ...

  7. python新手程序_推荐:一个适合于Python新手的入门练手项目

    随着人工智能的兴起,国内掀起了一股Python学习热潮,入门级编程语言,大多选择Python,有经验的程序员,也开始学习Python,正所谓是人生苦短,我用Python 有个Python入门练手项目, ...

  8. 适合新手的python书籍推荐_推荐一本适合初学者全面自学python的书(附赠电子书)...

    原标题:推荐一本适合初学者全面自学python的书(附赠电子书) 今天一个朋友问我:有个朋友要学习 python,她属于那种特别能啃书的,让我推荐.我学 python 都是无师自通的,没有看过什么书, ...

  9. python收费库_推荐11个实用Python库

    1.delorean 非常酷的日期/时间库 from delorean import Delorean EST = "US/Eastern" d = Delorean(timezo ...

最新文章

  1. PHP绕过disable_function限制(一)
  2. 如何在linux下安装mysql5.7?
  3. Drupal8系列(五):主题制作之搭建框架-Ubuntu 14.04 LTS
  4. CFileDialog 在使用sdk 后出现异常 Access violation
  5. c语言利用sin约等于x-,用泰勒公式求sin(x)的近似值
  6. Angular Injector.create的工作原理
  7. Python subprocess.Popen 实时输出 stdout(正确管道写法)
  8. 以flash翻页方式展现图片的实现
  9. python判断当前时间是否在两个时间之间_Python 判断时间是否在时间区间内的实例...
  10. 麒麟信安:“一云多芯”信创云桌面解决方案引领者
  11. Springboot 之 自定义配置文件及读取配置文件
  12. html如何让图片边缘模糊化,CSS3对图片照片进行边缘模糊处理
  13. vue3中json编辑器
  14. JAVA实现文本翻译功能_java实现简单的英文文本单词翻译器功能示例
  15. STM32之UART、RS232、RS485通讯
  16. 机器学习之欠采样和过采样
  17. Flutter Sliver大家庭之Sliver实战④
  18. 禅道----产品经理创建项目集和产品线
  19. 有道linux安装路径,Ubuntu 16.04下安装有道词典出错的解决方法
  20. EPLAN 设备选择

热门文章

  1. linux环境安装python-pip
  2. 云服务中IaaS、PaaS、SaaS的区别
  3. Java 时间和日期类型的 Hibernate 映射
  4. github后端开发面试题大集合(一)
  5. 【官方文档】Nginx负载均衡学习笔记(二)负载均衡基本概念介绍
  6. 机器学习实战笔记(Python实现)-03-朴素贝叶斯
  7. hdu 1085 Holding Bin-Laden Captive!
  8. thinphp 整合ueditor
  9. 翻译-高质量JavaScript代码书写基本要点(转载)
  10. HDU2673-shǎ崽(水题)