Python网络爬虫简单教程—

Python网络爬虫简单教程——第一部

感谢，如需转载请注明文章出处：https://blog.csdn.net/weixin_44609873/article/details/103384984

Python 网络爬虫简单教程——第一部

Python 网络爬虫简单教程——第二部

Python 网络爬虫简单教程——第三部

在开始教程之前，我们先来聊一聊网络爬虫

一、那么啥子是网络爬虫呢？

网络爬虫 (又被称为网页蜘蛛，网络机器人，在 FOAF 社区中间，更经常的称为网页追逐者)，是一种按照一定的规则，自动抓取万维网信息的程序或者脚本。还有一些不常用却生动风趣的名字蚂蚁、蠕虫等。

网络爬虫程序 访问互联网，并沿着任何网页中的所有 URL 爬到其它网页，重复此过程，并把爬过的所有网页收集回来。

简单来说网络爬虫的作用就六个字：爬取网页内容。

人们得知一件新事情之后，总是富有好奇的，这也是创作的来源 ————爬虫能干什么的呢？

这个问题很有趣，因为它与我们日常生活是息息相关的。
这里举两个例子：

Google
大家知道为什么谷歌搜索速度比百度快吗？这是因为谷歌搜索引擎效率更高，那么更深层的来说其实就是谷歌这厮爬虫放的多，它每天放出无数爬虫到各个网站，把他们的信息抓回来，然后化好淡妆排着小队等你来检索。
抢票软件
这个大家一定都用过，不知道你们是不是也这样，反正每逢佳节我的手机总是异常繁忙，但不是忙于亲朋好友互捧祝福，而是忙于 “在吗？，借手抢一票哈/高兴/高兴。” 其实啊，抢票也是爬虫作的祟，它就相当于撒出去无数个蜘蛛分身，每一个分身都帮助你不断刷新，12306 网站的火车一旦有余票。马上帮您拍下来，然后对你喊：土豪快来付款！

二、网络爬虫与我们

说了这么多你肯定会问那我们能用爬虫做什么呢？

1、我想看一些电子书，可是不给免费下载，这时候我爬下来不舒服吗，它不香吗（当然这样不好，大家要支持正版。）

2、发工资了，你想陪女票（友情提示：女票可省略emmm ）看一场浪浪漫漫的电影，但影片多如点点繁星，到底看什么呢？不想看烂片，又不知怎么选，那就去豆瓣逛逛，豆瓣好东西啊，有简介、有评分、还有影评，可以做参考。
比如我想要获取评分在８.5分以上的电影名称、简介以及该电影的部分热评。从而缩小范围做出选择。
　　这个时候，爬虫就显得短小而精悍，小小爬虫却也能从浩如烟海的电影资源里找出你想要的东西，从而免去了你的眼花缭乱。（爬虫：“我没说我这么牛啊”）

通过上面的内容相信大家对网络爬虫都有了一定的了解，那么下面将开始进行互相探讨学习的环节

三、爬虫准备工作

进行开发之前软件工具和软件环境对软件产品有很大影响，在数据爬虫领域，python 无疑是最好的选择。容易上手且库源丰富。

编程语言 python3
编译软件 PyCharm

python 可应用于多平台包括 window 、Linux 和 Mac OS X ，环境搭建去百度搜教程，这里不多赘述了，推荐去菜鸟看看python 环境搭建
pycharm官网没有可以去下载一个支持多种系统，很好用，猿们必备的。

今天先开个头，下部将对爬虫进行更加深入的探讨。
我也只是个菜鸟，咱一起加油！！！`

谢谢观看！