在这严寒的冬日，为了点燃我们的热情，今天小编可是给大家带来了偷偷收藏了很久的好东西。大家要注意点哈，我第一次使用的时候，大意导致差点坏了大事哈！

1.所需库安装

2.网站分析

首先打开妹子图的官网（mzitu.com），点击菜单(最新)，经过观察(最新)发现是按时间来排序的，也就是网站全部的组图按发布时间来排序的，页面链接为mzitu.com/page/1, mzitu.com/page/2最后面的数字递增，所以将(最新)的图片全部爬取就大功告成！

3.构造请求头

在进行初次爬取碰到钉子后，我发现在请求头中要有referer才能获取图片，下面为请求头的构造。

4.下载图片

5.获取一组组图里面的所有图片页面链接

6.使用多进程下载整页的所有图片

7.下载全站所有图片

运行结果：

以上就是代码与运行过程，

哎呀！不行了，我得用冷水冷静冷静！这个程序还有不足之处有待完整！

最后：

本文来自网络，如有侵权，请联系小编删除！

转载于:https://www.cnblogs.com/djdjdj123/p/10254384.html

Python爬取全站妹子图片，差点硬盘走火了！相关推荐

Python爬取系列妹子图实战总结（程序员节福利哟）
Python爬取系列妹子图(福利哟~~~) 用到的模块:requests 和 lxml中的html 今天呢是10月24日,天气一如既往的好,也是传说中的程序员节,来爬波妹子图岂不美哉!!! 开始操作: ...
python爬取贴吧图片_Python爬取贴吧多页图片
Python爬取贴吧图片都只能爬取第一页的,加了循环也不行,现在可以了. #coding:utf-8 import urllib import urllib2 import re import os ...
Python爬取自然风景图片代码
Python爬取自然风景图片代码 \qquad 需要用到python的etree库和requests库,需要提前下载安装. from lxml import etree import requests ...
python爬取网站的图片
python爬取网站的图片本次爬取图片所需要用到的库:Requests库,BeautifulSoup库,正则表达式,os库. 思路:先爬一张图片,再爬一个网站的图片先爬一张图片: 首先要得到这张图 ...
python爬取网站源代码+图片
python爬取网站源代码+图片需求分析基础知识正则表达式 python网络请求文件读写实现基本思路具体实现结果总结需求分析大部分有志青年都想建立属于自己的个人网站,从零开始设计 ...
python 爬取5566图库图片
python 爬取5566图库图片 1 import requests 2 import random 3 import re 4 import time 5 import os 6 from bs4 ...
python爬取动态网页图片
爬取某知名网站图片(爬取动态网页) python爬取动态网页图片 python爬取动态网页图片环境: python3.pycharm 库: requests.urllib.json 思路: 1.分析 ...
python爬取明星百度图片并存入本地文件夹
python爬取明星百度图片并存入本地文件夹想要一个明星图片的时候,发现图片量过大,一张张保存太累,不太现实这时候就可以用到爬虫,批量爬取图片现在又出现一个问题,当发现一个明星爬完后,再爬取下一 ...
Python爬取百度壁纸图片
Python爬取百度壁纸图片 #! /usr/bin/python -- coding: utf-8 -- @Author : declan @Time : 2020/05/31 16:29 @Fil ...
Python爬取小姐姐图片
使用Python爬取小姐姐图片首先上网站链接唯美女生爬取图片主要分为一下几步: 1.打开一个你喜欢的小姐姐的网站 E.g xiaojiejie web 2.下载并安装python环境 pytho ...

Python爬取全站妹子图片，差点硬盘走火了！