Python抓取妹子图，内含福利

目标抓取全站妹子封面图片全部爬下来以图片标题命名

分析网页数据结构

妹子图首页
接下来找张图片右击点击检查

想要数据
拿到图片链接直接用浏览器可以访问，但是程序下载有反爬虫，图片直接下载不了需要加请求头部信息

先上手代码试试！

import requests
from lxml import etree# 设计模式 --》面向对象编程
class Spider(object):def __init__(self):# 反反爬虫措施，加请求头部信息self.headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.110 Safari/537.36","Referer": "https://www.mzitu.com/xinggan/"}def start_request(self):# 1. 获取整体网页的数据 requestsfor i in range(1, 204):print("==========正在抓取%s页==========" % i)response = requests.get("https://www.mzitu.com/page/"+ str(i) + "/", headers=self.headers)html = etree.HTML(response.content.decode())self.xpath_data(html)def xpath_data(self, html):# 2. 抽取想要的数据 标题 图片 xpathsrc_list = html.xpath('//ul[@id="pins"]/li/a/img/@data-original')alt_list = html.xpath('//ul[@id="pins"]/li/a/img/@alt')for src, alt in zip(src_list, alt_list):file_name = alt + ".jpg"response = requests.get(src, headers=self.headers)print("正在抓取图片：" + file_name)# 3. 存储数据 jpg with opentry:with open(file_name, "wb") as f:f.write(response.content)except:print("==========文件名有误！==========")spider = Spider()
spider.start_request()

哎！好像没问题！

运行中

运行结果

同学们，都把裤子给我穿上！好好学习！

教程已出，但是可能有很多网友不会使用

大家有任何问题可以扫描二维码关注公众号，添加我的微信

我会第一时间为大家解答

本公众号只出精品，拒收劣质

转载于:https://www.cnblogs.com/girliswater/p/11152942.html

Python抓取妹子图，内含福利相关推荐

获取http地址如何从上面抓取图片_用 Python 自动抓取妹子图
目录前言 Media Pipeline 启用Media Pipeline 使用 ImgPipeline 抓取妹子图瞎比比与送书后话前言我们在抓取数据的过程中,除了要抓取文本数据之外,当然也会有 ...
python多线程url采集器 + github_利用Python3.5多线程抓取妹子图
很久之前就写了这个爬妹子图的Python爬虫,并且开源到Github上,然而居然没有人给小心心,虽然现在失效了,妹子图网站开启了反爬虫机制,但还是可以作为大家学习的样例,注释也很清晰. 0x01 起因 ...
小白爬虫第一弹之抓取妹子图
点击上方"程序员大咖",选择"置顶公众号" 关键时刻,第一时间送达! 这是一篇完全给新手写的爬虫教程由于经常在群里装逼加上群主懒啊(你看有多久没更新文章就知道 ...
Python 爬取妹子图02
爬取laotuzi.com这个网站的图片原本想爬的是妹子图这个网站的,结果应该是IP被封了,用电脑连接WiFi访问不了这个网站,我以为是断网了,但访问其他网站有能正常访问,用手机流量访问妹子图网站, ...
教你用Python爬取妹子图APP
教你用Python爬美之图APP全站图片爬取结果程序只运行了2h,最后认为程序没有问题了就关了(我可不是去杀生去了...... 运行环境 Python 3.5+ Windows 10 VSCode ...
python 爬取妹子图
作为一个python还没入门的小白,搞懂这段代码实在是很不容易,还要去学html的知识(#黑脸) 因此我加上了注释,比较好读懂点 #coding=utf-8 import time import re ...
python多线程爬取妹子图
python多线程爬取妹子图 python使用版本: 3.7 目的: 自己选择下载目录,逐个将主题图片保存到选定目录下. 效果: 一秒钟左右下载一张图片,下了七八十组图片暂时没什么问题,不放心的话,可 ...
Python 爬虫入门(二)——爬取妹子图
Python 爬虫入门听说你写代码没动力?本文就给你动力,爬取妹子图.如果这也没动力那就没救了. GitHub 地址: https://github.com/injetlee/Python/blob ...
python爬虫-爬妹子图_Python 爬虫入门之爬取妹子图
Python 爬虫入门之爬取妹子图来源:李英杰链接: https://segmentfault.com/a/1190000015798452 听说你写代码没动力?本文就给你动力,爬取妹子图.如果 ...

Python抓取妹子图，内含福利

目标抓取全站妹子封面图片全部爬下来以图片标题命名

同学们，都把裤子给我穿上！好好学习！

Python抓取妹子图，内含福利相关推荐

最新文章

热门文章