python爬虫（三）：校花图片爬取

图片和文字其实只有几个小地方是不同的，浏览器上每张图片都是通过一个url定位到的，且它是二进制文件。所以爬取过程和文字有一点点不同，，也就一点点。

这次爬取的网址是http://www.xiaohuar.com/2014.html。打开是不是发现里面有许多校花图片呢，没错，这次就是从爬取这些校花的图片并保存到自己磁盘中。

一、找规律

首先，你需要找到一张图片的url，怎么找呢？打开这个网站，按F12进入控制台界面。

先点击1处，再点击2处，就会发现3处有个url，这个就是这张图片的url地址了，你搜索这个url，即可看到图片。

在你多试探几次后，你会发现这些图片的url是由规律的，它们只有一部分地方不同。所以你现在需要从你知道的网址，即http://www.xiaohuar.com/2014.html中找到每张图片的url，将图片爬取下来即可。

import requests
import re# 起始url
first_url = "http://www.xiaohuar.com/2014.html"
# http响应
reponse = requests.get(first_url)
# 设置正确的编码
reponse.encoding = 'GBK'
# 获取文本信息
html = reponse.text
print(html)
# 找到所有的img的url
# src="/d/file/b14d5053e8f62f76ab4effe2d14aa419.jpg"
img_urls = re.findall(r'src="(/d/file/\w+\.jpg)"', html)
# \w匹配数字和字母后面接+匹配多个,,,全是数字就用\d# 拼接出完整的url加上域名
img_num = len(img_urls)
for i in range(img_num):img_urls[i] = "http://www.xiaohuar.com%s" % img_urls[i]# 下载
for img_url in img_urls:# 获取文件名，字符串分割，列表的索引最后一个/后的字符串img_file_name = img_url.split('/')[-1]img_data = requests.get(img_url).content  # 相当于reponse.contentwith open(img_file_name, "wb") as f:f.write(img_data)print(img_url)

运行之后，是不是发现文件夹中出现了许多图片文件呢，那么恭喜你，成功了！

python爬虫（三）：校花图片爬取相关推荐

python爬虫——百度贴吧图片爬取小项目
项目目的: 爬取贴吧中所有帖子里面的图片将爬取到的图片存储到名称为贴吧名称的文件夹中项目环境 python版本:python3.6 用到的库:requests.etree.unquote 浏览器: ...
Python爬虫利用18行代码爬取虎牙上百张小姐姐图片
Python爬虫利用18行代码爬取虎牙上百张小姐姐图片下面开始上代码需要用到的库 import request #页面请求 import time #用于时间延迟 import re #正则表达式 ...
python爬虫实战（一）--爬取知乎话题图片
原文链接python爬虫实战(一)–爬取知乎话题图片前言在学习了python基础之后,该尝试用python做一些有趣的事情了–爬虫. 知识准备: 1.python基础知识 2.urllib库使用 ...
Python爬虫实战系列(一)-request爬取网站资源
Python爬虫实战系列(一)-request爬取网站资源 python爬虫实战系列第一期文章目录 Python爬虫实战系列(一)-request爬取网站资源前言一.request库是什么? 二 ...
python项目开发案例集锦豆瓣-Python第三个项目：爬取豆瓣《哪吒之魔童降世》短评...
前面爬完网站信息图片之后,今天的又有了个小目标,最近的电影哪吒很火,去豆瓣上看了一下影评,决定了今天主要是实现Python第三个项目:爬取豆瓣<哪吒之魔童降世> 短评,然后下载在exce ...
python爬虫之股票数据定向爬取
python爬虫之股票数据定向爬取功能描述目标:获取上交所和深交所所有股票的名称和交易的信息输出:保存到文件中技术路线:requests-bs4-re 前期分析选取原则:股票的信息静态存在H ...
python爬虫初学实战——免登录爬取easyicon里的vip图标（2）
python爬虫初学实战-免登录爬取easyicon里的vip图标(2) 实验日期:2020-08-09 tips:没看过前面(1)的可以康康,指路 -> 爬取easyicon里的png图标成 ...
python爬虫 - 起点女生榜单爬取 - 1
python爬虫 - 起点女生榜单爬取最近一直在追庆余年,顺带瞄了一眼小说,真真是精彩(虽然因为范闲多妻的设定接受不了就放弃了). 说来说去,还是钟爱女频的修仙小说,所以就想爬一下起点女生网 ...
从入门到入土：Python爬虫学习|实例练手|爬取猫眼榜单|Xpath定位标签爬取|代码
此博客仅用于记录个人学习进度,学识浅薄,若有错误观点欢迎评论区指出.欢迎各位前来交流.(部分材料来源网络,若有侵权,立即删除) 本人博客所有文章纯属学习之用,不涉及商业利益.不合适引用,自当删除! 若 ...
从入门到入土：Python爬虫学习|实例练手|爬取百度翻译|Selenium出击|绕过反爬机制|
此博客仅用于记录个人学习进度,学识浅薄,若有错误观点欢迎评论区指出.欢迎各位前来交流.(部分材料来源网络,若有侵权,立即删除) 本人博客所有文章纯属学习之用,不涉及商业利益.不合适引用,自当删除! 若 ...

python爬虫（三）：校花图片爬取

python爬虫（三）：校花图片爬取相关推荐

最新文章

热门文章