是不是很帅气呢？

爬取的步骤也非常简单：

1、获取目标网址。
2、浏览器抓包，得到图片的具体url。
3、通过Python编写代码，用requests模块对url发起请求，将图片下载到本地文件夹中。

本文是通过面向对象的方法，代码更加稳定，想要多少张图片就能下载多少张图片。

1、分析目标网站
首先，要想爬取图片，第一步肯定是要分析目标网址，以此来获取图片的 url。打开浏览器的控制台，对该网页进行抓包，发现该网页上的图片是通过瀑布流的方式加载出来的，于是在往下滑，得到的下方箭头指向的网址，那这个是否就是我们需要的呢。
为了证实该网址里面有我们需要的数据，打开preview，发现这些这是我们需要的，数据通过json的格式给我们呈现出来。
抓包得到我们需要的网址，接下来就简单多了，通过requests模块向该网址发起请求，那不完事了吗。

2、编写代码
说干就干，首先导入我们需要的模块

import requests
import time
import random
from urllib.request import urlretrieve
import os

下面就开始敲代码，通过面向对象的方式，先将具体的框架写下来

class Wangyibo(object):def __init__(self):passdef run(self):pass
if __name__ == "__main__":Wangyibo().run()

为了不被网站发现我们是网络爬虫而不是浏览器，因此要加入请求头。

def __init__(self):self.headers = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.149 Safari/537.36'}

下面步入正轨，对网址发送请求，先暂时爬取九页

    def run(self):for i in range(0,200,24):url = 'https://www.duitang.com/napi/blog/list/by_search/?kw=%E7%8E%8B%E4%B8%80%E5%8D%9A&type=feed&include_fields=top_comments%2Cis_root%2Csource_link%2Citem%2Cbuyable%2Croot_id%2Cstatus%2Clike_count%2Clike_id%2Csender%2Calbum%2Creply_count%2Cfavorite_blog_id&_type=&start={}'.format(i)self.request(url)def request(self,url):response = requests.get(url,headers=self.headers)time.sleep(random.uniform(0,1))lists = response.json()['data']['object_list']for list in lists:pic_url = list['photo']['path']self.download_pic(pic_url) #pic_url即为图片的网址

下面对该网址发起请求，将图片下载到本地

def download_pic(self,href):#判断当前目录下是否存在该文件夹，如果没有就创建if not os.path.exists("王一博"):os.mkdir("王一博")name = os.path.split(href)[1]urlretrieve(href,'./王一博/{}'.format(name))print("=================={}下载完成===================".format(name))time.sleep(random.random())

为了防止爬取太快，可能会被封IP，因此每爬取一张图片都休息一定的时间，保证爬虫的安全、稳定性。最后运行整体的程序，过不了多久，王一博的帅照全部都被下载到本地啦。

3、结语

整个程序的代码相对来说还是非常简单的，感兴趣的小伙伴们都可以自己试一下，毕竟谁不喜欢帅气的博子哥呢。

以为这就结束了？

并没有！

在最后，通过Python，我将爬取的图片一张张拼接成心形图（放大享用），祝王一博8月5日生日快乐！

Python爬取王一博高清图片，竟然如此简单！相关推荐

python爬取王者荣耀皮肤高清图
python爬取王者荣耀皮肤高清图前期准备,导入模块 requests json os 进入王者荣耀官网,进入游戏壁纸页面,f12进入开发者模式,按照下图找到这个json文件,用于对图片的数据请求. ...
Python爬取豆瓣裤袜视界高清大图
文章目录前言第一步:整合URL 第二步:过滤URL 第三步:批量下载图片完整代码前言今天刚好有个朋友托我写一个脚本,需求是爬取他刚看的一部动漫的剧照,于是我就开始着手满足他这个需求哈哈哈~因 ...
python爬取网易云歌曲高清封面
以哪里都是你这首歌举例子吧 https://music.163.com/#/song?id=488249475 首先定位一下歌曲专辑的位置用xpath定位可写成 //meta[16]/@conten ...
Python批量爬取王者荣耀英雄高清壁纸
Python批量爬取王者荣耀英雄高清壁纸文章目录 Python批量爬取王者荣耀英雄高清壁纸前言爬虫步骤 python代码实现总结前言很多喜欢玩王者的朋友很希望把王者荣耀的英雄图片拿来做壁纸 ...
使用Python爬取CSDN历史博客文章列表，并生成目录
使用Python爬取CSDN历史博客文章列表,并生成目录这篇博客将介绍如何使用Python爬取CSDN历史博客文章列表,并生成目录. 2020年 2020年04月 cv2.threshold() 阈 ...
利用Scrapy框架爬取LOL皮肤站高清壁纸
利用Scrapy框架爬取LOL皮肤站高清壁纸 Lan 2020-03-06 21:22 81 人阅读 0 条评论成品打包:点击进入代码: 爬虫文件 # -*- coding: utf- ...
Python爬取王者荣耀全英雄全皮肤图片
Python爬取王者荣耀全英雄全皮肤图片前言思路分析编码案例源码附图总结前言以前写过类似的博客,利用Java爬取王者荣耀全英雄全皮肤图片,当时是利用 jsoup包来对目标网页进行解析 ...
Python爬取不羞涩网小姐姐图片——BeautifulSoup应用
引言今年提倡原地过年,相信很多朋友都没有回家过年,像我就被迫留在深圳过年了,无聊之余只能去看看电影爬爬山.今天给大家带来一个打发无聊时光的案例,用Python爬取不羞涩网小姐姐图片,并保存到本地,老 ...
python怎么爬取一个网页图片显示不出来_使用python爬取网页，获取不到图片地址【python 爬取图片教程】...
python 网络爬虫,怎么自动保存图片 f12找啊使用python爬取网页,获取不到图片地址大图片是在点击之后用 JS 控制加载的. 你可以看看 js/js.js 这个文件,253 行:func ...
50行Python代码爬取黑丝美眉高清图
一.技术路线 requests:网页请求 BeautifulSoup:解析html网页 re:正则表达式,提取html网页信息 os:保存文件 import reimport requests imp ...

Python爬取王一博高清图片，竟然如此简单！

用Python爬取王一博高清图片，竟然如此简单！（文末有惊喜）

是不是很帅气呢？

以为这就结束了？

并没有！

Python爬取王一博高清图片，竟然如此简单！相关推荐

最新文章

热门文章