Python | P站壁纸爬取

今天我们要爬取的是动漫壁纸图片，来看今天的主角：

在浏览的时候，当滑到底部时，壁纸会刷新加载，所以我们可以知道，壁纸是动态加载的。

打开开发者模式，观察HTML的动态变化。

点击NetWork,XHR,我们就可以发现，

图片地址是通过JSON数据传输过来的，所以，我们不就知道了每张壁纸对应的url了吗O(∩_∩)O

找到对应数据接口，开始代码的干活！

通过输入指定页数，遍历循环：

import requests
import jsonpath
import json
import ospage = input("请输入需要下载的页数：")
if not os.path.exists('img'):os.mkdir('img')for i in range(int(page)):num = 1url = f'https://rt.huashi6.com/front/index/load_pc_data?_ts_=1634131862878&cursor=' + str(i) + '-1634130800452'headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:92.0) Gecko/20100101 Firefox/92.0'}path = f'img\\第{i+1}页'if not os.path.exists(path):os.mkdir(path)else:print(path + '已存在')continuehtml = requests.get(url, headers=headers).content.decode("utf-8")data = json.loads(html)img = jsonpath.jsonpath(data, '$..path')print(f"开始下载第{i+1}页...")for j in img:with open(path+ '\\' + str(num) + os.path.splitext(j)[1], 'wb') as f:print(f"第{i+1}页  正在下载第{num}张...")f.write(requests.get('https://img2.huashi6.com/' + j, headers=headers).content)num += 1

三十行代码不到，就可以搞定啦
代码运行：

结果：

额，突然发现，第一页和第二页是一样的，￣□￣｜｜

不慌，我们可以选择过滤掉第一页

把代码for i in range(int(page))

改成for i in range(1，int(page)+1)

再把后面三个地方的 i+1 改成 i 即可(〃‘▽’〃)

注：如果有对Json和JsonPath模块不懂的，可以点击下面链接查看：
Python | JSON 数据解析(Json & JsonPath)

最后，附上几张超可爱的壁纸

Python | P站壁纸爬取相关推荐

Python《wallhaven壁纸爬取》
今天不小心又发现了壁纸网站,感觉壁纸很多啊,多?我就忍不住了.爬一下咯. 我们今天爬取网站是https://wallhaven.cc/. 先来分析分析: 进入首页:我们先去找标签,果然有个大标签地址 ...
Python爬虫实例 wallhaven网站高清壁纸爬取。
文章目录 Python爬虫实例 wallhaven网站高清壁纸爬取一.数据请求 1.分析网页源码 2.全网页获取二.数据处理 1.提取原图所在网页链接 2.获取高清图片地址及title 三.下载图 ...
【Python爬虫实战】爬取5K分辨率超清唯美小姐姐壁纸
目录简介使用教程编写思路演示图片全部代码简介壁纸的选择其实很大程度上能看出电脑主人的内心世界,有的人喜欢风景,有的人喜欢星空,有的人喜欢美女,有的人喜欢动物.然而,终究有一天你已经产生审 ...
【python日常学习】爬取4K桌面壁纸
[python日常学习]爬取4K桌面壁纸这个网站都是4K的桌面壁纸. 不多说,直接上代码 import re import requests import osdef get_page():page ...
Python必应壁纸爬取系列（二）：Bing唯美壁纸太多不知道选哪个？Python五行代码随机帮你挑选必应唯美屏保壁纸图片
上一篇文章我们讲述了如何爬取必应的当天壁纸,那么今天我们就来实现如何写出一个随机必应壁纸或区域的程序.有了这个程序,我们就可以按照自己的喜好添加自己喜欢的文件并且下载了五行代码实现程序效果图文章目 ...
python爬虫：Selenium爬取B站视频标题、播放量、发布时间
上次尝试了利用Ajax机制爬取B站视频播放量等数据(链接在下方),但是发现响应的JSON数据中没有发布时间的数据,这次决定用Selenium试一下. python爬虫:Ajax爬取B站视频标题.播放量 ...
Python零基础之爬取王者荣耀官方网站高清壁纸(普通版)
Python零基础之爬取王者荣耀官方网站高清壁纸目标: 分析过程: 1. 确定目标url 2. 解决url解析问题 3. 图片下载解析 4. 多页面的处理代码示例需要注意的问题: 目标: 1.下 ...
wallhaven的热度壁纸爬取（入门级爬虫）——python
wallhaven的热度壁纸爬取首先介绍一下wallhaven 过程首先介绍一下wallhaven wallhaven这个壁纸网站是一个壁纸质量十分高的网站,最主要它还是一个免费的壁纸网站,于是突 ...
quotes 整站数据爬取存mongo
安装完成scrapy后爬取部分信息已经不能满足躁动的心了,那么试试http://quotes.toscrape.com/整站数据爬取第一部分项目创建 1.进入到存储项目的文件夹,执行指令 scra ...

Python | P站壁纸爬取

Python | P站壁纸爬取相关推荐

最新文章

热门文章