爬取的网页是:千图网背景图片模块
查看背景图片的网页代码(右键–>【查看元素】/f12 / fn + f12)
url链接【www.58pic.com/newpic/33945157.html】
进入了图片的高清大图页面
我们可以通过爬取最开始打开的页面的源代码进入对应的背景图片的详情页面.

#   使用的utf-8编码
# -*- coding:utf-8 -*-# 导入模块
import requests
from lxml import etree# 设置变量# 主页面的url
main_url = 'https://www.58pic.com/piccate/10-0-0-p1.html'# headers中的User-Agent参数就是告诉服务器我使用的浏览器版本信息,我使用的这个就是告诉服务器,我使用的是火狐浏览器,是一台win10,64位的电脑。
#  headers中的Referer参数用于表示我是从哪个网页跳转过去的。headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64; rv:66.0) Gecko/20100101 Firefox/66.0','Referer':'https://www.58pic.com/piccate/10-0-0-p1.html',}# 网页下载函数def get_html(url):'''下载网页代码'''html = requests.get(url,headers).textreturn html# 爬取图片详细页urldef get_page_url(data):

【python--爬虫】千图网高清背景图片相关推荐

  1. 【python--爬虫】千图网高清背景图片爬虫

    最近有读者反映想要下载千图网的高清背景图片,但是需要会员才能下载,而且需要的量非常大,问博主有没有办法能免费下载这些图片. 付费,不存在的o( ̄▽ ̄)o!,博主今天讲解如何通过python爬取千图网的 ...

  2. python爬千图网高清图片

    代码如下: import urllib.request import re for i in range(1,2):url = "http://www.58pic.com/piccate/7 ...

  3. Python爬虫实战批量下载高清美女图片,男生最爱的案例吧!

    彼岸图网站里有大量的高清图片素材和壁纸,并且可以免费下载,读者也可以根据自己需要爬取其他类型图片,方法是类似的,本文通过python爬虫批量下载网站里的高清美女图片,熟悉python写爬虫的基本方法: ...

  4. Python爬虫实例 wallhaven网站高清壁纸爬取。

    文章目录 Python爬虫实例 wallhaven网站高清壁纸爬取 一.数据请求 1.分析网页源码 2.全网页获取 二.数据处理 1.提取原图所在网页链接 2.获取高清图片地址及title 三.下载图 ...

  5. Python爬虫实战 — — Wallhaven壁纸高清原图下载

    Python爬虫实战 - - Wallhaven壁纸高清原图下载 一.网站分析 二.可行性分析 三.代码分析 1.所需第三方库与请求头 2.获取当前页的所有壁纸图像链接 3.根据图像链接存储本地 4. ...

  6. Xpath-彼岸图网高清图片获取

    Xpath-彼岸图网高清图片获取 目标网站:彼岸图网 首先导入所需包 import os import timeimport requests from lxml import etree 做好伪装( ...

  7. Python爬虫 | 斗图网表情包抓取

    Python爬虫 | 斗图网表情包抓取 1.数据来源分析 2.制作div_list 3.发起请求 4.保存图片 5.批量获取 6.完整代码 声明 1.数据来源分析   打开斗图吧的主页,发现网址非常有 ...

  8. Python 爬虫 斗图网啦 (bs4)

    Python 爬虫 斗图网啦 (bs4) 可以多种形式,我用的BeautifulSoup,因为觉得简单 xpath有点复杂 import requests from bs4 import Beauti ...

  9. 按头安利!好看又实用的中国风 古风高清背景图片素材看这里!

    想必大家都在为找中国风 古风高清背景图片而头疼吧,今天小编都为大家整理好咯,超多的中国风 古风高清背景图片资源,大家喜欢的可以先行收藏哈,之后会持续更新哒~ 因为小编的工作原因,经常会使用到中国风 古 ...

最新文章

  1. 12月国内网站流量统计5强:360安全中心后来居上
  2. Asp.Net 之 下载文件的常用方式
  3. 初学__Python——Python 最简单的函数—用 lambda 声明函数
  4. ubuntu QT 编译报错 -1: error: cannot find -lGL问题的解决方法
  5. 模型部署到移动端_TensorFlow Lite 自然语言处理模型的最新功能,助力设备端 NLP 部署...
  6. 凯撒密码c语言小写字母,凯撒密码c(c语言编程凯撒密码)
  7. Java里面static, final, this, super, 代码块, 单例模式
  8. 一个数独问题的算法(已更新,提供一个简单算法,欢迎拍砖)
  9. 什么是数据、元数据、主数据?这可能是大多数人没看过的解释
  10. (十六)K-Means聚类
  11. consul配置mysql集群_consul1.6实现Mysql-Gtid主从读写分离和高可用-03
  12. Android开发之获取手机通讯录
  13. 解决Office 2010 每次打开word时出现配置进度框
  14. 无线打印服务器三星3200,求助三星3200打印机“USB打印机不可用”
  15. 远景html制造机模板,台式机ALC892制作仿冒appleHDA的教程,前置MIC自动检测。
  16. 面试题,微信红包为啥不能撤回?
  17. 解决K650C ubuntu下不能重启关机问题
  18. 电脑桌面文件删除了怎么找回?
  19. mac解锁+卸载软件步骤
  20. 关于网络安全行业你知道多少?

热门文章

  1. Server2012 下 部署ADFS IFD
  2. 小游戏“程序猿大战产品*那啥”
  3. 学而思总裁曹允东谈创业:融资意识很重要
  4. 后向重计算在OneFlow中的实现:以时间换空间,大幅降低显存占用
  5. 答疑解惑 | Linux GNU C 与 ANSI C 的区别
  6. mysql 5.7 版本输入法表情符问题-----java解决办法
  7. R语言系统教程(三):多维数组和矩阵
  8. 聚类分析(K-means、系统聚类和二阶聚类)的原理、实例及在SPSS中的实现(一)
  9. 如何利用MATLAB调用手机摄像头(手把手教程)
  10. Android 中 使用 Google Paly 支付 简介