使用python爬取图片（爬取百度图片为例）

思路：

1. 确定爬取的是哪一个url的图片,可F12来获取

     https://image.baidu.com/search/acjson 就是要爬取图片的url基地址

2.获取需要传递的参数以及header信息复制出来待会会用到

3.对 urllib 的使用：urllib 通常用于网络资源的解析，比如把一个图片链接地址解析成一个图片

urllib.request.urlretrieve(url, "D:/a/壁纸/" + str(n) + '.jpg')

第一个参数是在线图片的地址，第二个是保存的地址，第三个是保存后的图片名字

4.对requests的使用

page_info = requests.get(url=url, headers=header, params=param)
page_info.encoding = 'utf-8'
page_info = page_info.json()
info_list = page_info['data']

话不多说直接开干

import time
import requests
import urllibpage = input("请输入要爬取多少页：")
page = int(page) + 1   #确保其至少是一页，因为 输入值可以是 0
header = {'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 11_1_0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.88 Safari/537.36'
}
n = 0  # 图片的前缀 如 0.png
pn = 1  # pn是从第几张图片获取 百度图片下滑时默认一次性显示30张
for m in range(1, page):url = 'https://image.baidu.com/search/acjson?'param = {'tn': 'resultjson_com','logid': '8846269338939606587','ipn': 'rj','ct': '201326592','is': '','fp': 'result','queryWord': '水果','cl': '2','lm': '-1','ie': 'utf-8','oe': 'utf-8','adpicid': '','st': '-1','z': '','ic': '','hd': '','latest': '','copyright': '','word': '水果','s': '','se': '','tab': '','width': '','height': '','face': '0','istype': '2','qc': '','nc': '1','fr': '','expermode': '','force': '','cg': 'girl','pn': pn,'rn': '30','gsm': '1e',}page_info= requests.get(url=url, headers=header, params=param)page_info.encoding = 'utf-8'  #确保解析的格式是utf-8的page_info= page_info.json()  #转化为json格式在后面可以遍历字典获取其值info_list = page_info['data'] #观察发现data中存在 需要用到的url地址del info_list[-1]  #每一页的图片30张，下标是从 0 开始 29结束 ，那么请求的数据要删除第30个即 29为下标结束点img_path_list = []for i in info_list:img_path_list.append(i['thumbURL'])for index in range(len(img_path_list)):print(img_path_list[index])   #所有的图片的访问地址time.sleep(1)urllib.request.urlretrieve(img_path_list[index], "D:/a/壁纸/" + str(n) + '.jpg')n = n + 1pn += 29

总结：

对于爬取图片，需要明白的是灵活的获取到爬取图片的地址以及参数和分析数据结构

使用python爬取图片（爬取百度图片为例）相关推荐

如何用爬虫爬图，以百度图片为例
如何用爬虫爬图,以百度图片为例关于爬虫爬图如何获取网页源代码源代码关于爬虫爬图最近自己看着网上教程学习如何爬图,发现爬虫的优越性,也发现有些博客对初学者不太友好,因此写了这篇博客. 如何获取 ...
python如何爬取图片_百度图片爬虫-python版-如何爬取百度图片?
上一篇我写了如何爬取百度网盘的爬虫,在这里还是重温一下,把链接附上: http://5912119.blog.51cto.com/5902119/1771391 这一篇我想写写如何爬取百度图片的爬虫, ...
使用python和PyQt5编写爬取百度图片的界面工具
使用python和PyQt5编写爬取百度图片的界面工具本篇文章的主要内容是展示我个人编写的,以界面小工具的方式爬取百度上面的图片,功能很单一,根据关键词爬取图片,代码很简单,新手上路请多指教. 代码 ...
Python 爬虫实例（1）—— 爬取百度图片
爬取百度图片在Python 2.7上运行 #!/usr/bin/env python # -*- coding: utf-8 -*- # @Author: loveNightimport json ...
如何使用python爬取百度图片_python实现爬取百度图片的方法示例
本文实例讲述了python实现爬取百度图片的方法.分享给大家供大家参考,具体如下: import json import itertools import urllib import requests ...
python爬去百度图片_python实现爬取百度图片的方法示例
本文实例讲述了python实现爬取百度图片的方法.分享给大家供大家参考,具体如下: import json import itertools import urllib import requests ...
详细分析如何利用python批量爬取百度图片
这篇文章主要写的是利用python网络爬虫批量来爬取百度图片并保存到文件夹中. 首先我们打开百度图片这个网页:https://image.baidu.com/ 我们现在随便搜一个类型的图片,比如小狗, ...
python爬虫百度图片_python实现爬取百度图片的方法示例
本文实例讲述了python实现爬取百度图片的方法.分享给大家供大家参考,具体如下: import json import itertools import urllib import requests ...
Python爬虫:运用多线程、IP代理模块爬取百度图片上小姐姐的图片
Python爬虫:运用多线程.IP代理模块爬取百度图片上小姐姐的图片 1.爬取输入类型的图片数量(用于给用户提示) 使用过百度图片的读者会发现,在搜索栏上输入关键词之后,会显示出搜索的结果,小编想大多 ...
Python爬取百度图片搜索结果
爬取百度图片搜索的图片,我们先需要分析其访问 URL,我们在搜索页面,比如搜索 "abc" ,打开 F12 调试,下拉结果页面页,查看网络请求,在其中我们可以找到这样一个请求 ht ...

使用python爬取图片（爬取百度图片为例）

使用python爬取图片（爬取百度图片为例）相关推荐

最新文章

热门文章