按关键字爬取百度图片

使用requests包与百度图片服务器进行交互，得到返回的json数据后进行解析，最终获得百度图片的实际地址

import requests
from fake_useragent import UserAgentdef imgUrls(keyWord, userAgent, pn=0, rn=30):url = 'https://image.baidu.com/search/index'params = {'tn': 'resultjson_com','ipn': 'rj','ct': '201326592','is': '','fp': 'result','queryWord': keyWord,'cl': '2','lm': '-1','ie': 'utf-8','oe': 'utf-8','adpicid': '','st': '-1','z': '','ic': '0','word': keyWord,'s': '','se': '','tab': '','width': '','height': '','face': '0','istype': '2','qc': '','nc': '1','fr': '','pn': 0,  # 当前请求的图片序号'rn': 30,  # 取多少个图片'gsm': '1e','1491808945838': ''}rep = requests.get(url, headers={'user-Agent': userAgent}, params=params)if(int(rep.status_code) == 200):try:imgs = rep.json()"""解析返回的url地址"""def decodeUrl(imgUrl):longDic={'_z2C$q': ":",'_z&e3B': ".",'AzdH3F': "/"}mapDic={'w': "a",'k': "b",'v': "c",'1': "d",'j': "e",'u': "f",'2': "g",'i': "h",'t': "i",'3': "j",'h': "k",'s': "l",'4': "m",'g': "n","5": "o",'r': "p",'q': "q","6": "r",'f': "s",'p': "t","7": "u",'e': "v",'o': "w","8": "1",'d': "2",'n': "3","9": "4",'c': "5",'m': "6","0": "7",'b': "8",'l': "9",'a': "0"}for k in longDic:imgUrl=imgUrl.replace(k,longDic[k])imgUrl=list(imgUrl)tmp=[]for i in imgUrl:if i in mapDic:tmp.append(mapDic[i])else:tmp.append(i)return ''.join(tmp)imgUrls = [decodeUrl(imgs['data'][sec]['objURL'])for sec in range(len(imgs['data']) - 1)]result = imgUrlsstatus = Trueexcept Exception as err:result = str(err)status = Falsefinally:return {'result': result, 'status': status}if __name__ == '__main__':ua = UserAgent()urls = imgUrls(keyWord='美女', userAgent=ua.random)print(urls)

按关键字爬取百度图片相关推荐

Python爬虫——关键字爬取百度图片
在日常生活中,我们经常需要使用百度图片来搜索相关的图片资源.而如果需要大量获取特定关键字的图片资源,手动一个个下载无疑十分繁琐且费时费力.因此,本文将介绍如何通过Python爬虫技术,自动化地获取百度 ...
【Python】爬虫入门6：爬取百度图片搜索结果（基于关键字爬图）
源代码 #!/usr/bin/env python # -*- coding: UTF-8 -*-# 需求:爬取百度图片# noinspection PyUnresolvedReferences im ...
如何使用python爬取百度图片_python实现爬取百度图片的方法示例
本文实例讲述了python实现爬取百度图片的方法.分享给大家供大家参考,具体如下: import json import itertools import urllib import requests ...
python爬去百度图片_python实现爬取百度图片的方法示例
本文实例讲述了python实现爬取百度图片的方法.分享给大家供大家参考,具体如下: import json import itertools import urllib import requests ...
python3爬取百度图片
python3爬取百度图片最终目的:能通过输入关键字进行搜索,爬取相应的图片存储到本地或者数据库首先打开百度图片的网站,搜索任意一个关键字,比如说:水果,得到如下的界面分析: 1.百度图片搜索结 ...
python爬虫百度图片_python实现爬取百度图片的方法示例
本文实例讲述了python实现爬取百度图片的方法.分享给大家供大家参考,具体如下: import json import itertools import urllib import requests ...
HttpClient 爬取百度图片
HttpClient 爬取百度图片以前写的一篇爬取百度图片的博客是我第一次用Java接触爬虫的相关知识,当时使用的Java的原生类库,写的不是很好,特别是对于分页的处理(导致许多图片重复下载了)以及 ...
Python 爬虫实例（1）—— 爬取百度图片
爬取百度图片在Python 2.7上运行 #!/usr/bin/env python # -*- coding: utf-8 -*- # @Author: loveNightimport json ...
python爬取百度图片（用于深度学习中数据集的收集）
6_python爬取百度图片(用于深度学习中数据集的收集)(6-20181225-) 参考: https://blog.csdn.net/guyuealian/article/details/7873 ...
详细分析如何利用python批量爬取百度图片
这篇文章主要写的是利用python网络爬虫批量来爬取百度图片并保存到文件夹中. 首先我们打开百度图片这个网页:https://image.baidu.com/ 我们现在随便搜一个类型的图片,比如小狗, ...

按关键字爬取百度图片

按关键字爬取百度图片相关推荐

最新文章

热门文章