python爬取pexels网站图片

#coding:utf-8from lxml import etree
import requests
import urllib.request
import progressbar  header={'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko)'+'Chrome/67.0.3396.87 Safari/537.36'
}word=input('请输入搜索的内容:')urls=['https://www.pexels.com/search/'+word+'/?page={}'.format(str(i))for i in range(11,12)]
path='E://G/'for url in urls :res=requests.get(url)selector=etree.HTML(res.text)second_urls=selector.xpath('//div[@class="photos"]/article')print(len(second_urls))for second_url in second_urls:new_url=second_url.xpath('a[1]/@href')[0]new_url='https://www.pexels.com'+str(new_url)#print(new_url)new_res=requests.get(new_url)new_selector=etree.HTML(new_res.text)new_second_urls=new_selector.xpath('//a[@class="btn__primary js-download"]')img_src = new_second_urls[0].xpath('@href')[0]img_src=img_src.split('?')[0]data=requests.get(img_src,headers=header)total_length = int(data.headers.get("Content-Length"))with open(path+img_src.split('/')[-1], 'wb') as f:widgets = ['Progress: ', progressbar.Percentage(), ' ',progressbar.Bar(marker='#', left='[', right=']'),' ', progressbar.ETA(), ' ', progressbar.FileTransferSpeed()]pbar = progressbar.ProgressBar(widgets=widgets, maxval=total_length).start()count=0for chunk in data.iter_content(chunk_size=1):if chunk:count=count+1f.write(chunk)f.flush()pbar.update(count)pbar.finish()

这里首先输入搜索关键字，输出每页图片张数，打印下载进度条

python爬取pexels网站图片相关推荐

python爬虫真假网址,python爬取福利网站图片完整代码,懂得人都懂
网址需要自己替换懂的人都懂512*2,主要学习简单的爬虫,别乱用,否则后果自负! [Python] 纯文本查看复制代码 import requests,bs4,re,os,threadingclas ...
python爬取某网站图片
程序运行需要导包具体看代码中的,缺啥导啥✌. import requests import re import time import os url="https://pic.netbia ...
python最新官网图片_python爬取福利网站图片完整代码
存起来自己学习... import requests,bs4,re,os,threading class MeiNvTu: def __init__(self): self.url_main='ht ...
python爬取动态网页图片
爬取某知名网站图片(爬取动态网页) python爬取动态网页图片 python爬取动态网页图片环境: python3.pycharm 库: requests.urllib.json 思路: 1.分析 ...
Python爬取小姐姐图片
使用Python爬取小姐姐图片首先上网站链接唯美女生爬取图片主要分为一下几步: 1.打开一个你喜欢的小姐姐的网站 E.g xiaojiejie web 2.下载并安装python环境 pytho ...
python爬取指定关键字图片
''' 爬取指定关键字图片 ''' import re# 正则表达式,解析网页 import requests# 请求网页 import traceback import osdef dowmload ...
python爬取贴吧图片_Python爬取贴吧多页图片
Python爬取贴吧图片都只能爬取第一页的,加了循环也不行,现在可以了. #coding:utf-8 import urllib import urllib2 import re import os ...
Python爬取自然风景图片代码
Python爬取自然风景图片代码 \qquad 需要用到python的etree库和requests库,需要提前下载安装. from lxml import etree import requests ...
Python | 使用Python爬取Wallhaven网站壁纸并上传百度网盘
更多详情请查看Honker Python | 使用Python爬取Wallhaven网站壁纸并上传百度网盘给大家推荐一款超好用的壁纸下载网站-- wallhaven 第一次知道这个网站的时候,惊为天 ...

python爬取pexels网站图片

python爬取pexels网站图片相关推荐

最新文章

热门文章