Python获取图片保存对应的文件夹

首先创建的文件夹，先定义一个创建文件夹的函数：

def makdir(path):try:isExists = os.path.exists(path)#判断是否存在文件夹if not isExists:#不存在创建os.makedirs(path)print(path+'文件夹创建成功！')else:print(path+'文件夹已存在！')except Exception as e:print(e)

爬取图片并保存图片函数

def pic_download(paths,url):# 请求头池headers = {'user-agent':"Mozilla/5.0 (X11; U; Linux x86_64; zh-CN; rv:1.9.2.10) Gecko/20100922 Ubuntu/10.10 (maverick) Firefox/3.6.10"}web = requests.get(url, headers=headers).content.decode()# print(web.encoding)data = etree.HTML(web)lists = data.xpath('//div[@class="text_left text_lefts"]/div[@id="container"]/div')for lis in lists:new_url = 'https:' + lis.xpath('./p/a/@href')[0]name = lis.xpath('./p/a/@alt')[0]#创建相应文件夹makdir(paths+'/' + name)new_web = requests.get(new_url, headers=headers).content.decode()new_data = etree.HTML(new_web)finall_url = 'https:' + new_data.xpath('//div[@class="imga"]/a/@href')[0]#以二进制的方式写入图片try:r = requests.get(finall_url, headers=headers).contentwith open(paths+'/' + name+'/'+name+'.jpg','wb') as f:f.write(r)print('%s 下载成功' % (name))time.sleep(0.5)except Exception:print('%s下载失败' % (name))time.sleep(0.5)

调用函数

if __name__ == '__main__':path = 'D:/爬虫下载'#爬取第5页到第7页的数据for i in range(5,8):print('==========开始第{}页的爬取=========='.format(i))url = 'https://sc.chinaz.com/tupian/renwutupian_{}.html'.format(i)pic_download(path+'/' + str(i),url)print('----------完成第{}页的爬取----------'.format(i))time.sleep(1)

完整代码：

from lxml import etree
import time
import requests
import os#创建文件夹
def makdir(path):try:isExists = os.path.exists(path)#判断是否存在文件夹if not isExists:#不存在创建os.makedirs(path)print(path+'文件夹创建成功！')else:print(path+'文件夹已存在！')except Exception as e:print(e)#获取图片
def pic_download(paths,url):# 请求头池headers = {'user-agent':"Mozilla/5.0 (X11; U; Linux x86_64; zh-CN; rv:1.9.2.10) Gecko/20100922 Ubuntu/10.10 (maverick) Firefox/3.6.10"}web = requests.get(url, headers=headers).content.decode()# print(web.encoding)data = etree.HTML(web)lists = data.xpath('//div[@class="text_left text_lefts"]/div[@id="container"]/div')for lis in lists:new_url = 'https:' + lis.xpath('./p/a/@href')[0]name = lis.xpath('./p/a/@alt')[0]#创建相应文件夹makdir(paths+'/' + name)new_web = requests.get(new_url, headers=headers).content.decode()new_data = etree.HTML(new_web)finall_url = 'https:' + new_data.xpath('//div[@class="imga"]/a/@href')[0]#以二进制的方式写入图片try:r = requests.get(finall_url, headers=headers).contentwith open(paths+'/' + name+'/'+name+'.jpg','wb') as f:f.write(r)print('%s 下载成功' % (name))time.sleep(0.5)except Exception:print('%s下载失败' % (name))time.sleep(0.5)#     #print(name)if __name__ == '__main__':path = 'D:/爬虫下载'#爬取第5页到第7页的数据for i in range(5,6):print('==========开始第{}页的爬取=========='.format(i))url = 'https://sc.chinaz.com/tupian/renwutupian_{}.html'.format(i)pic_download(path+'/' + str(i),url)print('----------完成第{}页的爬取----------'.format(i))time.sleep(1)

Python获取图片保存对应的文件夹相关推荐

Vue+Springboot上传图片将 Base64 码转换为图片保存在指定文件夹
Vue+Springboot上传图片将 Base64 码转换为图片保存在指定文件夹前言一.Vue 前端一.五注意!!! 二.Springboot 后端引入Base64依赖在项目里新建 ut ...
java把图片存入文件夹_将图片保存在指定文件夹中
我可以通过我的代码将图片保存在我想要的文件夹中,但这还不够好,因为我的代码在我的文件夹中提供了一个图像副本,而在图库中提供了另一个图像(DCIM) . 代码: Btngetdata.setOnClic ...
python按照图片命名顺序读取文件夹下的图片
假设我们要读取的文件夹下的图片命名如下: 现在需要按照图片的命名顺序逐个读取图片(即按照frame1.jpg,frame2.jpg,frame3.jpg,frame4.jpg,frame5.jpg顺序 ...
怎么把图片保存到考生文件夹_请在考生文件夹下完成如下操作
1 .请在考生文件夹下完成如下操作: ( 1 )在考生文件夹下建立 " 图片 2" 文件夹: ( 2 )在考生文件夹下查找所有的 jpg 文件,并将文件移动到 " 图片 ...
python批量图片大小处理-多文件夹
有时候我们需要对图片就行大小处理,但是图片数量多,而且分布在不同的文件夹下面,那么我们怎么对图片进行批量大小处理呢. 一般的单张图片处理使用的是reshape或resize对图片进行缩放,但是如果我们 ...
python下载图片到文件夹_python 移动图片到另外一个文件夹的实例
python 移动图片到另外一个文件夹的实例如下所示: # -*- coding:utf8 -*- import os import shutil import numpy as np import ...
pyaudio：基于pyaudio利用Python编程从电脑端录制音频保存到指定文件夹+将录音上传服务器+录音进行识别并转为文本保存
pyaudio:基于pyaudio利用Python编程从电脑端录制音频保存到指定文件夹+将录音上传服务器+录音进行识别并转为文本保存目录输出结果代码实现输出结果代码实现 # -*- codi ...
Matlab图片预处理——截取图片中有效部分保存在其余文件夹下
Matlab图片预处理 1.目的 2.多文件夹代码 3.单文件夹代码 4.效果图 1.目的医学图像处理中,需要将医学图像中非病理图像的平台操作页面截掉,只保留病理图片. 2.多文件夹代码 Matla ...
Python爬取起点小说并保存到本地文件夹和MongoDB数据库中
Python爬取起点小说并保存到本地MongoDB数据库中工具:Python3.7 + Mongo4.0 + Pycharm """ 爬取起点小说<诡秘之主> ...
python爬取明星百度图片并存入本地文件夹
python爬取明星百度图片并存入本地文件夹想要一个明星图片的时候,发现图片量过大,一张张保存太累,不太现实这时候就可以用到爬虫,批量爬取图片现在又出现一个问题,当发现一个明星爬完后,再爬取下一 ...

Python获取图片保存对应的文件夹

Python获取图片保存对应的文件夹相关推荐

最新文章

热门文章