爬取网页图片链接并下载保存

先把需要爬取的网页链接写到表格中

读取表格信息

import xlrd
excel_path = '/Users/yt/Desktop/chaye.xlsx'workbook: xlrd.book.Book = xlrd.open_workbook(excel_path)
sheet: xlrd.sheet.Sheet = workbook.sheet_by_index(0)for row in range(1, sheet.nrows):url = sheet.row_values(row)[0]id_str = sheet.row_values(row)[1]self.deal_photo_item(url, id_str)

开始爬取链接并下载图片

import urllib.request
def deal_photo_item(self, url, id_str):self.driver.get(url)self.driver.execute_script("window.scrollBy(0,1000)")random_sleep()self.driver.execute_script("window.scrollBy(0,-1000)")random_sleep()html = self.driver.page_sourceselector = Selector(text=html)images = []banner_image_list = selector.css('#nc_small::attr(src)').extract()for i, detail_image in enumerate(banner_image_list):# 下载图片urlStr = detail_image.replace('_60.jpg', '') + '.jpg'filename = f'./图片/{id_str}+{i}.jpg'urllib.request.urlretrieve(urlStr, filename=filename)

具体的爬取代码可以看我之前的淘宝商品信息爬取代码，这边只记录通过链接保存图片

爬取网页图片链接并下载保存相关推荐

Java 爬取网页图片并下载
Java 爬取网页图片并下载源码; package a; import org.jsoup.Connection; import org.jsoup.Jsoup; import org.jsoup. ...
node.js 爬虫实现爬取网页图片并保存到本地
node.js 爬虫实现爬取网页图片并保存到本地没有废话直接看代码 /*** 请求网站数据* 将数据保存本地文件*/ //不同协议引用不同模块,http https const http = re ...
使用Python爬取网页图片
使用Python爬取网页图片李晓文 21 天前近一段时间在学习如何使用Python进行网络爬虫,越来越觉得Python在处理爬虫问题是非常便捷的,那么接下来我就陆陆续续的将自己学习的爬虫知识分享给 ...
java爬虫-简单爬取网页图片
刚刚接触到"爬虫"这个词的时候是在大一,那时候什么都不明白,但知道了百度.谷歌他们的搜索引擎就是个爬虫. 现在大二.再次燃起对爬虫的热爱,查阅资料,知道常用java.python语 ...
一个咸鱼的python_一个咸鱼的Python爬虫之路（三）：爬取网页图片
学完Requests库与Beautifulsoup库我们今天来实战一波,爬取网页图片.依照现在所学只能爬取图片在html页面的而不能爬取由JavaScript生成的图. 所以我找了这个网站 http: ...
【用Java爬取网页图片——爬虫爬取数据】
用Java爬取网页图片--爬虫爬取数据 1.在创建项目中导入jsoup 2.创建一个保存下载图片的路径 3.使用URL读取网页路径,jsoup读取网页内容 4.利用属性标签获取图片连接块 5.因为该路 ...
上手快！！福利局！新手如何使用python爬虫爬取网页图片（使用正则进行数据解析）当然这个新手是我自己
作为一个python新入门小白,突然就想发个博客,一方面为了记录学习历程,一方面能分享给新入门的同学经验,更多的是想和大家一起学习和交流.以下是我以小白的角度分享的爬虫的相关知识和一个简单的爬取网页图 ...
node：爬虫爬取网页图片 1
代码地址如下: http://www.demodashi.com/demo/13845.html 前言周末自己在家闲着没事,刷着微信,玩着手机,发现自己的微信头像该换了,就去网上找了一下头像,看着图 ...
利用python爬取网页图片
学习python爬取网页图片的时候,可以通过这个工具去批量下载你想要的图片开始正题: 我从尤物网去爬取我喜欢的女神的写真照,我们这里主要用到的就两个模块 re和urllib模块,有的时候可能会用到t ...

爬取网页图片链接并下载保存

爬取网页图片链接并下载保存相关推荐

最新文章

热门文章