用python爬取爱课程首页所有的图片并下载到本地

分析：因为是要下载所有的图片，不需要进行筛选。这就简单多了。图片一般都在“src=”的后面。

代码：

# -*- coding:utf-8 -*-__author__ = 'Bohn'import requests, re, os
from urllib.request import urlretrievedef getHtml(url):#伪装头部user_agent = 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36'headers = {'User-Agent': user_agent}response = requests.get(url)response.encoding = 'utf-8'html = response.textprint("Got html")return htmldef getImg(html):#编写正则表达式regex = 'src="(.*?)"' pattern = re.compile(regex, re.S)#找到正则表达式匹配的图片imglist = re.findall(pattern, html)print(imglist)x = 1#判断这个文件夹是否存在，不存在就创建if not(os.path.exists(r'D:\imgsaving')):os.makedirs(r'D:\imgsaving')#下载图片for img in imglist:print("正在下载第%s张图片…" % x)urlretrieve(img, r'D:\imgsaving\%s.jpg' % x)x = x + 1returntry:#爬取爱课程首页的图片url = r"http://www.icourses.cn/home/"html = getHtml(url)getImg(html)print("OK")
except:print('Failed.')

用python爬取爱课程首页所有的图片并下载到本地相关推荐

python爬取某网站高清二次元图片自动下载
第一章 Python 爬取网站信息文章目录一,什么是爬虫? 二.使用步骤 1.引入库 2.伪装header 3.读取信息并过滤,写入文件总结前言本文只做技术讨论,大家不要一直爬这个小网站,记 ...
Python爬取不羞涩网小姐姐图片——BeautifulSoup应用
引言今年提倡原地过年,相信很多朋友都没有回家过年,像我就被迫留在深圳过年了,无聊之余只能去看看电影爬爬山.今天给大家带来一个打发无聊时光的案例,用Python爬取不羞涩网小姐姐图片,并保存到本地,老 ...
Python爬取王者荣耀全英雄全皮肤图片
Python爬取王者荣耀全英雄全皮肤图片前言思路分析编码案例源码附图总结前言以前写过类似的博客,利用Java爬取王者荣耀全英雄全皮肤图片,当时是利用 jsoup包来对目标网页进行解析 ...
python怎么爬取一个网页图片显示不出来_使用python爬取网页，获取不到图片地址【python 爬取图片教程】...
python 网络爬虫,怎么自动保存图片 f12找啊使用python爬取网页,获取不到图片地址大图片是在点击之后用 JS 控制加载的. 你可以看看 js/js.js 这个文件,253 行:func ...
python爬取电影天堂首页
用python写了个小爬虫,用来爬取电影天堂首页放置的几十部电影的名称,上映日期和下载链接,用到了beautifulsoup库和lxml库用来解析代码如下: import requests impo ...
python爬取微博数据词云_用Python爬取微博数据生成词云图片
原标题:用Python爬取微博数据生成词云图片欢迎关注天善智能 hellobi.com,我们是专注于商业智能BI,大数据,数据分析领域的垂直社区,学习.问答.求职,一站式搞定! 对商业智能BI.大数 ...
Python爬取王者荣耀英雄的皮肤数据并下载皮肤图片项目
Python爬取王者荣耀英雄的皮肤数据,并下载皮肤图片!高清的图片用来做桌面也不错哟~ 网址:https://pvp.qq.com/web201605/herolist.shtml 1.获得英雄信息, ...
三分钟教会你用Python爬取到喜欢的小姐姐图片
使用Python爬取小姐姐图片首先上网站链接唯vb.net教程美女生爬取图片主要分为一下几步: 1.打开一个你喜欢c#教程的小姐姐的网站 E.g xiaojiejie web 2.下载并安装p ...
【爬虫实战】python爬取虎牙直播间封面美女图片
Python爬虫爬取虎牙直播间封面美女图片本文目录 Python爬虫爬取虎牙直播间封面美女图片写作缘起上代码效果展示思路分析写作缘起这篇文章主要是介绍如何使用python爬虫来爬取虎牙直 ...

用python爬取爱课程首页所有的图片并下载到本地

用python爬取爱课程首页所有的图片并下载到本地相关推荐

最新文章

热门文章