python爬虫爬取慕课网中的图片

我们简单地爬取慕课网中免费课程下的第一页的图片，如想爬取多页图片，可以添加for循环自行实现

python版本：3.6.5

爬取网址：http://www.imooc.com/course/list

python源码：

#抓取慕课网的图片到本地
import re,urllib.requestrequest = urllib.request.urlopen('http://www.imooc.com/course/list')
buf=request.read().decode('utf-8')
#根据以下网页源码写出正则表达式
#src="//img3.mukewang.com/5aa77f4c0001f0a706000338-240-135.jpg"
listurl=re.findall('src="//img.+\.jpg',buf)
res=[]         #保存所有的图片地址
index=0            #对爬取的图片进行计数
for url in listurl:#构造图片地址 图片真实地址如下#"http://img3.mukewang.com/5aa77f4c0001f0a706000338-240-135.jpg"a=re.findall('//img.+\.jpg',url)a[0]='http:'+a[0]                        #a[0]保存图片真实地址print(str(index)+" : "+a[0])     #输出图片编号和网址res.append(a[0])                        #将图片地址添加进列表index=index+1
index=0
print(len(res))                                #输出图片总数，验证是否出错
for url in res:f=open("D:/img/"+str(index)+'.jpg','wb')request=urllib.request.urlopen(url)buf=request.read()f.write(buf)index=index+1
f.close()

运行并观察输出：可以发现并没错误

我们打开D:\img

惊奇的发现所有图片均被爬取到了本地

python爬虫爬取慕课网中的图片相关推荐

python爬虫爬取贝壳网中所有行政区内的二手房将获取信息存于excle中--Excel文件含分析
-- coding: utf-8 -- """ Created on Sat Feb 29 19:13:37 2020 @author: acliu "&quo ...
python爬虫爬取知网
python爬虫爬取知网话不多说,直接上代码! import requests import re import time import xlrd from xlrd import open_wor ...
在当当买了python怎么下载源代码-python爬虫爬取当当网
[实例简介]python爬虫爬取当当网 [实例截图] [核心代码] ''' Function: 当当网图书爬虫 Author: Charles 微信公众号: Charles的皮卡丘 ''' impor ...
python爬虫爬取当当网的商品信息
python爬虫爬取当当网的商品信息一.环境搭建二.简介三.当当网网页分析 1.分析网页的url规律 2.解析网页html页面书籍商品html页面解析其他商品html页面解析四.代码实现 ...
[python爬虫]爬取天气网全国所有县市的天气数据
[python爬虫]爬取天气网全国所有县市的天气数据访问URL 解析数据保存数据所要用到的库 import requests from lxml import etree import xlwt ...
Python爬虫爬取东方财富网的股票信息
简单的Python爬虫应用目标:爬取东方财富网的股票信息 1.先找到要爬取的网页 2.第二步开始爬取信息 2.1 通过requests获取网页信息 2.2再通过BeautifulSoup解析: 2. ...
python爬虫爬取东方财富网股票走势+一些信息
一.目标我们的目标是爬取东方财富网(https://www.eastmoney.com/)的股票信息我的目标是爬取100张股票信息图片经过实际测试我的爬取范围为000001-000110,000 ...
[Python爬虫]爬取东方财富网公司公告需要注意的几个问题
在上一篇文章中,以爬取东方财富网公司公告为例,介绍了如何爬取利用ajax加载的网页,以及如何模拟翻页.但是,在实际应用的过程中,发现了一些问题.接下来就来一一分析解决. 问题一.公告数量过多,后面的公 ...
python爬虫-爬取当当网书籍信息存到Excel中
文章目录一.任务二.分析 (一).单页面的信息分析源代码分析目标信息定位与分析代码设计 (二).所有目标页面链接分析目标链接分析代码设计三.注意要点四.完整代码五.参考一.任务 ...

python爬虫爬取慕课网中的图片

python爬虫爬取慕课网中的图片相关推荐

最新文章

热门文章