Python 网页爬取图片

实例：

import re   #导入正则表达式的库
import requests   #导入第三方http库
import os
import shutil
import timehtml = requests.get("http://news.qq.com/photo.shtml")  #通过get方法获取腾讯新闻的网页源代码
html.encoding = 'utf-8'   #编码方式utf-8，用于正常显示中文
#print(html.text)   #显示源码homedir = os.getcwd()   #获取项目当前路径
if os.path.exists(homedir+'\pic'):shutil.rmtree(homedir+'\pic')
else:os.mkdir(homedir+'\pic')   #创建pic文件夹，用于保存图片pic_url = re.findall('img src="(.*?)"',html.text,re.S)   #设定正则表达式，爬取图片的url，匹配任意字符/包括换行符re.S
i = 0
for each in pic_url:   #遍历pic_urlprint('now downloading:' + each)#pic = requests.get("http://news.qq.com/photo.shtml/"+each) #补充完整的网址，通过get方法获取图片pic = requests.get(each)  # 补充完整的网址，通过get方法获取图片fp = open('pic\\' + str(i) + '.png','wb')  #在pic文件夹下创建jpg格式的文件# fp = open('pic\\', 'wb')  # 在pic文件夹下创建jpg格式的文件fp.write(pic.content)  #将图片写入到工程文件夹下的pic文件夹中fp.close()i += 1

结果：

Python 网页爬取图片相关推荐

【大学生课程实践】实操：使用Python爬虫爬取图片
实操:使用Python爬虫爬取图片参考链接: 源码部署安装源码中的爬虫库创建 images文件参考链接: 本博客作为大佬博客学习笔记记录参考链接:孩子说"你没看过奥特曼" ...
[python爬虫] 爬取图片无法打开或已损坏的简单探讨
本文主要针对python使用urlretrieve或urlopen下载百度.搜狗.googto(谷歌镜像)等图片时,出现"无法打开图片或已损坏"的问题,作者对它进行简单的探讨.同时 ...
python爬虫爬取图片无法打开_半小时入门python爬虫爬下网站图片，不能再简单了...
阅读本文大约需要2分钟本文旨在为没有爬虫基础的,偶尔想爬虫爬一下某个网站上的图片的初学者使用,如果你已经是对爬虫很熟悉了,下面依然有你感兴趣的东西. 我最近也才正儿八经学习了下爬虫,出于某种需要爬一 ...
Python爬虫爬取图片
** Python爬虫爬取网站指定图片(多个网站综合经验结论分享) ** 我想以这篇文章来记录自己学习过程以及经验感受,因为我也是个初学者.接下来我将分享几个我爬取过的图片网站,给大家们分享下自己的方 ...
python爬虫爬取图片
图片爬取单张图片 #网址:https://pic.netbian.com/ 我们爬取:https://pic.netbian.com/4kmeinv/ from lxml import etree ...
python多线程爬取图片
2019独角兽企业重金招聘Python工程师标准>>> 创建一个 Queue.Queue() 的实例,然后使用数据对它进行填充. 将经过填充数据的实例传递给线程类,后者是通过继承 t ...
python网页爬取方法_Python爬取网页的三种方法
# Python爬取网页的三种方法之一: 使用urllib或者urllib2模块的getparam方法 import urllib fopen1 = urllib.urlopen('http://w ...
python如何爬取图片到指定文件夹论文_基于Python的图片爬虫程序设计
互联网中包含大量有价值的数据,网络爬虫通过既定规则可以自动地抓取互联网数据并下载至本地存储.研究网络爬虫的工作原理和基于 Python 网络信息爬取技术模块功能,基于 Requests- B ...
（纯小白）Python简单爬取图片
在具体介绍图片爬取之前我们先简单弄个小实验,使用Python来写一个下载图片的程序. #完整代码 import requestsdef down_pic(down_url, picname):head ...
python爬虫爬取图片的简单步骤和实现代码
目录 1. 如何获取网页信息 1). 直接从网络读取 2). 先将网页源码保存到本地,再读取 2. 分析获取到的网页信息,提取需要的信息(图片地址) 3. 使用request将图片保存到本地以及会碰到 ...

Python 网页爬取图片

Python 网页爬取图片相关推荐

最新文章

热门文章