跟着鬼哥学爬虫-5-更新妹子图库质量，提高微信群聊发图速度

第三篇中的图库，群里大家都说质量稍微次一点，现在重新爬了个网站更新一下。

比上一篇的代码也优化了一点，对于自动保存的文件名，采用数字方式直接保存，方便后期在微信群中调用发送。

# -*- coding: utf-8 -*-
from bs4 import BeautifulSoupimport urllib2import redef getGirlUrl(n):url = 'http://www.4j4j.cn/beauty/tag_3_'+str(n)+'.html'print urlresponse = urllib2.urlopen(url)html = response.read()soup1 = BeautifulSoup(html, "lxml")someData = soup1.select("div.i-list li a img")allUrls=[]for some in someData:allUrls.append(some['data-original'])return allUrlsdef download(url):global numbernumber +=1print numberpath = '/home/suz/midgirls/'content = urllib2.urlopen(url).read()filename = path+str(number)+'.jpg'print '下载---'+filenamef = open(filename,'w+')f.write(content)f.close()if __name__ == "__main__":number=1getGirlUrl(1)for i in range(1,75):urls=getGirlUrl(i)for u in range(1,len(urls)):download(urls[u])print '正在爬第'+str(i)+'页'print '爬完了～～！'

效果图：

跟着鬼哥学爬虫-5-更新妹子图库质量，提高微信群聊发图速度相关推荐

跟着鬼哥学爬虫-10-python微信-5-加上了人工智能回复！
跟着鬼哥学爬虫-10-python微信-5-加上了人工智能回复! 其实人工智能回复,现在网上有很多开源的机器学习,AI学习的框架,但是最重要的一点就是没有语料,也就是没有相互回答的数据内容. 所以这个 ...
跟着鬼哥学爬虫-3-美女图片!!!
这一节课,是群里很多娃在等待的课程. 通过前面两篇文章的学习,我们对BeautifulSoup4的简单使用有了了解. 了解了使用这个爬虫的核心是熟悉分析清楚html标签,一些css的简单知识,找准了标 ...
跟着鬼哥学so改动，二，进行篇
图/文听鬼哥说故事继续上文的内容---------------------------------- 0x1:測试文件的编写经过上一篇文章的基础学习,如今我们開始进行是用的部分. 既然我们能够 ...
跟着鬼哥学so改动，一，准备篇
图/文听鬼哥说故事闲话少说,so的改动,重要性大家都知道,这里从头编写so文件,分析so文件,改动so文件,打算做一个系列的教程,当然,主要是看时间同意. android的sdk配置以及ndk环境 ...
跟着鬼哥学so修改，一，准备篇
图/文听鬼哥说故事闲话少说,so的修改,重要性大家都知道,这里从头编写so文件,分析so文件,修改so文件,打算做一个系列的教程,当然,主要是看时间允许. android的sdk配置以及ndk环境 ...
跟着鬼哥学PyQtPart.2
<span style="font-family: Arial, Helvetica, sans-serif;">0x1:</span><span s ...
跟着鬼哥学PyQt Part.1
中秋几天不出去玩了,留在家里把PyQt的相关资料学习一下,这里仅记录一下学习的相关记录,留下存档,便于以后翻阅.主要的目的是编写一个反编译和回编译的工具,稍后可以慢慢随着需求补充上一些搜索和修改的功能 ...
跟着鬼哥学so修改，三，答案篇
几篇分析好的文章: http://www.pd521.com/thread-114-1-1.html xxoo http://www.pd521.com/thread-113-1-1.html ...
跟着鬼哥学so修改，三，作业篇
作业: 通过前面两篇文章的学习,请自行分析此应用,将当前用户类型修改为Gold Vip 用户. 有两种以上的方式可以修改的,有兴趣的同学请进行分析,写一下分析记录,可另起文章发布其过程与思路. 明天或 ...

跟着鬼哥学爬虫-5-更新妹子图库质量，提高微信群聊发图速度

跟着鬼哥学爬虫-5-更新妹子图库质量，提高微信群聊发图速度相关推荐

最新文章

热门文章