python爬虫之帅哥图片爬取

实现目的

爬取网页上的帅哥图片…
可以直接运行

源码

import requests
from bs4 import BeautifulSoupif __name__ == '__main__':list_url = []#爬取自定义页数图片链接，最大19for i in range(1,6):if i==1:#图片index页url='http://www.shuaia.net/meinv/'else:#根据规律自定义urlurl='http://www.shuaia.net/meinv/index_%d.html'%iprint('正在加载第%d页'%i,url)#设置UA，模拟正常的浏览器访问head={'User-Agent':'Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.106 Mobile Safari/537.36'}#定义请求属性req=requests.get(url,headers=head)#定义解编码格式req.encoding='utf-8'html=req.text#对获取的网页进行lxml处理bf=BeautifulSoup(html,'lxml')#寻找类名的文件targets_URL=bf.find_all(class_='item-img')#创建列表，用于存储图片链接#遍历查询到符合条件的结果for each in targets_URL:#print(each)list_url.append(each.img.get('alt')+' '+each.get('href'))print('加载完成，正在写入txt.........')with open('图片链接.txt','a+') as f:for lain in list_url:f.write(str(lain)+'\n')print('写入完成，请查看.....')

python爬虫之帅哥图片爬取相关推荐

python爬虫——百度贴吧图片爬取小项目
项目目的: 爬取贴吧中所有帖子里面的图片将爬取到的图片存储到名称为贴吧名称的文件夹中项目环境 python版本:python3.6 用到的库:requests.etree.unquote 浏览器: ...
Python爬虫利用18行代码爬取虎牙上百张小姐姐图片
Python爬虫利用18行代码爬取虎牙上百张小姐姐图片下面开始上代码需要用到的库 import request #页面请求 import time #用于时间延迟 import re #正则表达式 ...
python爬虫实战（一）--爬取知乎话题图片
原文链接python爬虫实战(一)–爬取知乎话题图片前言在学习了python基础之后,该尝试用python做一些有趣的事情了–爬虫. 知识准备: 1.python基础知识 2.urllib库使用 ...
python爬虫初学实战——免登录爬取easyicon里的vip图标（2）
python爬虫初学实战-免登录爬取easyicon里的vip图标(2) 实验日期:2020-08-09 tips:没看过前面(1)的可以康康,指路 -> 爬取easyicon里的png图标成 ...
Python爬虫实战系列(一)-request爬取网站资源
Python爬虫实战系列(一)-request爬取网站资源 python爬虫实战系列第一期文章目录 Python爬虫实战系列(一)-request爬取网站资源前言一.request库是什么? 二 ...
从入门到入土：Python爬虫学习|实例练手|爬取猫眼榜单|Xpath定位标签爬取|代码
此博客仅用于记录个人学习进度,学识浅薄,若有错误观点欢迎评论区指出.欢迎各位前来交流.(部分材料来源网络,若有侵权,立即删除) 本人博客所有文章纯属学习之用,不涉及商业利益.不合适引用,自当删除! 若 ...
从入门到入土：Python爬虫学习|实例练手|爬取百度翻译|Selenium出击|绕过反爬机制|
此博客仅用于记录个人学习进度,学识浅薄,若有错误观点欢迎评论区指出.欢迎各位前来交流.(部分材料来源网络,若有侵权,立即删除) 本人博客所有文章纯属学习之用,不涉及商业利益.不合适引用,自当删除! 若 ...
从入门到入土：Python爬虫学习|实例练手|爬取新浪新闻搜索指定内容|Xpath定位标签爬取|代码注释详解
此博客仅用于记录个人学习进度,学识浅薄,若有错误观点欢迎评论区指出.欢迎各位前来交流.(部分材料来源网络,若有侵权,立即删除) 本人博客所有文章纯属学习之用,不涉及商业利益.不合适引用,自当删除! 若 ...
从入门到入土：Python爬虫学习|实例练手|爬取百度产品列表|Xpath定位标签爬取|代码注释详解
此博客仅用于记录个人学习进度,学识浅薄,若有错误观点欢迎评论区指出.欢迎各位前来交流.(部分材料来源网络,若有侵权,立即删除) 本人博客所有文章纯属学习之用,不涉及商业利益.不合适引用,自当删除! 若 ...
Python 爬虫实战，模拟登陆爬取数据
Python 爬虫实战,模拟登陆爬取数据从0记录爬取某网站上的资源连接: 模拟登陆爬取数据保存到本地结果演示: 源网站展示: 爬到的本地文件展示: 环境准备: python环境安装略安装r ...

python爬虫之帅哥图片爬取

实现目的

源码

python爬虫之帅哥图片爬取相关推荐

最新文章

热门文章