爬虫学习（11）：爬取虎牙美女直播高清照片

本来想展示下爬取下来的图片，结果被官方审核未通过，说内容低俗，所以我就不放图了，可以自己去跑一下，开车了，哈哈，感觉不怎么低俗吧，害，上代码！

import requests
from lxml import etree
import time
url='https://www.huya.com/g/4079/'
header={'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_3) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.162 Safari/537.36'
}
response=requests.get(url=url,headers=header)#发送请求
# print(response.text)
data=etree.HTML(response.text)#转化为html格式
image_url=data.xpath('//a//img//@data-original')
image_name=data.xpath('//a//img[@class="pic"]//@alt')
# print(image_url)
path='E://photo//'
for ur,name in zip(image_url,image_name):url=ur.replace('?imageview/4/0/w/338/h/190/blur/1','')title=name+'.jpg'response = requests.get(url=url, headers=header)  # 在此发送新的请求with open(path+title,'wb') as f:f.write(response.content)print("下载成功" + name)time.sleep(2)

我最近才学到xpath吧，所以就用的xpath，前面我已经用过正则做过类似的爬取了，其实发现爬虫真的不难
这是我私人群：970353786喜欢python的可以跟我一起交流，我也正在努力学习中。

爬虫学习（11）：爬取虎牙美女直播高清照片相关推荐

Python爬虫学习笔记 -- 爬取糗事百科
Python爬虫学习笔记 -- 爬取糗事百科代码存放地址: https://github.com/xyls2011/python/tree/master/qiushibaike 爬取网址:https ...
Python爬虫学习之爬取淘宝搜索图片
Python爬虫学习之爬取淘宝搜索图片准备工作因为淘宝的反爬机制导致Scrapy不能使用,所以我这里是使用selenium来获取网页信息,并且通过lxml框架来提取信息. selenium.lxm ...
利用Scrapy框架爬取LOL皮肤站高清壁纸
利用Scrapy框架爬取LOL皮肤站高清壁纸 Lan 2020-03-06 21:22 81 人阅读 0 条评论成品打包:点击进入代码: 爬虫文件 # -*- coding: utf- ...
Python 3.5_简单上手、爬取百度图片的高清原图
利用工作之余的时间,学习Python差不多也有小一个月的时间了,路漫漫其修远兮,我依然是只菜鸟. 感觉学习新技术确实是一个痛并快乐着的过程,在此分享些心得和收获,并贴一个爬取百度图片原图的代码. 代码 ...
Python批量爬取王者荣耀英雄高清壁纸
Python批量爬取王者荣耀英雄高清壁纸文章目录 Python批量爬取王者荣耀英雄高清壁纸前言爬虫步骤 python代码实现总结前言很多喜欢玩王者的朋友很希望把王者荣耀的英雄图片拿来做壁纸 ...
python爬取王者荣耀皮肤高清图
python爬取王者荣耀皮肤高清图前期准备,导入模块 requests json os 进入王者荣耀官网,进入游戏壁纸页面,f12进入开发者模式,按照下图找到这个json文件,用于对图片的数据请求. ...
Python 爬取百度图片的高清原图
# coding=utf-8 """ 爬取百度图片的高清原图 Author : MirrorMan Created : 2017-11-10 ""&q ...
python协程多任务爬取虎牙美女主播图片
使用正则.协程多任务爬取虎牙海量美女图片,斗鱼也一样,只需将正则表达式中的内容换一下即可,由于斗鱼网站的变化,之前的正则已用不了,现贴出新的: re.findall(r"https:// ...
笨方法学 python3 豆瓣_python3 爬虫学习：爬取豆瓣读书Top250（一）
本节课,我们试着来写一个基础的爬虫,来爬取一下豆瓣读书top250的内容:主要涉及的知识就是我们之前讲过的requests库. 网页分析我们先选取一个待会准备爬取的网站,咱们选个较好爬的网页,豆瓣读 ...

爬虫学习（11）：爬取虎牙美女直播高清照片

爬虫学习（11）：爬取虎牙美女直播高清照片相关推荐

最新文章

热门文章