Python批量爬取堆糖网图片

import urllib.parse
import requests   #第三方请求库
import json
import jsonpath  #处理json文件的的提取库
from bs4 import BeautifulSoup
import os
import urllib
import relabel = 'AI'
label = urllib.parse.quote(label)
#https://www.duitang.com/napi/blog/list/by_search/?kw=%E6%A0%A1%E8%8A%B1&type=feed&include_fields=top_comments%2Cis_root%2Csource_link%2Citem%2Cbuyable%2Croot_id%2Cstatus%2Clike_count%2Clike_id%2Csender%2Calbum%2Creply_count%2Cfavorite_blog_id&_type=&start=24&_=1541772636388
url = 'https://www.duitang.com/search/?kw={}&start{}'os.path.abspath('D:/Python/AI')
for i in range(0, 2400, 24):  #进行翻页代码迭代u = url.format(label,i)   #获得翻页后的链接r = requests.get(u)print(len(r.text))print(r.text)print(r.encoding)soup = BeautifulSoup(r.text, 'html.parser')print(len(soup))se = soup.findAll('a',{'class':{'a'}})print(se)for ii in se:#print(ii.img.get('alt'),ii.img.get('src'))imagename = os.path.basename(ii.img.get('src'))  #返回文件名#print(imagename)imageurl = ii.img.get('src')  #返回图片链接名字#print(imageurl)# -*- coding: utf-8 -*-urllib.request.urlretrieve(imageurl,'D:/Python/AI/{}'.format(imagename))

Python批量爬取堆糖网图片相关推荐

爬取推糖网图片小案例
前言: 好久没有更新博文了,因为工作的关系,一直没有更新博文,今天有空,就给大家带来一个爬图片的小案例.今天的目标网站就是堆糖网,关于爬取这个网站图片的案例,肯定大家都看到很多,基本都是通过搜索图片的 ...
python爬虫爬取彼岸图网图片
python爬虫爬取彼岸图网图片话不多说,直接上代码! import requests from PIL import Image from io import BytesIO import re ...
python爬虫图片实例-Python爬虫爬取煎蛋网图片代码实例
这篇文章主要介绍了Python爬虫爬取煎蛋网图片代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下今天,试着爬取了煎蛋网的图片. 用到的包: ...
Python爬虫爬取煎蛋网图片代码实例
这篇文章主要介绍了Python爬虫爬取煎蛋网图片代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下今天,试着爬取了煎蛋网的图片. 用到的包: ...
把url地址复制到粘贴板上_写个简单的python爬虫爬取堆糖上漂亮的小姐姐
简单的爬虫入门实战最近刚学了python的爬虫,刚好可以用来爬取漂亮的图片作为壁纸,网上美图网站有很多,比如:花瓣,堆糖.它们请求图片数据的方式差不多类似,都是通过用户不断下滑加载新的图片,这种请求 ...
使用python批量爬取豆瓣书单图片
# 引入OS库 import os #引入我们的requests库 import requests #引入我们的pyquery库 from pyquery import PyQuery as pq # ...
python爬图代码实例_Python爬虫爬取煎蛋网图片代码实例
这篇文章主要介绍了Python爬虫爬取煎蛋网图片代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下今天,试着爬取了煎蛋网的图片. 用到的包: ...
用Python爬取彼岸图网图片
用Python爬取彼岸图网图片 *使用了四个模块 import time import requests from lxml import etree import os 没有的话自行百度安装. ...
python 批量爬取网易云音乐，java解密
每天一点点,记录学习 python 批量爬取网易云音乐网易云音乐,排行榜,右键,显示网页源代码,并不能找到任何一首歌的id,是因为java加密了随便找一首id为1374061038的歌,在网页源代 ...
利用python爬取qq个性网图片
利用python爬取qq个性网图片网站头像布局大同小异,稍改代码即可爬取想要的头像. 不多bb,上代码. import requests from parsel import Selector im ...

Python批量爬取堆糖网图片

Python批量爬取堆糖网图片相关推荐

最新文章

热门文章