用Python3Request爬取英雄联盟皮肤、单线程爬取

"""
Hero_LOL 和王者荣耀类似
"""
import requests
import re
import json
import os
import threadingdef hero(hero_name, hero_num):#统一前戳h_l = "https://ossweb-img.qq.com/images/lol/web201310/skin/big"# 逐一遍历英雄print(hero_num.__len__())num = 0  # 为了获取英雄的号码for i in hero_num:# 逐一遍历皮肤，此处假定一个英雄最多15个皮肤for sk_num in range(0, 15):  # 从第0个皮肤开始hsl = h_l + i + "00" + str(sk_num) + ".jpg"hl = requests.get(hsl)if hl.status_code == 200:filename = "LOL/" + str(hero_name[num]) + str(sk_num) + ".jpg"print("此时正在下载：" + filename+" 这是第"+str(num+1)+"个英雄")with open(filename, "wb") as f:f.write(hl.content)else:breaknum += 1def main():"""#获取全部英雄数据:return:"""#JS_urlHero_url =  "https://lol.qq.com/biz/hero/champion.js"#User-Agent伪装浏览器标识header = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.109 Safari/537.36'}#Get source code(获取源代码)response = requests.get(Hero_url,headers = header)#decode 编码为GBK，方便下方使用正则遍历response = response.content.decode("GBK")#regex（正则表达式）reg = """keys":([\s\S]*?),"data"""#预编译regex = re.compile(reg,re.IGNORECASE) #第一个参数 正则表达式 第二个参数忽略的意思，忽略大小写#findall 就是获取response内所有符合规则的数据，返回值为listresponse_s = regex.findall(response)#也就是所有符合规则的数据放到了列表里，如果只有一个，那就是list[0]response_s = response_s[0]#通过eval转换为一个dict，具体功能自己查（其实我也没大懂）res = eval(response_s)#get the keys in the dict(再转换为list)hero_num  = list(res.keys()) #Hero_number#get the values in the dict (再转换为list)hero_name = list(res.values())#Hero_name
hero(hero_name,hero_num)if __name__ == '__main__':main()

转载于:https://www.cnblogs.com/wxzbk/p/10983976.html

用Python3Request爬取英雄联盟皮肤、单线程爬取相关推荐

牛散村:python怎么爬取英雄联盟皮肤图片？爬虫实战！
相信很多小伙伴都是喜爱英雄联盟的玩家,英雄联盟的皮肤制作还是比较精美的,有收集癖好的小编打算用爬虫将官网的皮肤爬取下来.接下来就看小编怎么用python爬取英雄联盟皮肤吧!(内附python爬虫源代码 ...
python lol脚本_python 爬取英雄联盟皮肤并下载的示例
爬取结果: 爬取代码 import os import json import requests from tqdm import tqdm def lol_spider(): # 存放英雄信息 he ...
Python爬虫练习之爬取英雄联盟皮肤
毕业设计还没有弄完,但又不想弄,就先写个爬虫换换心情吧. 爬取的是英雄联盟英雄的皮肤,不过首页的url地址没有我们想要的数据,需要找到真实的url地址,就是简单的json文本,过程比较简单,步骤都写在 ...
Python 多进程、协程异步抓取英雄联盟皮肤并保存在本地
作者 | 俊欣来源 | 关于数据分析与可视化就在11月7日晚间,<英雄联盟>S11赛季全球总决赛决斗,在冰岛拉开"帷幕",同时面向全球直播.在经过了5个小时的鏖战, ...
肝了整个周末，Python多进程、协程异步抓取英雄联盟皮肤并保存在本地
就在11月7日晚间,<英雄联盟>S11赛季全球总决赛决斗,在冰岛拉开"帷幕",同时面向全球直播.在经过了5个小时的鏖战,EDG战队最终以3:2战胜来自韩国LCK赛区的D ...
python---爬取英雄联盟皮肤图片
爬LOL的皮肤高清图片的大致步骤就是用selenium去爬取英雄联盟所以英雄的皮肤的url地址,然后在用requests库去将图片下载到本地. 爬取的第一步,先去分析网站. 皮肤图片的位置在官网的资料 ...
Requests库应用实例4：网络图片的爬取与存储(以爬取英雄联盟皮肤图片为例)
网络图片的爬取与存储 1.获取爬取图片的URL 2.代码 3.批量下载lol皮肤图片完整代码 1.获取爬取图片的URL 以艾希的源计划联合为例这个图片的URL:https://game.gtimg. ...
10行代码爬取英雄联盟皮肤全套。6不6？
引言王者荣耀大家都玩过吧,没玩过的也应该听说过,作为时下最火的手机MOBA游戏,咳咳,好像跑题了.我们今天的重点是爬取王者荣耀所有英雄的所有皮肤,而且仅仅使用20行Python代码即可完成. ...
英雄联盟皮肤图片爬取
文章目录思路分析完整代码效果展示思路分析首先,进入英雄联盟的官网资料站. 通过抓包分析,我们可以得到每个英雄的ID. 随便找个英雄点开,进入详情页面. 查看页面的源代码,我们可以定位到图片的 ...
python简单实现抓取英雄联盟皮肤原画：老玩家都哭了！
写在前面: 自学py已经快两个多月了吧,作为新手,就是敢于尝试,之前有看到有人抓取王者荣耀皮肤的,但是作为一个联盟老玩家,还是想搞一个抓取联盟皮肤的,下面分享一下我自己的学习经过,如果有错误或者建议, ...

用Python3Request爬取英雄联盟皮肤、单线程爬取

用Python3Request爬取英雄联盟皮肤、单线程爬取相关推荐

最新文章

热门文章