Python爬虫对json数据解析爬取
使用工具
PyCharm 2018.2.3
Anaconda Navigator
Python 3.6
解析目标
[{"导航鸭 ♪(^∀^●)ノ": [{"name": "Bilibili","href": "https://www.bilibili.com/","desc": "哔哩哔哩 (゜-゜)つロ 干杯~","logo": "https://tva1.sinaimg.cn/crop.0.0.1024.1024.180/68318509jw8f3sh9uz4ukj20sg0sggnf.jpg"},{"name": "腾讯云","href": "https://cloud.tencent.com/","desc": "深圳市腾讯计算机系统有限公司","logo": "https://tvax4.sinaimg.cn/crop.1.5.195.195.180/005EbuQTly8fran1nvvfuj305k05kt8n.jpg"},{"name": "OSCHINA","href": "https://www.oschina.net/","desc": "全国最大的同性交友社区","logo": "https://tva4.sinaimg.cn/crop.0.0.80.80.80/5375acf5gw1dtaou6dgqwj.jpg"},{"name": "网易云课堂","href": "https://study.163.com/","desc": "我的职业课堂","logo": "https://tva1.sinaimg.cn/crop.0.0.200.200.180/ba94de6bjw1eldy8chcy0j205k05kq2r.jpg"}]}
]
代码示例
content_dict = json.loads(resp) # 将解析目标字符串类型转化成字典类型
# print(content_dict, type(content_dict)) # 打印内容
for content in content_dict:# print(content) # 打印列表中的内容for key, value in content.items(): # 取出python在字典嵌套的列表# print(key, value) # 取出 key和 对应的 value# print(value)# for values in value: # 遍历列表 中所有的 字典# print(values)# for values in value:# print(values['name']) # 获取所有name 对应的 value值for values in value:print(values['logo']) # 获取所有logo 对应的 value值
Python爬虫对json数据解析爬取相关推荐
- python爬虫之股票数据定向爬取
python爬虫之股票数据定向爬取 功能描述 目标:获取上交所和深交所所有股票的名称和交易的信息 输出:保存到文件中 技术路线:requests-bs4-re 前期分析 选取原则:股票的信息静态存在H ...
- 通过对json数据解析爬取虎牙直播数据并存入csv文件
学习了Python语言程序设计和Python网络爬虫与信息提取,需要找些网站来练练手,于是在网上找了些别人爬取的网站,最终选择了虎牙直播平台进行爬取,并为后续数据分析存储数据. 首先打开虎牙直播平台, ...
- python爬今日头条组图_(python爬虫之)ajax解析爬取今日头条组图并下载
首先吐槽一波csdn配色真直男,囧 此次任务需要注意的是: 用request.get方法的时候要加cookie, 网页源代码也改动了,详情页进入后不是一个json数据包,是一个html文档. 以及其它 ...
- python爬虫实现豆瓣数据的爬取
本文利用urllib在python3.7的环境下实现豆瓣页面的爬取! 用到的包有urllib与re两个模块,具体实现如下! import urllib.request import re import ...
- python爬虫微博粉丝数据_Scrapy 爬取新浪微博数据分析男女粉丝数量
通过之前爬取新浪微博发现,无论通过http://m.weibo.cn这里,还是http://weibo.cn这里,都没办法获取全部粉丝数据 那如果我想分析一个明星的男女粉丝数据怎么办,比如想知道某明星 ...
- python爬取网页json数据_python爬取json数据库
手把手教你使用Python抓取QQ音乐数据(第一弹) [一.项目目标] 获取 QQ 音乐指定歌手单曲排行指定页数的歌曲的歌名.专辑名.播放链接. 由浅入深,层层递进,非常适合刚入门的同学练手. [二. ...
- Python 爬虫实战,模拟登陆爬取数据
Python 爬虫实战,模拟登陆爬取数据 从0记录爬取某网站上的资源连接: 模拟登陆 爬取数据 保存到本地 结果演示: 源网站展示: 爬到的本地文件展示: 环境准备: python环境安装 略 安装r ...
- python爬虫入门练习:BeautifulSoup爬取猫眼电影TOP100排行榜,pandas保存本地excel文件
传送门:[python爬虫入门练习]正则表达式爬取猫眼电影TOP100排行榜,openpyxl保存本地excel文件 对于上文使用的正则表达式匹配网页内容,的确是有些许麻烦,替换出现任何的差错都会导致 ...
- python爬虫 - 起点女生榜单爬取 - 1
python爬虫 - 起点女生榜单爬取 最近一直在追庆余年,顺带瞄了一眼小说,真真是精彩(虽然因为范闲多妻的设定接受不了就放弃了). 说来说去,还是钟爱女频的修仙小说,所以就想爬一下起点女生网 ...
最新文章
- 清华发布《AI芯片技术白皮书》:新计算范式,挑战冯诺依曼、CMOS瓶颈
- supermap iobect .net 7.1.2 图例的拆分
- 今天看到这篇新闻之后,决定休息一下咯
- 猎豹产品经理:「全球化产品」应该要避开的几个坑
- notepadpython插件_Notepad++插件Emmet和Python Script的安装
- ECshop 数据库表结构
- css 一侧是三角形的矩形_5种具有CSS形状和滤镜的精美图像效果
- 《金色梦乡》金句摘抄(四)
- 信息学奥赛C++语言:三位数的求和
- v-for和v-if同时使用(案例分析:循环最新的前14条数据显示) - 踩坑篇
- java注释修改_java – 使用注释修改方法
- cv2 imread函数 python_opencv-python库基础操作(一)
- HashMap的工作原理及其相关的知识点
- 软件可行性研究报告模板
- 计算机boot进入u盘启动,BIOS中设置U盘启动的几种方法
- 缓解眼睛疲劳,护眼调节色温软件推荐
- nuxt整合vue-pdf插件和使用createLoadingTask方法进行分页
- 《UNIX/LINUX系统管理I》课程学习总结
- Win10子系统Ubuntu安装Thingworx8.5--1. WSL Ubuntu 安装
- AST混淆实战|仿obfuscator混淆控制流平坦化(超详细版)