HDF5数据处理(一)python
关于HDF5的学习,我也是刚刚开始,欢迎大家一起学习
(我想要在一个月内学完一本关于这个的一本书)
==========================================
HDF5是一种数据类型
可以被C,C++,JAVA,Python使用的库
可以支持EB级数据(如果不知道EB就算了)
支持切片操作
同时有:层次性分组和特征
(感觉就像是一个文件夹类型的文件)
如果是要处理多维数据或者对性能有要求的话,这个很不错
import h5py
import numpy as np
temperature = np.random.random(1024)
dt = 10.0
start_time = 1375204299
station = 15wind = np.random.random(2048)f = h5py.File("weather.hdf5")
f["/15/temperature"] = temperature
f["/15/temperature"].attrs["dt"] = 10.0
f["/15/temperature"].attrs["start_time"] = 1234566
f["/15/wind"] = wind
f["/15/wind"].attrs["start_time"] = 231231dataset = f["/15/temperature"]
for key, value in dataset.attrs.items():print("%s: %s" % (key, value))
f.close()
在pyCharm上运行没有问题
注意事项,在最后一定要加上
f.close()
否则会报错
HDF5数据处理(一)python相关推荐
- [转载] 【数据处理】 python 极速极简画图——频数(率)分布直方图
参考链接: Python | 使用XlsxWriter模块在Excel工作表中绘制面积图 说明 当我们拿到数据的时候,第一时间就是想知道数据的特点,然鹅单个的数值如平均数.中位数仍不够直观,我们更 ...
- python数据处理实例-Python数据处理numpy.median的实例讲解
numpy模块下的median作用为: 计算沿指定轴的中位数 返回数组元素的中位数 其函数接口为: median(a, axis=None, out=None, overwrite_input=Fal ...
- python数据处理实例-python数据处理实战(必看篇)
一.运行环境 1.python版本 2.7.13 博客代码均是这个版本 2.系统环境:win7 64位系统 二.需求 对杂乱文本数据进行处理 部分数据截图如下,第一个字段是原字段,后面3个是清洗出的字 ...
- python数据处理实例-Python大数据处理案例
分享 知识要点: lubridate包拆解时间 | POSIXlt 利用决策树分类,利用随机森林预测 利用对数进行fit,和exp函数还原 训练集来自Kaggle华盛顿自行车共享计划中的自行车租赁数据 ...
- python数据处理实例-Python数据预处理实例详解
Python----数据预处理代码实例 本文实例为大家分享了Python数据预处理的具体代码,供大家参考,具体内容如下 1.导入标准库 import numpy as np import matplo ...
- 【数据处理】python数据评估常用指标:ks、fpr、tpr
def cal_ks(df, col, target):"""df:数据集col:输入的特征target:好坏标记的字段名return:ks: KS值precision: ...
- 【数据处理】python变量分箱常见手法:分类型、数值型、卡方、自定义
""" 分箱逻辑:1.类别型特征: 1)类别数在5个以下,可以直接根据类别来分箱 (binning_cate) 2)类别数在5个以上,建议做降基处理,再根据降基后的类别做 ...
- 【数据处理】python数据清洗通用手法:缺失值处理
def missing_delete_var(df, threshold=None):"""df:数据集threshold:缺失率删除的阈值return :删除缺失后的数 ...
- python findall函数_Ramp;Python Data Science系列:数据处理(11)Python正则表达式re模块(三)...
前言 使用正则表达式进行匹配,可以直接调用模块级函数,如match().search().findall()等,函数第一个参数是匹配的正则表达式,第二个参数则为要匹配的字符串.也可以使用re.comp ...
最新文章
- 物理、线性、虚拟、逻辑、有效地址
- DDD CQRS架构和传统架构的优缺点比较
- keepalived高可用集群技术介绍及实战演练
- 将EditText的光标定位到字符的最后面
- [翻译]Go与C#的比较,第二篇:垃圾回收
- google 确定某点海拔高_“湘能楚天”牌变电站的威宁之旅(一)|高海拔下如何实现与茫茫雪原环境的共生?...
- oracle12537错误,ORA-12537:TNS:connection closed错误处理方法
- Python学习笔记之函数(二)
- Angular——Angular 教程
- 百度图表echart使用心得
- 三级网络技术无纸化模拟软件 (未来)教育
- 设计师提高效率必备的10大在线工具
- 【aws smart home】Aleax skill环境搭建
- java十六进制转为十进制,Java将十六进制转换为十进制
- 使用Webupload上传图片到FastDFS分布式文件系统
- Windows10使用命令行打开3389_内网渗透(实验)之域渗透深入弹shell开3389拿域控
- dnmap分布式集群扫描
- C# 读取和输出asc文件
- Numpy + Matplotlib 绘制白色画图
- PyGame|给程序插入背景音乐
热门文章
- 【机器学习基础】--感知机完全解读
- 设计模式之 - 简单工厂模式
- 苹果在GitHub上正式开源iOS内核源码
- 论文笔记之:Multiple Feature Fusion via Weighted Entropy for Visual Tracking
- 编码过程中的问题总结
- 三层交换网络的各层职责
- php header下载中文名称,PHP Header下载文件在IE文件名中文乱码问题
- mysql数据库安全配置规范_MySQL数据库安全配置规范操作
- 算法杂货铺——分类算法之贝叶斯网络(Bayesian networks)
- (转载)Python数据分析之pandas学习