文章目录

  • 引言
  • 1.pd.read_parquet

引言

小伙伴可能要问了,这是个什么玩意?pd.read_csv不行嘛?结果都是返回DataFrame。确实结果是一样的,可是加载数据的耗时相差很多。从以下对比的小例子中就可以简单的看出:

1.pd.read_parquet

pandas.read_parquet(path, engine='auto', columns=None, use_nullable_dtypes=False, **kwargs)

描述

从文件路径加载一个parquet对象,返回一个DataFrame

参数

path : str, path object or file-like object
文件路径

engine : {‘auto’, ‘pyarrow’, ‘fastparquet’}, default ‘auto’
如果为“自动”,则使用选项io.parquet.engine。
io.parquet.engine的默认行为是尝试使用“ pyarrow”,如果“ pyarrow”不可用,则退回到“ fastparquet”。

columns : list, default=None
如果不是None,则只从文件中读取这些列

use_nullable_ : dtypesbool, default False

返回

DataFrame


如果对您有帮助,麻烦点赞关注,这真的对我很重要!!!如果需要互关,请评论留言!


pandas—pandas.read_parquet相关推荐

  1. pandas pandas中stack()与unstack()函数用法

    pandas pandas中stack()与unstack()函数用法

  2. pandas pandas具体用法相关内容(三)

    pandas pandas具体用法相关内容(三) #%%import pandas as pd import numpy as np titanic_survival = pd.read_csv(&q ...

  3. 重玩python,安装pandas pandas pycharm pip一堆工具

    重玩python,安装pandas  pandas pycharm pip一堆工具 1, 安装Python,python.exe文件在 Python 目录下, 添加环境变量 2, 安装pip. pyt ...

  4. python中read table_Python Pandas pandas.read_sql_table函数方法的使用

    pandas.read_sql_table(table_name,con,schema = None,index_col = None,coerce_float = True,parse_dates ...

  5. python的read函数_Python Pandas pandas.read_sql函数方法的使用

    pandas.read_sql(sql,con,index_col = None,coerce_float = True,params = None,parse_dates = None,column ...

  6. [机器学习][基础编程][pandas]pandas基本操作

    文章目录 pandas基本数据结构 Series:通过一维数组创建 Series值的获取 Series的运算 Series缺失值检测 Series自动对齐 Series及其索引的name属性 Data ...

  7. 数分笔记整理7 - Pandas Pandas - DataFrame类型的对象 - 创建方式

    DataFrame类型 DataFrame是一个多维数据类型.因为通常使用二维数据,因此,我们可以将DataFrame理解成类似excel的表格型数据,由多列组成,每个列的类型可以不同. 因为Data ...

  8. Python pandas pandas数据写入数据库

    # 创建导包 import pymysql from pymysql.connections import Connection import pandas as pd# 连接数据库 connecti ...

  9. Py之Pandas:Python的pandas库简介、安装、使用方法详细攻略

    Py之Pandas:Python的pandas库简介.安装.使用方法详细攻略 目录 pandas库简介 pandas库安装 pandas库使用方法 1.函数使用方法 2.使用经验总结 3.绘图相关操作 ...

  10. 开启机器学习的第一课:用Pandas进行数据分析

    翻译 | AI科技大本营 参与 | 林椿眄 本课程的目的并不是要开发一门全新的机器学习或数据分析的综合入门课程,也不是想借此来取代基础教育.在线/离线课程或一些专业和书籍.我们推出本系列文章是为了让初 ...

最新文章

  1. NAND FLASH
  2. 高仿百思不得姐项目开发(粗略笔记,后期规范排版和更新)
  3. 045魔法方法:属性访问
  4. Fedora 15 安装 HP 打印机
  5. eclipse打包jar发布到linux下运行出错(java.lang.ClassNotFoundException: cmd.WordCount$MyMapper )
  6. AI(3)--- 机器学习常见的七个步骤
  7. 多元高斯分布是非参_(二)多元高斯分布与概率图条件独立性假设
  8. GIS笔记_普通tif文件转成array数组 c#
  9. 雷达信号处理基础ppt
  10. 植物研究最新进展(2021年11月)
  11. PHP 实现网页爬虫
  12. XPO 的三篇介绍文章。
  13. PO系列之 PO中使用webService
  14. iOS XCode支持低系统版本
  15. 连续被特斯拉碾压的国产车终于成功反击,五菱宏光月销超2万
  16. 全球十大半导体企业,美国独占七席
  17. 官网下载Sublime如何汉化成中文
  18. aes加密算法python语言实现_如何用Python实现AES CCM的加解密
  19. oracle查询最近一小时的数据
  20. 项目:个人博客系统 Part3 Controller层编写

热门文章

  1. C#结合VS开发WinForm学习笔记
  2. 天翼空间应用商城 App Market体验
  3. 电脑没有音频设备怎么办
  4. 把一个下拉框中的选项添加到另一个中
  5. poj 3411 Paid Roads
  6. spring-data-jpa动态条件查询
  7. 禁用AutoCAD的命令
  8. python编程快速上手
  9. Python小程序练习一之登陆接口
  10. bzoj1853幸运数字——容斥原理