read.table与readr::read

# 1. 使用read.table读取数据
system.time(read.table("/home/data/test_data", sep = "\001", quote = "", stringsAsFactors = F, comment.char = "",col.names = colNames)
)
# colNames为预先定义的列名；
# 也可以设置为 ：col.names = TRUE / FALSE#    user  system elapsed
#  67.943   0.277  68.326 # 2.使用readr::read_delim读取数据
library(readr)
system.time(read_delim("/home/data/test_data",delim = "\001", quote = "", comment = "",col_names = colNames)
)
# colNames为预先定义的列名；
# 也可以设置为 ：col.names = TRUE / FALSE# =================================| 100%  796 MB
#   user  system elapsed
# 12.790   0.245  12.947

可以看出，读取796MB的数据test_data,read.table所用时间为67.943s,而read_delim只需要12.790s;读取速度有显著的提升，大约为read.table的5倍。

read.table与readr::read_delim相关推荐

【万字长文】R语言入门学习路线与资源汇总
本篇推文就不介绍为什么需要学R了,你能打开这篇文章,说明你有学习R的想法或者正在学习R的路上. 今天简单介绍下R语言的学习路线以及R学习资源汇总. 下面涉及到的R语言书籍我打包了PDF文件,有需要的在 ...
R语言一次性读入多个csv文件实战：一次导入多个csv形成一个统一的dataframe、原生R方法、readr包、data.table
R语言一次性读入多个csv文件实战:一次导入多个csv形成一个统一的dataframe.原生R方法.readr包.data.table 目录
R语言导入、读取网络CSV数据（Read a CSV from a URL）实战：R原生read_csv、readr包、data.table
R语言导入.读取网络CSV数据(Read a CSV from a URL)实战:R原生read_csv.readr包.data.table 目录 R语言导入.读取网络CSV数据(Read a CSV ...
R语言读CSV、txt文件方式以及read.table read.csv 和readr（大数据读取包）
首先准备测试数据*(mtcars) 分别为CSV. TXT read.table 默认形式读取CSV(×)与TXT(效果理想) ① > test<-read.table("C:/ ...
R语言观察日志(part5)--利用readr和readxl包读写数据
学习笔记,仅供参考利用readr和readxl包读写数据读取数据相关函数函数包readr和readxl提供了一系列的数据读入功能,主要函数如下: #readr包read_delim(file, ...
规模数据导入高效方式︱将数据快速读入R—readr和readxl包
本文由雪晴数据网负责翻译整理,原文请参考New packages for reading data into R - fast作者David Smith.转载请注明原文链接http://www.xue ...
R语言--readr包读写数据
文章目录前言一.发现问题二.分析问题三.解决问题四.读写速度总结吐槽前言当你使出了浑身解数,read.csv和read.table还是无法读入数据时,或许可以尝试一下readr包中的 ...
IDEA中根据数据库自动生成实体类，并自定义所生成的实体类中的注解 @Table @Id @...
使用IDEA项目添加Hibernate扩展,生成实体类并配置实体类中的注解一.使用Hibernate自动生成实体类 1.在项目上右键,选择Add Framework Support找到 Hibern ...
2021年大数据Flink（三十九）：Table与SQL 总结 Flink-SQL常用算子
目录总结 Flink-SQL常用算子 SELECT WHERE DISTINCT GROUP BY UNION 和 UNION ALL JOI ...

read.table与readr::read_delim

read.table与readr::read_delim相关推荐

最新文章

热门文章