R语言快速读取数据方法

我们使用大小为2.2G的一个CSV文件。

一、data.table包下的fread（各种帖子均说此方法最快，我们来比较下）

library(data.table)
start <- Sys.time()
dtc <- fread("C:/Users/10530/Desktop/DTc/DtcDrugTargetInteractions.csv", sep = ",", stringsAsFactors = F, na.strings = "", data.table = T)
end <- Sys.time()
print(end-start)

fread还会有读取进度条, 运行时间1.423824 分

二、read.方法（这里我们以read.csv函数为例）

start <- Sys.time()
dtc <- read.csv("C:/Users/10530/Desktop/DTc/DtcDrugTargetInteractions.csv", sep = ",", stringsAsFactors = F, na.strings = "")
end <- Sys.time()
print(end-start)

运行时间2.003878 分

三、有人提到，保存为Rdata之后，在再次导入速度会快很多，我们试试

save(dtc, file = "dtc.Rdata")
start <- Sys.time()
load("dtc.Rdata")
end <- Sys.time()
print(end-start)

运行时间6.042526 秒

总结，fread确实是初始导入数据最快的方法，不过在导入后的数据，若以.Rdata文件储存，再次导入时，大大节省时间。另外，fread什么都好，就是不能读取excel数据文件。

END

R语言快速读取数据方法相关推荐

如何在R语言中读取数据
读取数据有以下几种方式: 1.最常用的是采用读取表格数据的函数 read.table()以及read.csv()..这些函数读取一种以行列的格式存储数据的文本文件,然后在R中返回一个数据框. 2.re ...
R语言循环读取数据文件循环读取csv tsv xlsx数据
读取数据,XLSX 或者 TSV 或者 CSV [1]先读取一个试下,确认能正确读取进去下面三种格式提供参考 data <- read_excel("C:/XXX/1.xlsx&qu ...
R语言-批量读取数据文件以及提取字符串中的数字
#第一部分 #先将当前文件夹下的所有以csv结尾的文件名读进来 filelist <- list.files(pattern=".*.csv") #文件个数 m<-le ...
R语言在读取数据的时候自动加上X. 检查列名的有效性
最近在用R代码进行长宽数据转换的时候出现了X.问题,经过一番搜索才发现是R会检查列名的有效性. 使用read.Table或者read.csv系列函数的时候有一个参数check.names参数,默认为T ...
掌握R语言文件读取方法
目标掌握 R语言文件读取方法学习笔记 utils包内Date Input用法 base包内readLines用法 stringi包内stri_read_lines xlsx包内Date Input ...
R语言进行dataframe数据内连接（Inner join）：使用R原生方法、data.table、dplyr等方案
R语言进行dataframe数据内连接(Inner join):使用R原生方法.data.table.dplyr等方案目录 R语言进行dataframe数据内连接(Inner join):使用R原生 ...
R语言进行dataframe数据左连接（Left join）：使用R原生方法、data.table、dplyr等方案
R语言进行dataframe数据左连接(Left join):使用R原生方法.data.table.dplyr等方案目录 R语言进行dataframe数据左连接(Left join):使用R原生方法 ...
R语言中读取xlsx文件的方法
R语言中读取xlsx文件的方法安装包 install.packages("openxlsx") library(openxlsx) 文件名+sheet的序号 data<- ...
R语言中读取excel数据的常用方式有哪些？
R语言中读取excel数据的常用方式有哪些? 目录 R语言中读取excel数据的常用方式有哪些? R语言是解决什么问题的? R语言中读取excel数据的常用方式有哪些? R语言是解决什么问题的? R ...

R语言快速读取数据方法

一、data.table包下的fread（各种帖子均说此方法最快，我们来比较下）

二、read.方法（这里我们以read.csv函数为例）

三、有人提到，保存为Rdata之后，在再次导入速度会快很多，我们试试

总结，fread确实是初始导入数据最快的方法，不过在导入后的数据，若以.Rdata文件储存，再次导入时，大大节省时间。另外，fread什么都好，就是不能读取excel数据文件。

END

R语言快速读取数据方法相关推荐

最新文章

热门文章