HDFS查看文件大小以及统计总和

查看文件夹下各个目录的总大小（兆或者是G）：hdfs dfs -du -h /flumedfsfs_cluster/c_wechat_mpdfsfsffse/

查看每个文件大小（默认是Byte）hadoop fs -du /datsdsfsda/servicfsdfsdfse_data/sdfsdd/fdsfsdfsd/c_wedfsfsdfschat_mpe/

查看的每个文件大小（计算的是G单位的）hadoop fs -du /name/service_fsdfsdfsddata/hadoopfdsfs_dfsfsdservie/flume_cfsdfsdfsdluster/wefsdfsfsdfsdchat_log/20* | awk '{sum += $1};END {print sum/1024/1024/1024}'

AWK案例：

在Shell中，我们可以用awk实现按列求和的功能，非常简单。看下面的例子：
1.简单的按列求和

[linux@test /tmp]$ cat test
123.52
125.54
126.36
[linux@test /tmp]$ awk '{sum += $1};END {print sum}' test
375.42

2.对符合某些条件的行，按列求和

[linux@test /tmp]$ cat test
aaa 123.52
bbb 125.54
aaa 123.52
aaa 123.52
ccc 126.36

对文件test中第一列为aaa的行求和

[linux@test /tmp]$ awk '/aaa/ {sum += $2};END {print sum}' test
370.56

HDFS查看文件大小以及统计总和相关推荐

du 查看文件大小命令
du -ah --max-depth=1 这个是我想要的结果 a表示显示目录下所有的文件和文件夹(不含子目录),h表示以人类能看懂的方式,max-depth表示目录的深度. du -sh 目 ...
linux - linux查看磁盘空间/查看文件分区(挂载点)/查看文件大小
目录 1.查看磁盘剩余空间大小 2.查看文件夹/文件分区(挂载点) 3.查看文件夹/文件大小 4.列出文件夹内所有文件大小 5.列出指定文件.统计指定文件数量 1.查看磁盘剩余空间大小 df -lh ...
linux中文件大小10,Linux之查看文件大小
1.查看当前文件大小du -sh ./ du [-abcDhHklmsSx] [-L ][-X ][--block-size][--exclude=] [--max-depth=][--help][- ...
Linux Command du 查看文件大小
Linux Command du 查看文件大小文章目录 Linux Command du 查看文件大小 1. 简介 2. 格式 3. 参数 4. 实例 4.1 显示目录或者文件所占空间 4.2 显示 ...
hdfs查看目录文件的大小 hdfs dfs -du -s -h /
hdfs查看目录文件的大小 1.第一种方式:查看当前目录下的各级目录分别大小 hdfs dfs -du -h /user/hive/warehouse/#查看结果 19.7 K 59.0 K /us ...
HDFS查看文件的前几行-后几行-行数
随机返回指定行数的样本数据 hadoop fs -cat /test/gonganbu/scene_analysis_suggestion/* | shuf -n 5 返回前几行的样本数据 hadoo ...
查看文件大小du -sh ./ ll -h
查看文件夹总大小: [root@iZ9488z4qfcZ sztoyon]# du -sh ./ 974M ./ [root@iZ9488z4qfcZ sztoyon]# ll -h total ...
ftp服务器上查看文件大小,ftp服务器上查看文件大小
ftp服务器上查看文件大小内容精选换一换当用户拥有Linux操作系统的外部镜像文件,且类型及操作系统符合外部镜像文件格式和操作系统类型要求时,用户可以将外部镜像文件创建为Linux系统盘镜像. ...
linux显示总文件大小命令,linux查看文件大小命令
linux系统不像windows系统,查看文件可以随时点击右键,linux中碳钢命令来查看文件大小,下面由学习啦小编为大家整理了linux查看文件命令的相关知识,希望对大家有帮助! linux查看文件 ...

HDFS查看文件大小以及统计总和

HDFS查看文件大小以及统计总和相关推荐

最新文章

热门文章

HDFS查看文件大小以及统计 总和

HDFS查看文件大小以及统计 总和相关推荐

最新文章

热门文章

HDFS查看文件大小以及统计总和

HDFS查看文件大小以及统计总和相关推荐