删除目录下大量小文件和清空大文件

其中--delete-before    接收者在传输之前进行删除操作
可以用来清空目录或文件，如下：
1、先建立一个空目录
mkdir /data/blank
2、用rsync删除目标目录
rsync --delete-before -d /data/blank/ /var/spool/clientmqueue/
这样目标目录很快就被清空了

又假如你有一些特别大的文件要删除，比如nohup.out这样的实时更新的文件，动辄都是几十个G上百G的，也可

以用rsync来清空大文件，而且效率比较高
1、创建空文件
touch /data/blank.txt
2、用rsync清空文件
rsync -a --delete-before --progress --stats /root/blank.txt /root/nohup.out

转载于:https://www.cnblogs.com/executive-1314/p/11105179.html

删除目录下大量小文件和清空大文件相关推荐

Java8环境下使用restTemplate单/多线程下载大文件和小文件
Java8环境下使用restTemplate单/多线程下载大文件和小文件 0. 准备工作 1. 简单的下载文件 2. 单线程大文件下载 3. 多线程下载 0. 准备工作下面使用的restTempla ...
linux日志 centos7日志文件过大清空大文件 tomcat日志过大 catalina.out等
清空大文件 cat /dev/null > logfile echo "" > catalina.out 一基础 # 脚本 #!/bin/bash timedatec ...
hive与spark合并小文件，将大文件打碎成小文件
场景一:将小文件合并成大文件. mro_hour_test表每个分区有几千个1m未压缩小文件, 以下语句是将几千个文件在输入时(map阶段)合并成150M一个的文件,插入到mro_hour_test_ ...
Linux_Shell脚本 + 配置文件：按照不同文件类型合并文件，小文件合并成大文件
需求概述某项业务中,我方通过文件接口与上游系统进行数据交互,上游系统通过ftp的方式推送接口数据文件到指定目录,我方通过sqlldr的方式入库并处理接口数据. 为保证接口数据的一致性,我方每天会将前 ...
win7文件传输服务器,大文件传输,教您大文件如何快速传输
小伙伴们,你们传输大文件给别人的时候是怎么操作的呢?小编我这儿有一种可以快速传输大文件的方法,小伙伴们有兴趣了解一下吗?有的话那现在就六和小编一起去看看吧~ 我们在使用电脑的时候,经常会遇到需要传输大 ...
html大文件传输,socket大文件传输
遇到了在c#中socket如何实现大文件传输接收端 private void Receive(Socket socket) { NetworkStream ns = new NetworkStrea ...
如何快速传输大文件，介绍大文件快速方法
现在,企业比以往任何时候都面临着一个重大挑战:需要一个快速共享文件的解决方案.但是,并非所有快速文件传输解决方案都以相同的速度传输文件.文件大小.端点位置.路径.设备.防火墙.网络系统和加密需求都会限 ...
MapReduce将小文件合并成大文件，并设置每个切片的大小的案例
测试代码: package cn.toto.bigdata.combinefile;import java.io.IOException;import org.apache.hadoop.conf.C ...
c语言拆分文件,linux 将一个大文件分割成小的碎片文件命令：csplit
csplit命令用于将一个大文件分割成小的碎片,并且将分割后的每个碎片保存成一个文件.碎片文件的命名类似"xx00","xx01".csplit命令是split ...

删除目录下大量小文件和清空大文件

删除目录下大量小文件和清空大文件相关推荐

最新文章

热门文章