背景

Linux 下某个目录下有小文件好几万个，命名规则按日期每小时 N 个，想要过滤出指定日期的文件并添加到压缩文件中，记录下脚本化的过程如下。

正则过滤存在的问题

首先，直接进入该目录，由于文件数过多，ls 打印半天出不了结果。
其次，ls | grep命令筛选直接报错：

解决办法

网络搜索到 xargs 命令可以批量输出，调整思路如下：
1、批量输出目标目录下的文件名称到某个文件。
2、逐行读取该文件内容，并匹配指定正则。
3、将匹配正则的文件名称输出到中间文件。
4、cat 该文件内容作为 tar 命令的参数，从而导出符合条件的文件到压缩文件
具体 shell 脚本为：

echo 'start.'FILENAME=/home/201902.logcount=0#remove last filerm -f /home/test02.logrm -f /home/201902.logcd /opt/logdata/ls | xargs -n 9 > /home/201902.log# while read file line while read clname2do if [[ "$clname2" =~ data_._201902* ]]; then  echo $clname2 >> /home/test02.log  count=$(($count+1)) fidone

执行上述脚本可完成 2 月份日志数据的导出。

启示录

简单脚本，涉及到几个知识点：

统计符合条件的文件总数，shell 对变量自增的语法。
xargs 的应用。
shell 循环读取文件的语法。
正则判断语法

shell grep 变量_Shell应用：巧用xargs 轻松实现上万文件的筛选压缩相关推荐

shell grep 变量_老司机给出的关于 shell 脚本的8个建议，必收！
这八个建议,来源于键者几年来编写 shell 脚本的一些经验和教训.事实上开始写的时候还不止这几条,后来思索再三,去掉几条无关痛痒的,最后剩下八条.毫不夸张地说,每条都是精挑细选的,虽然有几点算是老生 ...
Shell环境变量以及set,env,export的区别
原文连接:http://www.linuxidc.com/Linux/2011-08/40478.htm 一.shell环境变量的分类以及set env export的区别: set:显示(设置)sh ...
linux shell 变量管道,linux下shell，变量，管道，重定向等基础知识及技巧
知识点如下: 1,关于shell编程中的变量,shell编程中的变量分为4种本地变量:只对本系统本用户自己的shell有用环境变量:对本系统的所有shell都有用用export来声明变量例 ...
linux下变量名长度,Linux中shell的变量介绍
Linux中shell的变量介绍发布时间:2020-06-24 16:20:39 来源:亿速云阅读:112 作者:元一这期内容当中的小编将会给大家带来有关Linux中shell的变量介绍,以专业 ...
linux变量符号生效规则,shell的变量功能
shell的变量功能一.什么是变量变量是bash环境中非常重要的一个内容,那什么是变量呢?简单说就是让一某一个特定字符串来代表另一个比较复杂或者是容易变动的数据. 二.变量的显示与设置:echo ...
Shell编程--变量的类型
变量的类型什么是bash变量 bash作为程序设计语言和其它高级语言一样也提供使用和定义变量的功能 name=123 echo $name 123 引用环境变量: $变量名查看变量: set | ...
shell编程-初始shell及变量
shell编程初始shell 程序语言编程 ---------------------------------- 语言自然语言:汉语.英语计算机语言:c语言.c++.(java php py ...
Linux的Bash——（二）Shell的变量
2. Shell的变量 2.1 什么是变量? 变量就是以特定的字符串代表不固定的内容变量的优点又有那些? (1) 可变性与方便性关于可变性和方便性,我相信如果有接触过至少一门编程语言就能很快Get ...
shell脚本——变量定义
变量的定义变量如何定义变量的定义规则变量名区分大小写变量名不能有特殊符号变量名不能以数字开头等号两边不能有任何空格变量的定义方式基本方式命令执行结果赋值给变量交互式定义变量(rea ...

shell grep 变量_Shell应用：巧用xargs 轻松实现上万文件的筛选压缩

背景

正则过滤存在的问题

解决办法

启示录

shell grep 变量_Shell应用：巧用xargs 轻松实现上万文件的筛选压缩相关推荐

最新文章

热门文章