使用Python遍历文件夹下文件寻找关键词

前言

最近手头的一个小需求，正好在学习Python就使用Python脚本来制作，如下~
我的脚本都是我经过测试可用的，如有问题，欢迎各位大佬提出，小白一定积极改进，感谢

需求

1.获得一个tar包，放到指定路径解压
2.对解压后的文件夹进行遍历，找出.cpp文件
3.在.cpp文件中，查找是否存在指定关键词

完成以上3点后，可以根据需求不同更改脚本，如寻找不同的文件、增删关键词、对存在关键词的文件进行后续操作。

脚本

import os
import sys
import tarfile
import shutildef filelist_Sizer(path,sizer1,sizer2,keyword):dirlist = []filelist = []for dirpath, dirnames, filenames in os.walk(path):for name in filenames:dirlist.append(os.path.join(dirpath,name))for file in dirlist:if file.endswith(key2):with open(file,'r',encoding='utf-8') as fr:for key in keyword:if key in fr.read():filelist.append(file)return filelistdef uncompress(dstpath,filepath):filename=os.path.basename(filepath)dstpath = dstpath + '/' + filenameshutil.copyfile(filepath,dstpath)os.chdir(os.path.dirname(dstpath))tar=tarfile.open(filename,'r')tar.extractall()tar.close()key1='.cpp'
#key2='.c'
key2='.sh'
keyword=[]
keyword.append('if')
keyword.append('and')#filepath = sys.argv[1] # 也可以进行传参的方式，这里指定路径进行测试
filepath = '/scratch/ywang/learn/python/tarfile/test.tar.gz'
dstpath = '/tools/workspace'
uncompress(dstpath,filepath)filelist=filelist_Sizer(dstpath,key1,key2,keyword)
print(filelist)if len(filelist) == 0:finishflag = Trueos.popen(f'rm -rf {dstpath}/*')
else:finishflag = Falseprint('There are %s files containing keywords, please check the following path: %s !!' %(len(filelist),dstpath))

分析

filelist_Sizer 函数：筛选文件格式，并对符合条件的文件，寻找关键词
uncompress 函数：解压该文件，并将文件复制到工作路径进行后续操作

对序列keyword进行增删即可操作关键词

finishflag 为后续操作铺垫，比如我打算后续结合jenkins，寻出关键词的则以失败退出本次任务

后续

我已经接入Jenkins
可将脚本最后的一部分内容更改为

if len(filelist) == 0:finishflag = Trueos.popen(f'rm -rf {dstpath}/*')print('The traversal check has passed')sys.exit(0)
else:finishflag = Falseprint('There are %s files containing keywords, please check the following path: %s !!' %(len(filelist),dstpath))print(filelist)sys.exit(1)

如图所示，即可在jenkins中也是shell中调用该脚本，并为当存在关键字时，jenkins以失败退出，否则继续下面的Build操作。

这个方法，我个人是不推荐Leader的，早前就建议过，我感觉遍历查关键字实在浪费时间，不过leader执意要求，就当作学习了，正好在学习python，就用了python来实现，而没有使用shell
平时工作中有能够使用脚本实现的工作，我都会尽量制作，当作学习和熟练使用脚本~
加油！

使用Python遍历文件夹下文件寻找关键词相关推荐

python观察日志(part18)--遍历文件夹下文件并判断后缀
学习笔记,仅供参考 import ospath = r"F:\MyStudio\PythonStudio\goatbishop.project01\MyNewWork" fileN ...
java读取文件夹下的所有txt文件,java读取文件夹下文件及txt内容
public class PositionController { // 读取txt内容 public static String txt2String(File file) { StringBuil ...
实时监测文件夹且根据条件自动删除指定文件夹下文件
一.需求说明当我们的项目开发完成部署到生产环境使用后,为了便于后续的运维工作(对问题及时排查和解决)在项目中编写了一些关于对异常情况或者实时数据自动生成对应的日志文件等内容,但是随着时间的流逝,这些 ...
bat批处理修改文件夹下文件名字
bat批处理修改文件夹下文件名字业务场景有时候我们经常会遇到需要批量处理一些文本或者文件名称的问题,批量文本的处理可以使用notepad++ 里面的列编辑,或者批量替换字符串即可.假如有这样一个要 ...
Linux统计某文件夹下文件、文件夹的个数
统计某文件夹下文件的个数 ls -l |grep "^-"|wc -l 统计某文件夹下目录的个数 ls -l |grep "^d"|wc -l 统计文件夹下文件 ...
Linux下查看文件夹下文件个数
统计某文件夹下文件的个数 ls -l |grep "^-"|wc -l 统计某文件夹下目录的个数 ls -l |grep "^d"|wc -l 统计文件夹下文件 ...
Centos 统计文件夹下文件和文件夹的个数
运营管理中经常会碰到关于文件统计的需求,近期在做系统迁移,正好做个备忘. 关键词: d : directory - : 一般文件以下命令在需要统计的目录下进行,如: # cd 目标文件夹统计 ...
linux: 批量修改文件夹及文件夹下文件的名字
假如我有一个文件夹,文件夹下面有一些文件,如下所示: Gideon/gideon_lisha/Gideon_samuel/Gideon_nathan.xml Gideon/lisha_gideon/G ...
linux根目录数量限制,windows,linux文件夹下文件上限最大个数
1.FAT16文件系统, 可以保存的文件体积最大值是 4 GB - 1 byte (2^32 bytes - 1 byte): 卷的最大体积是4GB:每个卷上最多可以保存的文件数量是65,536个 ( ...
Git无法添加文件夹下文件
git rm --cached directorygit add directory 参考 git 无法添加文件夹下文件

使用Python遍历文件夹下文件寻找关键词

前言

需求

脚本

分析

后续

使用Python遍历文件夹下文件寻找关键词相关推荐

最新文章

热门文章