shell脚本多线程实现

shell脚本多线程实现
在使用shell 脚本时，碰到了顺序执行太慢的情况，因此考虑使用多线程方式，以提高效率。
具体做法是使用 &+wait 达到多线程的效果，下面请看对比。

顺序执行
执行3次没次等待4秒，共计耗时12秒
代码：
#/bin/bash
date
for num in seq 1 3
do
{
echo “sleep 4”
sleep 4
}
done
date
结果：
2019年 11月 20日星期三 09:40:56 CST
sleep 4
sleep 4
sleep 4
2019年 11月 20日星期三 09:41:08 CST

使用 &+wait
并行执行，共计耗时4秒
代码：
#/bin/bash
date
for num in seq 1 3
do
{
echo “sleep 4”
sleep 4
}&
done
wait
date
结果：
2019年 11月 20日星期三 09:42:44 CST
sleep 4
sleep 4
sleep 4
2019年 11月 20日星期三 09:42:48 CST
根据观察可以发现&+wait形式会让循环体内的命令全部进入后台运行，这样当处理大量事务时会有问题，所以可以根据以下几种方式实现控制每次开启的线程数量

多层for 循环
共计9次，发3个线程，等待4秒，共计耗时12秒
代码：
#/bin/bash
date
for num2 in seq 1 3
do
{
for num in seq 1 3
do
{
echo “sleep 4”
sleep 4
}&
done
wait
}
done
date
结果：
2019年 11月 20日星期三 09:47:23 CST
sleep 4
sleep 4
sleep 4
sleep 4
sleep 4
sleep 4
sleep 4
sleep 4
sleep 4
2019年 11月 20日星期三 09:47:35 CST

使用xargs -P 并发
共计9次，发3个线程，等待4秒，共计耗时12秒
代码：
#/bin/bash
all_num=9
thread_num=3

date

seq 1 ${all_num} | xargs -n 1 -I {} -P ${thread_num} sh -c “sleep 4;echo {}”

date
结果：
2019年 11月 20日星期三 09:51:03 CST
1
3
2
4
5
6
8
9
7
2019年 11月 20日星期三 09:51:15 CST

以上就是我总结的shell 并行方式。还有使用GNU parallel命令实现并发的方式，因为测试环境没有改命令，故没做测试，待测试环境有之后会补全。

shell脚本多线程实现相关推荐

caj文档批量转换为pdf（shell脚本多线程）
摘要最近看的论文有些多,但知网上的 caj 文档又卡又难做笔记,遂写了一个 caj 文档批量转换为 pdf 的 shell 脚本. caj2pdf 安装 caj2pdf 命令行工具 github 源 ...
shell脚本多线程
function thread_func() {# 调用哪个函数执行多线程executed_func=$1[[ -z ${executed_func} ]] && error_exit ...
linux脚本多线程,Shell多线程操作及线程数控制实例
前言在业务开发过程中,经常会在后台写一些shell脚本处理数据,但估计很多人不知道shell脚本也可以支持多线程,而且非常简单.本篇文章主要就是介绍shell实现多进程以及进程数量控制. 需求为了 ...
用php写shell,php与shell实现多线程的简单例子
php本身不支持多线程,但apache和linux是支持的,有了lamp与lnmp这样的绝佳组合,再有了shell的鼎力相助,在php中实现多线程就不再那么困难了. 有如下的php代码,每次循环sle ...
Linux命令行与Shell脚本编程大全读书笔记
Linux内核4大主要功能: 内存管理进程管理设备管理文件系统管理 Linux系统启动的进程和脚本管理 1./etc/inittab 管理系统开机时会自动启动的进程 2./etc/init. ...
linux shell编程多线程和wait命令学习
http://blog.csdn.net/shuanghujushi/article/details/38186303 最近在使用shell做一些部署工作,在使用过程中,效率一直不高.想提高效率,经过 ...
linux 定时执行搅拌,Linux上定时shell脚本
本文主要介绍在Linux系统上部署定时器,定时执行shell脚本,通过脚本执行sql文件 sql文件 -- 创建表 create table if not exists iot_test.iot_ta ...
shell脚本和常用命令
什么是脚本? 脚本简单地说就是一条条的文字命令(一些指令的堆积),这些文字命令是可以看到的(如可以用记事本打开查看.编辑). 常见的脚本: JavaScript(JS,前端),VBScript, AS ...
Shell脚本中的并发（转）
转自http://blog.csdn.net/wangtaoking1/article/details/9838571 主要记录一下Shell脚本中的命令的并发和串行执行. 默认的情况下,Shell脚 ...

shell脚本多线程实现

shell脚本多线程实现相关推荐

最新文章

热门文章