Bash:限制并发作业的数量?

标签 bash shell concurrency

<分区>

有没有简单的方法来限制 bash 中的并发作业数?我的意思是当有超过 n 个并发作业在后台运行时,让 & 阻塞。

我知道我可以用 ps | 实现这个grep 风格的技巧,但有更简单的方法吗?

最佳答案

如果你安装了 GNU Parallel http://www.gnu.org/software/parallel/,你可以这样做:

parallel gzip ::: *.log

这将在每个 CPU 核心运行一个 gzip,直到所有日志文件都被 gzip。

如果它是更大循环的一部分,您可以使用 sem 代替:

for i in *.log ; do
    echo $i Do more stuff here
    sem -j+0 gzip $i ";" echo done
done
sem --wait

它会做同样的事情,但让您有机会为每个文件做更多的事情。

如果 GNU Parallel 没有为您的发行版打包,您可以简单地通过以下方式安装 GNU Parallel:

$ (wget -O - pi.dk/3 || lynx -source pi.dk/3 || curl pi.dk/3/ || \
   fetch -o - http://pi.dk/3 ) > install.sh
$ sha1sum install.sh | grep 883c667e01eed62f975ad28b6d50e22a
12345678 883c667e 01eed62f 975ad28b 6d50e22a
$ md5sum install.sh | grep cc21b4c943fd03e93ae1ae49e28573c0
cc21b4c9 43fd03e9 3ae1ae49 e28573c0
$ sha512sum install.sh | grep da012ec113b49a54e705f86d51e784ebced224fdf
79945d9d 250b42a4 2067bb00 99da012e c113b49a 54e705f8 6d51e784 ebced224
fdff3f52 ca588d64 e75f6033 61bd543f d631f592 2f87ceb2 ab034149 6df84a35
$ bash install.sh

如果无法全局安装,它将下载、检查签名并进行个人安装。

观看 GNU Parallel 的介绍视频以了解更多信息: https://www.youtube.com/playlist?list=PL284C9FF2488BC6D1

关于Bash:限制并发作业的数量?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/1537956/

相关文章:

c - fclose 似乎不能在 C 中工作

linux - 有什么方法可以在 shell 脚本中接受没有定界符的特殊字符?

c++ - 为什么现代 C++ 库不支持优先线程?

c# - 没有等待时删除信号量

linux - 如何找到文件中最低值的位置?

bash - 在 shell 中快速比较 2 个大文本文件?

linux - Grep 用户输入以查找号码

java - 在我从 Java 中的方法返回之前需要等待异步 api 回调

bash - `-rw-r--r--@` 中的 @ 在 `ls -l` 输出中意味着什么?

bash - gnu parallel 并行化一个for循环