如何在Bash中并行运行给定的函数？

发布时间：2020-12-15 19:06:12 所属栏目：安全来源：网络整理

导读：还有一些类似的问题，但是我的问题并不是“并行运行几个程序” – 这可以通过并行或xargs来完成。我需要并行化Bash函数。让我们想象一下这样的代码： for i in "${list[@]}"do for j in "${other[@]}" do # some processing in here - 20-30 lines of almo

还有一些类似的问题，但是我的问题并不是“并行运行几个程序” – 这可以通过并行或xargs来完成。

我需要并行化Bash函数。

让我们想象一下这样的代码：

for i in "${list[@]}"
do
    for j in "${other[@]}"
    do
    # some processing in here - 20-30 lines of almost pure bash
    done
done

一些处理需要调用外部程序。

我想运行一些(4-10)任务，每个运行不同的$ i。 $ list中的元素总数为> 500。

我知道我可以把整个j …完成循环在外部脚本，并且只是并行调用这个程序，但是可以不分割两个单独程序之间的功能吗？

编辑：请考虑 Ole’s answer。

而不是单独的脚本，您可以将代码放在单独的bash函数中。然后，您可以导出它，并通过xargs运行它：

#!/bin/bash
dowork() { 
    sleep $((RANDOM % 10 + 1))
    echo "Processing i=$1,j=$2"
}
export -f dowork

for i in "${list[@]}"
do
    for j in "${other[@]}"
    do
        printf "%s%s" "$i" "$j"
    done
done | xargs -0 -n 2 -P 4 bash -c 'dowork "$@"' --

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!