微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

如何在Bash中并行运行给定的函数?

还有一些类似的问题,但是我的问题并不是“并行运行几个程序” – 这可以通过并行或xargs来完成。

我需要并行化Bash函数

让我们想象一下这样的代码

for i in "${list[@]}"
do
    for j in "${other[@]}"
    do
    # some processing in here - 20-30 lines of almost pure bash
    done
done

一些处理需要调用外部程序。

我想运行一些(4-10)任务,每个运行不同的$ i。 $ list中的元素总数为> 500。

我知道我可以把整个j …完成循环在外部脚本,并且只是并行调用这个程序,但是可以不分割两个单独程序之间的功能吗?

编辑:请考虑 Ole’s answer

而不是单独的脚本,您可以将代码放在单独的bash函数中。然后,您可以导出它,并通过xargs运行它:

#!/bin/bash
dowork() { 
    sleep $((RANDOM % 10 + 1))
    echo "Processing i=$1,j=$2"
}
export -f dowork

for i in "${list[@]}"
do
    for j in "${other[@]}"
    do
        printf "%s\0%s\0" "$i" "$j"
    done
done | xargs -0 -n 2 -P 4 bash -c 'dowork "$@"' --

原文地址:https://www.jb51.cc/bash/387322.html

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐