加入收藏 | 设为首页 | 会员中心 | 我要投稿 李大同 (https://www.lidatong.com.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 大数据 > 正文

在Ksh和Perl中并行执行任务的最佳方法是什么?

发布时间:2020-12-15 23:26:10 所属栏目:大数据 来源:网络整理
导读:我有一个大型的C项目,我需要在没有并行make的平台上构建(比如 Linux上的make -j).服务器有6个CPU,我想手动进行并行构建. 我可以为大约300个目标文件生成这样的任务列表.我使用Makefile进行依赖性检查和增量构建: make -f Makefile obj1.o make -f Makefile
我有一个大型的C项目,我需要在没有并行make的平台上构建(比如 Linux上的make -j).服务器有6个CPU,我想手动进行并行构建.

我可以为大约300个目标文件生成这样的任务列表.我使用Makefile进行依赖性检查和增量构建:

make -f Makefile obj1.o

make -f Makefile obj2.o

make -f Makefile obj3.o

我如何并行执行这些任务,使用Ksh和Perl一次运行的任务不超过6个? (Java或Python不可用:-()

解决方法

在Perl中你应该看看 Parallel::ForkManager.你可以这样做:

my @make_obj = qw(
  obj1.o
  obj2.o
  obj3.o
  ...
);

my $fm = $pm = new Parallel::ForkManager(6);
foreach my $obj (@make_obj) {
  $fm->start and next;
  system("make -f Makefile $make_obj");
  $fm->finish();
}

(编辑:李大同)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    推荐文章
      热点阅读