Makefile并行执行

引言

最近在编译项目代码的时候,发现全量编译一次代码需要十分钟,加了多核编译参数之后,还会出现各种错误,导致编译失败。于是我就想改造下makefile文件,使其能够多核编译,经过改造之后,效果显著,8核编译的情况下,只要1分半,编译速度提高了7倍(为之惊奇)。

多核编译失败的原因

要实现多核编译最重要的一点就是:确定正确的依赖关系。如下Makefile文件:

all: d c b a
a: 
	# 执行一些规则
b: c
	# 执行一些规则
c: d
	# 执行一些规则
d:
	# 执行一些规则

如果直接执行make all,完全没有问题,他会依照d、c、b、a的顺序去执行各个规则。那我如果使用make all -j4会怎么样?那么就有可能是a、d先并行执行,然后再c、d顺序去执行。因为依赖关系是c依赖d,那么必须等d执行完,而b又依赖c,就得等c执行完。那么问题来了:如果a实际上要依赖b呢?必须等b执行完产出a执行时所依赖的文件。那么很明显,此时多核编译就会失败。

如何提高多核编译的效率

不要在一个目标下写多个规则或者命令,因为那样会导致他们只能是串行执行,如下:

a:
	make all -C dir1
	make all -C dir2
	make all -C dir3

上述写法就只能串行执行各个命令。改成如下方式:

DIRS = dir1 dir2 dir3
.PHONY: $(DIRS)
all: a

a: $(DIRS)

$(DIRS): %: 
	make all -C $@

此时如果执行make all -j4,就可以并行执行三条命令了。
再比如,编译生成某个库文件或者可执行文件时,千万不要写成如下方式:

app: *.cpp
	g++ -o $@ $^ -I./ 

这种情况下显然效率极低,即不利于多核编译,也不利于增量编译。正确写法应该如下:

source=$(wildcard ./*.cpp)
obj=$(patsubst %.cpp, %.o, $(source))

OBJS: $(obj)
$(obj) : %.o : %.cpp
	g++ -c $< -o $@ -I./

app: $(obj)
	g++ $^ -o $@

多核编译的情况下,会并行编译多个cpp文件,从而提高编译效率,并且增量编译也只会编译有修改的cpp文件。

  • 3
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值