shell脚本并发
在MRI预处理pipeline串行执行非常耗时, 非常有必要将pipeline并行化. 在linux环境下, 并行计算可以有多种实现方法. 例如在shell中通过转入后台的方式, 或者用xargs多进程并发, 还可以用fifo管道实现并行, 也可以用linux环境下的一些并行计算工具, 例如parellel实现并行.
FSL并行计算
首先FSL就支持并行计算, 这个命令是fsl_sub
.
转入后台
shell的元字符&提供了在后台运行不需要键盘输入的程序的方法。输入命令后,其后紧跟&字符,该命令就会被送往到linux后台执行,而终端又可以继续输入下一个命令了。
因此,最简单的并行化方法就是:&+wait
例如如下面的代码, 串行执行大约需要10秒
#!/bin/bash
for ((i=1;i<=3;i++)); do
{
sleep 3
echo "Done"
}
done
改为下面的简单并行代码,可将运行时间压缩到3秒左右
#!/bin/bash
for ((i=1;i<=3;i++)); do
{
sleep 3
echo "Done"
}&
done
wait
备注
ubuntu如何查看内存和系统资源的使用情况, 可以使用命令:
gnome-system-monitor
弹出管理界面: