Dumbo默认设置了一个很小的内存上限
如果不做修改的话貌似很小的文件就会报 Memory Error
加上这个参数就OK啦,来1个G吧
dumbo start test.py -input $input -output $output -memlimit 1000000000
Dumbo默认设置了一个很小的内存上限
如果不做修改的话貌似很小的文件就会报 Memory Error
加上这个参数就OK啦,来1个G吧
dumbo start test.py -input $input -output $output -memlimit 1000000000