Azkaban 出现如下问题:
21-10-2016 16:43:55 CST ads2_new_rebate ERROR - Job run failed!
java.lang.Exception: Cannot request memory (Xms 0 kb, Xmx 0 kb) from system for job ads2_new_rebate
at azkaban.jobExecutor.ProcessJob.run(ProcessJob.java:86)
at azkaban.execapp.JobRunner.runJob(JobRunner.java:590)
at azkaban.execapp.JobRunner.run(JobRunner.java:443)
at java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511)
at java.util.concurrent.FutureTask.run(FutureTask.java:266)
at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142)
at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:617)
at java.lang.Thread.run(Thread.java:745)
出现这个问题的原因是因为 Azkaban默认的配置是不会使用 Linux cache memory 内存的,这个时候如果 free memory比较小的话,就会抛出异常。
在Linux中cache memory的作用是加快系统的执行速度
解决办法是:
https://github.com/azkaban/azkaban/issues/481