最近使用HiBench基准测试工具测试Spark性能。
但每当启动测试过程后不救,HiBench就提示错误:
WARN scheduler.TaskSchedulerImpl: Initial job has not accepted any resources; check your cluster UI to ensure that workers are registered and have sufficient resources
无论是使用哪个HiBench workload,都是这样,测试无法进行。
网上一通查之后,说一般是两个原因:
- 在spark-env.sh配置文件中,SPARK_MASTER_IP地址没有配对;