#集群启动spark-shell(指定了集群的参数)–集群主机url --核心数 --使用内存 --运行程序 --路径
/opt/spark/bin/spark-shell --master spark://master1:7077 --executor-memory 512m
Spark集群中运行.py文件命令:
/opt/spark/bin/spark-submit --master spark://master1:7077 --executor-memory 512m
–total-executor-cores 2 /data/demo01.py