spark
@小虎�
这个作者很懒,什么都没留下…
展开
-
hive启动报错
必须先启动metastore 服务 hive --service metastore &原创 2020-02-26 22:43:38 · 584 阅读 · 0 评论 -
spark启动报错,记录下
之前都不会有问题的,今天启动就报错了,master起来了worker没起来 好了。 不是端口号的问题 这个IP必须是127.0.0.1 我指定的是master7就会报上面哪个错 ...原创 2020-02-26 22:39:40 · 137 阅读 · 0 评论 -
spark2.4.4安装
local start up: ./pyspark -c spark.driver.bindAddress=127.0.0.1 vim ./conf/spark-env.sh export SPARK_MASTER_HOST=192.168.8.150 export SPARK_LOCAL_IP=192.168.8.150 启动: ./sbin/start-master.sh ...原创 2019-11-24 18:30:35 · 397 阅读 · 0 评论 -
spark执行命令
本地模式: ./run-example SparkPi 10 —master local[2] 集群模式 ./spark-submit —class org.apache.spark.examples.SparkPi —master spark://master:7077 ../example/jars/spark-example-2.4.jar 集群spark on yarn 集群 ./sp...原创 2019-10-03 18:04:57 · 379 阅读 · 0 评论