spark
@小虎�
这个作者很懒,什么都没留下…
展开
-
hive启动报错
必须先启动metastore 服务hive --service metastore &原创 2020-02-26 22:43:38 · 604 阅读 · 0 评论 -
spark启动报错,记录下
之前都不会有问题的,今天启动就报错了,master起来了worker没起来好了。 不是端口号的问题这个IP必须是127.0.0.1我指定的是master7就会报上面哪个错...原创 2020-02-26 22:39:40 · 155 阅读 · 0 评论 -
spark2.4.4安装
local start up:./pyspark -c spark.driver.bindAddress=127.0.0.1vim ./conf/spark-env.shexport SPARK_MASTER_HOST=192.168.8.150export SPARK_LOCAL_IP=192.168.8.150启动:./sbin/start-master.sh...原创 2019-11-24 18:30:35 · 419 阅读 · 0 评论 -
spark执行命令
本地模式:./run-example SparkPi 10 —master local[2]集群模式./spark-submit —class org.apache.spark.examples.SparkPi —master spark://master:7077 ../example/jars/spark-example-2.4.jar集群spark on yarn 集群./sp...原创 2019-10-03 18:04:57 · 401 阅读 · 0 评论