Spark
江小黑G
这个作者很懒,什么都没留下…
展开
-
解决spark运行时控制台打印冗杂的INFO(屏蔽掉无用的INFO)
今天在spark和hive整合完后启动SparkSql的时候控制台打印出了好多冗余的信息看起来特别不爽就一个 show databases; 却打印出来这么多信息,让我着实不大容易找到我想要的信息呀解决方案:1. 进入$SPARK_HOME/conf目录下,拷贝一个log4j.properties.template,命名为log4j.properties修改成功后打印 show...原创 2019-06-13 20:27:53 · 3926 阅读 · 5 评论 -
spark-sql 中不能使用hive创建表,报/user/hive/warehouse is not a directory or unable to create one错误
spark-sql 中不能使用hive创建表,报/user/hive/warehouse is not a directory or unable to create one 错误2.方案 把$HIVE_HOME/conf/hive-site.xml复制到$SPARK_HOME/conf/下 在$SPARK_HOME/conf/hive-site.xml修改hive.met...原创 2019-06-13 21:40:43 · 778 阅读 · 0 评论