windows安装spark出现The root scratch dir: /tmp/hive on HDFS should be writable

最新推荐文章于 2024-03-04 10:03:56 发布
最新推荐文章于 2024-03-04 10:03:56 发布
阅读量3.5k 收藏 3
点赞数 4
分类专栏： Spark

我安装的版本如下：
Scala 2.11.8
java version “1.8.0_171”
spark-2.2.0-bin-hadoop2.7
hadoop-2.7.6
另外安装了winutils到hadoop bin中*
启动spark-shell时报错，其中一个错误是说没有权限，错误如下：

The  root scratch dir: /tmp/hive on HDFS should be writable

查询后，下面这个博客的解决方案成功解决了我的问题。
解决方案的参考链接
主要是在spark/bin 下执行了如下三条语句

%HADOOP_HOME%\bin\winutils.exe ls \tmp\hive
%HADOOP_HOME%\bin\winutils.exe chmod 777 \tmp\hive
%HADOOP_HOME%\bin\winutils.exe ls \tmp\hive
bhcgdh
关注
  • 4
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
在idea里面启动spark程序链接hive出现：The root scratch dir: /tmp/hive on HDFS should be writable. Current permiss
m0_55243062的博客
02-16 1069
这个问题，已经按照网上的答案设置了相关的设置 第一：在代码中添加环境变量：System.setProperty(“HADOOP_USER_NAME”,“root”) 第二：拥有者账户执行hadoop fs -chmod -R 777 /tmp/。 但是执行代码 还是出现这个错误提示：The root scratch dir: /tmp/hive on HDFS should be writable. Current permiss ---------- 所以还是权限的问题，然后想到应该配置的问题，导致没有
Scratch素材/图形化编程角色素材分享09人物头像
05-10
Scratch是一款由麻省理工学院(MIT)设计开发的面向儿童的图形化编程工具，它通过拖拽积木式的编程语块，使孩子们能够轻松创建交互式故事、动画、游戏等项目，从而培养编程思维和创新能力。在这个"Scratch素材/图形化...
解决 The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are: rwxr-xr-x
m0_52184330的博客
11-15 4410
问题描述： spark 将数据写入到hive表时 报错： The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are: rwxr-xr-x 如下图： 原因分析： 从The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are: rwxr-xr-x 可以看出，系统要求再hdfs上用户要具备写的权
spark-shell连接异常问题
哈尔科夫坦克厂的播客
11-05 682
[root@node00 sbin]# /apps/spark-2.2.0-bin-hadoop2.7/bin/spark-shell --master spark://node00:7077 Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties Setting default log le...
sparksql 读取、连接 hive 报The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions
qq_42044006的博客
03-02 2434
sparksql 读取、连接 hive 报The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions 首先检查权限问题，这里有两种解决方式： 1.用有写权限的用户去操作：在代码中添加环境变量：System.setProperty("HADOOP_USER_NAME","hadoop") 2.其次检查 hdfs /tmp/hive 其他用户是否对其有写的权限，如果没有就用该目录拥有者账户执行hadoop
The root scratch dir: /tmp/hive on HDFS should be writable.（已解决）
Han_Lin-的博客
12-15 464
The root scratch dir: /tmp/hive on HDFS should be writable.
spark-sql 报错：The root scratch dir: /tmp/hive on HDFS should be writable.
Shockang的博客
07-31 1802
前言 本文隶属于专栏《Spark异常问题汇总》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮忙指出，谢谢！ 本专栏目录结构和参考文献请见 Spark异常问题汇总 正文 执行 spark-sql 脚本的时候报错： [hadoop@node2 ~]$ spark-sql Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties Setting default log level to "WA
Scratch素材/图形化编程角色素材分享10人物头像资源
05-15
今天给大家带来一套Scratch角色素材图片分享，都是PNG格式的透明图片，scratch可直接上传角色使用（也支持编程猫等，因为素材是PNG格式，所有支持png格式的软件都可以使用），适合图形化编程爱好者、初学者，同时也...
Scratch 素材：一起上路
06-10
此后仍有作品或有趣游戏、爆笑作品，请关注原作者，且点赞加收藏，记得推荐好友。下载即可游玩，快来下载吧！五星好评可以私信我，免费送资源！快来评论吧！
图形化编程/Scratch角色素材分享13动物素材
最新发布
05-24
今天给大家带来一套Scratch角色素材图片分享，都是PNG格式的透明图片，scratch可直接上传角色使用（也支持编程猫等，因为素材是PNG格式，所有支持png格式的软件都可以使用），适合图形化编程爱好者、初学者，同时也...
Scratch 3D AI / 联机经典游戏：纸绘大战（ 类似 Hexanaut 游戏）
07-22
用鼠标控制玩家，并尝试获得尽可能多的领土！不要让敌人触碰你的身体。 角色数量：24素材数量：85，积木数量：2192，音频数量：26 此后仍有作品或有趣游戏、爆笑作品，请关注原作者，且点赞加收藏，记得推荐好友。...
【报错】Caused by: java.lang.RuntimeException: The root scratch dir: /tmp/hive on HDFS should be writabl
weixin_61070671的博客
03-04 943
【代码】【报错】Caused by: java.lang.RuntimeException: The root scratch dir: /tmp/hive on HDFS should be writabl。
Spark (null) entry in command string: null chmod 0700
tom_fans的博客
12-27 2710
使用ecplise来提交SPARK SQL的时候报错： Exception in thread "main" org.apache.spark.sql.AnalysisException: java.lang.RuntimeException: java.io.IOException: (null) entry in command string: null chmod 0700 C:\Use...
Hive启动出现权限错误 /tmp/hive on HDFS should be writable.
yamaxifeng_132的专栏
02-09 1961
Hive启动出现权限错误 /tmp/hive on HDFS should be writable.
The root scratch dir: tmp/hive on HDFS should be writable. Current permissions are: rw-rw-rw-
weixin_43995212的博客
06-17 632
The root scratch dir: tmp/hive on HDFS should be writable. Current permissions are: rw-rw-rw-
在idea运行spark程序报错：The root scratch dir: /tmp/hive on HDFS should be writable
penriver的博客
03-03 2513
win10个人电脑，在idea中运行spark程序【连接了hive】，报如下异常：java.lang.RuntimeException: java.lang.RuntimeException: The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are: r--r--r--; 本文针对此问题进行了分析并提供了解决方案。
The  root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are : rw-rw-rw-
weixin_33704234的博客
05-04 771
2019独角兽企业重金招聘Python工程师标准>>> ...
hive启动出现权限错误 /tmp/hive on HDFS should be writable.
热门推荐
bear
04-23 1万+
启动hive时出现Exception in thread "main" java.lang.RuntimeException: java.lang.RuntimeException: The root scratch dir: /tmp/hive on HDFS should be writable.Current permissions are: rwxr-xr-x
Caused by: java.lang.RuntimeException: The root scratch dir: /tmp/hive on HDFS should be writable.
liangsw
06-26 1823
一、启动HIVE报错： [root@master ~]# hive Logging initialized using configuration in jar:file:/usr/local/hive-1.2.2/lib/hive-common-1.2.2.jar!/hive-log4j.properties Exception in thread "main" java.lang.Run...
D:\tmp\hive
07-28
- *2* [在idea运行spark程序报错：The root scratch dir: /tmp/hive on HDFS should be writable](https://blog.csdn.net/penriver/article/details/123248416)[target="_blank" data-report-click={"spm":"1018....
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值