在idea运行scala程序报错：The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are

最新推荐文章于 2022-12-15 08:48:56 发布
最新推荐文章于 2022-12-15 08:48:56 发布
阅读量657 收藏 1
点赞数 1
分类专栏： 大数据学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_37023928/article/details/106042071
版权

在idea运行scala程序报错：Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState': java.lang.RuntimeException: The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are: ---------

解决方式：

%HADOOP_HOME%\bin\winutils.exe chmod 777 E:\tmp\hive

我在什么情况下遇到的呢？
在学习尚硅谷时，将模拟数据存放到本地spark自带的hive时，报的这个错误信息。

沉淀技术这十年
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
在idea里面启动spark程序链接hive出现：The root scratch dir: /tmp/hive on HDFS should be writable. Current permiss
m0_55243062的博客
02-16 1069
这个问题，已经按照网上的答案设置了相关的设置 第一：在代码中添加环境变量：System.setProperty(“HADOOP_USER_NAME”,“root”) 第二：拥有者账户执行hadoop fs -chmod -R 777 /tmp/。 但是执行代码 还是出现这个错误提示：The root scratch dir: /tmp/hive on HDFS should be writable. Current permiss ---------- 所以还是权限的问题，然后想到应该配置的问题，导致没有
outis:匿名存储存储在Hadoop集群中的数据（Hive，Hdfs ...）
05-11
外露的匿名存储存储在Hadoop集群中的数据（Hive，Hdfs ...）建立项目为了构建项目，您需要gradle 3+。 该项目使用shadow jar插件创建工件，因此为了获得工件，您必须启动gradle shadowJar 。项目结构项目分为两部分...
The  root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are : rw-rw-rw-
weixin_33704234的博客
05-04 771
2019独角兽企业重金招聘Python工程师标准>>> ...
The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are: rw-rw-rw-
zgjdzwhy的博客
05-01 7927
It is easy to follow the instructions on http://spark.apache.org/docs/latest/ and download Spark 1.6.0 (Jan 04 2016) with the “Pre-build for Hadoop 2.6 and later” package type from http://spark.apac
The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are: rwxr-xr-x
独立开发者 | 跨境电商
01-10 513
启动hive报的异常 使用hadoop fs -chmod -R 777 /tmp修改目录权限
SPARK The root scratch dir: /tmp/hive-grip on HDFS should be writable. Current permissions are: rwxr
80后大叔爱学习
07-25 1588
错误提示：ERROR scheduler.JobScheduler: Error running job streaming job 1532317741000 ms.0 java.lang.RuntimeException: java.lang.RuntimeException: The root scratch dir: /tmp/hive-grip on HDFS should be wri...
在IntelliJ IDEA中创建和运行java/scala/spark程序的方法
08-19
主要介绍了在IntelliJ IDEA中创建和运行java/scala/spark程序的教程，本文通过实例代码给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
使用IDEA开发Scala程序.docx
06-05
在本实验中，我们将深入学习如何使用IntelliJ IDEA这一强大的集成开发环境(IDE)来开发Scala程序，特别是针对Apache Spark的应用。实验的目标是让学习者掌握如何在IDEA中配置和构建Spark本地应用程序，以及如何部署...
读书笔记：IDEA上导入spark源码阅读步骤即在IDEA上对scala程序编译.zip
最新发布
07-19
读书笔记：IDEA上导入spark源码阅读步骤即在IDEA上对scala程序编译
spark-shell连接异常问题
哈尔科夫坦克厂的播客
11-05 682
[root@node00 sbin]# /apps/spark-2.2.0-bin-hadoop2.7/bin/spark-shell --master spark://node00:7077 Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties Setting default log le...
The root scratch dir: tmp/hive on HDFS should be writable. Current permissions are: rw-rw-rw-
weixin_43995212的博客
06-17 633
The root scratch dir: tmp/hive on HDFS should be writable. Current permissions are: rw-rw-rw-
解决 The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are: rwxr-xr-x
m0_52184330的博客
11-15 4414
问题描述： spark 将数据写入到hive表时 报错： The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are: rwxr-xr-x 如下图： 原因分析： 从The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are: rwxr-xr-x 可以看出，系统要求再hdfs上用户要具备写的权
sparksql 读取、连接 hive 报The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions
qq_42044006的博客
03-02 2437
sparksql 读取、连接 hive 报The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions 首先检查权限问题，这里有两种解决方式： 1.用有写权限的用户去操作：在代码中添加环境变量：System.setProperty("HADOOP_USER_NAME","hadoop") 2.其次检查 hdfs /tmp/hive 其他用户是否对其有写的权限，如果没有就用该目录拥有者账户执行hadoop
windows部署spark:The root scratch dir: /tmp/hive on HDFS should be writable.
dfyBlog的博客
08-21 825
目录1.安装jdk2.安装hadoop3.安装Scala4.安装spark5.idea集成Scala5.1 idea安装Scala插件5.2 安装Scala SDK 1.安装jdk 配置环境变量 JAVA_HOME:D:\java\jdk1.8.0_31 PATH:%JAVA_HOME%\bin;%JAVA_HOME%\jre\bin CLASSPATH:.;%JAVA_HOME%\lib;%...
Spark (null) entry in command string: null chmod 0700
tom_fans的博客
12-27 2710
使用ecplise来提交SPARK SQL的时候报错： Exception in thread "main" org.apache.spark.sql.AnalysisException: java.lang.RuntimeException: java.io.IOException: (null) entry in command string: null chmod 0700 C:\Use...
Caused by:java.lang.RuntimeException:The root scratch dir:/tmp/hive on HDFS should be writable.
zlpzlr的博客
01-09 4132
解决办法： hadoop fs -rm -r /tmp/hive;   rm -rf /tmp/hive Only temporary files are kept in this location. No problem even if we delete this, will be created when required with proper permissions
The root scratch dir: /tmp/hive on HDFS should be writable.（已解决）
Han_Lin-的博客
12-15 464
The root scratch dir: /tmp/hive on HDFS should be writable.
在idea运行spark程序报错：The root scratch dir: /tmp/hive on HDFS should be writable
penriver的博客
03-03 2513
win10个人电脑，在idea中运行spark程序【连接了hive】，报如下异常：java.lang.RuntimeException: java.lang.RuntimeException: The root scratch dir: /tmp/hive on HDFS should be writable. Current permissions are: r--r--r--; 本文针对此问题进行了分析并提供了解决方案。
HIVE启动错误：The root scratch dir: hdfs://master:8020/user/hive/tmp on HDFS should be writable的详细解决方法。
m0_55969961的博客
11-20 1276
详细步骤 解决：Exception in thread "main" java.lang.RuntimeException: The root scratch dir: hdfs://mast/user/hive/tmp on HDFS should be writable. Current permissions are: rwxr-xr-x
执行命令后报错Unknown dataset URI: hive:/project/ods_realtime_traffic_flow. Check that JARs for hive datasets are on the classpath.
03-27
这个错误提示说明执行的命令中包含了Hive数据集的URI，但是系统找不到Hive数据集的JAR包。解决这个问题需要将Hive数据集的JAR包添加到系统的classpath中。 可以尝试以下方法解决问题： 1. 如果你是在命令行中执行...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值