在Pig中dump关系时ownership报错

背景及问题

前天学习Pig,在dump某个关系时一直报错,内容如下

The ownership on the staging directory /tmp/hadoop-yarn/staging/songzeceng/.staging is not as expected. It is owned by Administrators. The directory must be owned by the submitter songzeceng or by songzeceng

解决方法

网上搜了很多方法,最后还是自己试出了解决方法:

以前启动pig用的是本地模式,这不对,应该用默认的MapReduce模式。

换言之,要用下面命令启动pig

pig

而不是

pig -x local

结语

附上我试过了另外两种方法,对我来说没有用,但保不齐对大家有用:

1、修改hdfs-site.xml文件,加入以下配置

    <property>
        <name>dfs.permissions</name>
        <value>false</value>
    </property>

2、给/tmp目录修改权限,命令如下

hadoop fs -chmod -R 777 /tmp

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值