Hive执行任务报找不到主类错误

原因:由于我的集群是CentOS7系统,根据网上的资料显示,CentOS7的buffer/cache缓存机制会不断增加缓冲区,从而挤占内存,让程序可用的内存变少,导致Java垃圾回收机制把YarnChild进程回收,从而导致找不到main class。
解决思路:把内存中的缓存数据存入磁盘,然后手动释放内存

网上查到:
执行sync命令,多执行几遍
再依次执行:
echo 1 > /proc/sys/vm/drop_caches
echo 2 > /proc/sys/vm/drop_caches
echo 3 > /proc/sys/vm/drop_caches

但是运行下面语句清缓存时,报Permission denied错误:-bash: /proc/sys/vm/drop_caches: Permission denied

sudo echo 1 > /proc/sys/vm/drop_caches

sudo echo 2 > /proc/sys/vm/drop_caches

sudo echo 3 > /proc/sys/vm/drop_caches

sync

bash 拒绝这么做,提示权限不够,是因为重定向符号 “>” 也是 bash 的命令。sudo 只是让 echo 命令具有了 root 权限,
但是没有让 “>” 命令也具有root 权限,所以 bash 会认为这个命令没有写入信息的权限。

解决方法:

“sh -c” 命令,它可以让 bash 将一个字串作为完整的命令来执行

sudo sh -c “echo 1 > /proc/sys/vm/drop_caches”

sudo sh -c “echo 2 > /proc/sys/vm/drop_caches”

sudo sh -c “echo 3 > /proc/sys/vm/drop_caches”

或者
echo 1 |sudo tee /proc/sys/vm/drop_caches

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 3
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值