hadoop用户代理

1.用户代理分为host group user三个方面,分别表示哪些主机上的superuser 、模拟哪些组、模拟哪些用户

修改core-site.xml

<property>
     <name>hadoop.proxyuser.hive.hosts</name>
     <value>hadoop1,hadoop2</value>
  </property>
  <property>
     <name>hadoop.proxyuser.hive.groups</name>
     <value>hadoop</value>
  </property>
  <property>
     <name>hadoop.proxyuser.hive.users</name>
     <value>bob,joe</value>
  </property>

上述三个配置分别表示,hadoop1 hadoop2上的用户hive可以以superuser的方式代理hadoop组的任务用户,还可以代理bob和joe用户。
hive指的是运行hive的用户,可以是任何名称,例如zhs。如果不开启,代表操作hadoop的用户都是hive,如果开启,例如以aa用户连接hive,创建表,在hdfs上显示的是aa这个用户在操作,且需要aa这个用户拥有hdfs的操作权限。这个配置通常和
hive-site.xml中的



hive.server2.enable.doAs设置成false则,yarn作业获取到的hiveserver2用户都为hive用户。

设置成true则为实际的用户名

   <property>
        <name>hive.server2.enable.doAs</name>
        <value>true</value>
    </property>

一起使用。

2.以oozie为例,系统安装Oozie时,会同时创建相应用户–oozie。启动Oozie服务时,需要切换到oozie用户启动。以下分两种情况讨论Oozie中提交作业的流程。

不设置oozie代理

考虑到Oozie是用户oozie启动的,所以如果不设置oozie代理用户,普通用户在Oozie中提交的作业都会以oozie的身份执行,如下所示
在这里插入图片描述

设置oozie代理

设置oozie代理用户后,普通用户提交作业时,oozie会切换到该用户执行作业,如下所示,

在这里插入图片描述
hadoop中的默认设置

hadoop的core-site.xml中,针对oozie代理用户的默认设置如下,表示oozie会代理所有主机上的所有用户。

<property>
  <name>hadoop.proxyuser.oozie.hosts</name>
  <value>*</value>
</property>
<property>
  <name>hadoop.proxyuser.oozie.groups</name>
  <value>*</value>
</property>

3 总结

以用户ops使用代理用户oozie提交作业为例,当用户ops提交作业时,oozie会接管该作业,负责作业资源的申请及监管。

但其中若遇到读取HDFS文件时,要判断是否有使用该文件的权限,此时使用的用户是ops,作业运行完后,作业列表中显示该作业的用户也是ops。当然,除此之外,剩下的工作都由oozie负责,以体现“代理”的作用。
如果集群运行在安全模式下,超级oozie用户必须有kerberos凭据才能代理另一个用户。

参考链接:
https://www.cnblogs.com/skyrim/p/7455259.html
https://blog.csdn.net/u012948976/article/details/49904675

  • 3
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
Hadoop的节点授权工具是指用于管理Hadoop集群节点的访问权限的工具。它主要用于控制哪些节点有权访问Hadoop集群中的数据和资源,并规定了节点之间的权限交互方式。 Hadoop有两个主要的节点授权工具,分别是Kerberos和Hadoop身份验证代理Hadoop Secure Shell,简称HSS)。Kerberos是一种常用的网络身份验证协议,可以提供强大的节点授权和身份验证功能。Hadoop通过与Kerberos集成来实现对Hadoop集群的节点授权。它能够为每个Hadoop节点分配一个唯一的认证密钥,并要求节点在访问集群资源之前进行身份验证,保护集群的安全性。 另一个节点授权工具是Hadoop身份验证代理(HSS),它允许节点使用代理身份进行访问控制。HSS允许管理节点获取代理身份,并将其传递给相应的节点。节点接受代理身份后,可以执行指定的任务,而无需真正的用户身份验证。这种代理机制可以提高节点的灵活性和效率,使得节点之间的授权交互更为方便。 通过使用这些节点授权工具,Hadoop集群管理员可以精确地管理节点的访问权限,提高集群的安全性和可靠性。管理员可以根据实际需求进行节点的授权配置,限制非授权节点的访问,防止恶意节点对集群造成破坏。此外,节点授权工具还允许管理员对节点进行监控和审计,便于及时发现和解决潜在的安全问题。 总之,Hadoop的节点授权工具是用于管理和控制Hadoop集群节点访问权限的工具,能够提高集群的安全性和可靠性,并更好地应对恶意访问和攻击。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

这个操蛋的人生!!!

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值