hdfs
dounine
这个作者很懒,什么都没留下…
展开
-
hdfs 磁盘存储不平衡、重新平衡操作
在日积月累的操作中、可能会存在有些磁盘的存储分布得不是很平衡、这就给数据多的那一台机子带来压力、因为很多的读取都是在同一台机子上、所以我们需要重新平衡一下存储、也就是把存储多的机子上的数据转移到其它机子。这里我们使用hdfs提供的balancer命令操作。操作随意登录hdfs集群中的某一台机子、然后切换到hdfs用户su - hdfskerberos 认证[可选]kinit...原创 2020-01-09 14:27:06 · 1443 阅读 · 1 评论 -
使用Kerberos安全读取HDFS文件
使用指南导入依赖包compile group: 'org.apache.hadoop', name: 'hadoop-hdfs', version: '2.7.6'compile group: 'org.apache.hadoop', name: 'hadoop-common', version: '2.7.6'krb5.conf 文件(从KDC服务器上复制下来)[lib...原创 2018-08-13 21:49:36 · 1542 阅读 · 0 评论