![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
文章平均质量分 87
无奈ieq
这个作者很懒,什么都没留下…
展开
-
HDFS 原理和操作
启动Hadoop后,通过以下网址,对NameNode和SecondaryNameNode进行访问,网址内部记载了详细信息(具体请自行查看,网址内容为 虚拟机IP/+端口)SecondaryNameNode端口:50090。只写了几个常用的,具体用法请自行搜索。NameNode端口:50070。Idea创建相关工程并引用库。引用库(jar包的位置)test2的参数配置。原创 2024-08-10 16:58:09 · 523 阅读 · 0 评论 -
Hadoop免密登录
保存路径:.ssh/authorized_keys。7. 本地机器使用私钥进行解密,获取登录密码。使用jps进行测试,结果表明登录测试完成。2. 将本地机器的公钥添加到目标机器上。4. 目标机器随机产生一个登录密码。5. 目标机器使用A的公钥进行加密。6. 将加密后的密码返回给本地机器。8. 本地机器使用登录密码进行登录。3. 目标机器接收公钥并保存。原创 2024-08-06 19:22:50 · 400 阅读 · 0 评论 -
Hadoop分布模式
1.,这个文件是hadoop配置环境变量的脚本,包含了设置 Hadoop 运行所需环境变量的命令,比如 Java 的安装路径(JAVA_HOME)、Hadoop 的安装路径(HADOOP_HOME)等。#The java implementation to use.是写当前Java环境变量的,在此处增加当前Java环境1. 准备测试数据路径:/root/temp/data.txt2.测试用例。原创 2024-08-06 14:41:58 · 759 阅读 · 0 评论 -
Hadoop体系结构与目录结构
目前Hadoop已经升级到3.x版本,相比较于2.x版本,只是对性能进行了调优。原创 2024-08-05 20:32:42 · 237 阅读 · 0 评论