hadoop
文章平均质量分 57
大数据
AAA821
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
(转)基于Docker搭建Hadoop+Hive
本次使用的各版本配置如下: Docker 19.03.8 JDK 1.8 Hadoop 3.2.0 Hive 3.1.2 mysql 8.0.1 mysql-connector-java-5.1.49.jar hive_jdbc_2.5.15.1040 Hadoop部分: 一、拉取镜像 docker pull registry.cn-hangzhou.aliyuncs.com/hadoop_test/hadoop_base 二、运行容器 进入容器看worker里面有三台机子,分别是M转载 2021-06-27 21:09:53 · 912 阅读 · 2 评论 -
hadoop的SecondaryNameNode
辅助NameNode管理元数据,从可用性的角度出发,不会跟nameNode部署在同一服务器 执行过程:从NameNode上下载元数据信息(fsimage,edits),然后把二者合并,生成新的fsimage,在本地保存,并将其推送到NameNode,替换旧的fsimage. ...转载 2021-06-14 16:34:12 · 885 阅读 · 0 评论 -
docker安装hadoop集群遇到的一些问题
1.进入hadoop镜像对应的容器内,执行Hdfs命令,显示没找到hdfs: command not found 解决方案:在/etc/profile文件内 原来是export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin 改成export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH ...原创 2021-06-14 15:48:46 · 785 阅读 · 0 评论 -
(转)hadoop的datanodes
转自https://blog.csdn.net/cicada_smile/article/details/109180161转载 2021-06-14 10:50:55 · 418 阅读 · 0 评论 -
(转)Hadoop的nameNode
以下大部分内容转自:https://blog.csdn.net/weixin_45324890/article/details/108593297 和https://www.cnblogs.com/cicada-smile/p/13801180.html转载 2021-06-14 15:40:03 · 578 阅读 · 0 评论 -
用到的Hadoop的命令
1.hadoop namenode -format 格式化HDFS 2. haddop的start-all.sh命原创 2021-06-14 15:41:13 · 203 阅读 · 0 评论
分享