![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
Eddie-Wang
I DO WHAT I DO.
展开
-
hadoop本地环境、伪分布式模式安装
1.环境准备hadoop版本:hadoop-2.8.5,下载路径:https://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-2.8.5/hadoop-2.8.5.tar.gz修改服务器hostname,修改一下两个文件,hostname不包含着‘.’ '/' '_'等非法字符:vi /etc/hostsvi /etc/...原创 2019-06-13 17:43:45 · 220 阅读 · 0 评论 -
hadoop错误:port authority及namenode address dfs.namenode.servicerpc-address or dfs.namenode.rpc-address
记录相关错误:1.Does not contain a valid host:port authority2.namenode address dfs.namenode.servicerpc-address or dfs.namenode.rpc-address is not configured经调查结果是由于主机的hostname不合法,修改为不包含着‘.’ '/' '_'等非法字...原创 2019-06-13 17:47:13 · 1110 阅读 · 0 评论 -
Hadoop数据节点DataNode异常
1、问题背景:操作系统:CentOS7.664位Hadoop版本:Hadoop2.8.5JDK:1.8.0_2012、问题描述使用start-dfs.sh、start-yarn.sh脚本启动Hadoop后,通过jps命令检测DataNode节点进程发现没有DataNode进程,只有NameNode,SecondaryNameNode,NodeManager,ResourceMa...原创 2019-06-13 17:55:18 · 1154 阅读 · 0 评论 -
hadoop整合hbase
部署hadoop请看以下文章:https://blog.csdn.net/wangchaox123/article/details/91877296本文在上述文章的基础上部署hbase1. 下载安装包从官网下载HBase安装包,我安装的是HBase-2.0.5,官网下载地址:http://mirror.bit.edu.cn/apache/hbase/2.0.5/hbase-2.0.5-...原创 2019-06-13 19:14:42 · 792 阅读 · 0 评论 -
hbase学习笔记
最近在学习hbase,做些笔记。1.The Master starts a web-interface on port 16010 by default.hbase本身有web管理页面,查看hbase-site.xml文件,如下:<configuration><property> <name>hbase.zookeeper.quorum&...原创 2019-06-14 09:28:51 · 129 阅读 · 0 评论 -
hadoop学习笔记
最近在学习hadoop,做下笔记!1.hadoop管理页hadoop部署完成后,管理页ip为部署hadoop主节点ip,端口为默认的50070,如我本地访问地址为:192.168.30.130:50070...原创 2019-06-14 09:42:47 · 151 阅读 · 0 评论 -
详解HBase架构原理
一、什么是HBase HBase 是一个高可靠、高性能、面向列、可伸缩的分布式存储系统,利用Hbase技术可在廉价PC Server上搭建 大规模结构化存储集群。 HBase 是Google Bigtable 的开源实现,与Google Bigtable 利用GFS作为其文件存储系统类似, HBase 利用HadoopHDFS 作为其文件存储系统;Google 运行MapRed...转载 2019-06-18 14:39:15 · 1583 阅读 · 0 评论