hadoop
罗白莲
这个作者很懒,什么都没留下…
展开
-
Hadoop 常见问题集锦
P1:ssh连接机器,出现ssh:NODE_166:Temporary failure in name resolution 解决办法:检查/etc/hosts文件中定义了主机名和IP地址对应关系是否正确。 P2: ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.io.IOExcep转载 2015-12-27 22:07:27 · 2257 阅读 · 0 评论 -
大数据架构师基础:hadoop家族,Cloudera产品系列等各种技术
大数据我们都知道hadoop,可是还会各种各样的技术进入我们的视野:Spark,Storm,impala,让我们都反映不过来。为了能够更好的架构大数据项目,这里整理一下,供技术人员,项目经理,架构师选择合适的技术,了解大数据各种技术之间的关系,选择合适的语言。 我们可以带着下面问题来阅读本文章: 1.hadoop都包含什么技术 2.Cloudera公司与hadoop的关系是什么,都有转载 2015-12-27 13:41:19 · 403 阅读 · 0 评论 -
CDH4安装实践HDFS、HBase、Zookeeper、Hive、Oozie、Sqoop
目录: Hadoop集群(CDH4)实践之 (0) 前言 Hadoop集群(CDH4)实践之 (1) Hadoop(HDFS)搭建 Hadoop集群(CDH4)实践之 (2) HBase&Zookeeper搭建 Hadoop集群(CDH4)实践之 (3) Hive搭建 Hadoop集群(CHD4)实践之 (4) Oozie搭转载 2015-12-27 13:42:38 · 1203 阅读 · 0 评论 -
Hbase原理、基本概念、基本架构
概述 HBase是一个构建在HDFS上的分布式列存储系统; HBase是基于Google BigTable模型开发的,典型的key/value系统; HBase是Apache Hadoop生态系统中的重要一员,主要用于海量结构化数据存储; 从逻辑上讲,HBase将数据按照表、行和列进行存储。 与hadoop一样,Hbase目标主要依靠横向扩展,通过不断增加廉价的商用服务器,来转载 2015-12-27 10:05:53 · 372 阅读 · 0 评论 -
hadoop namenode ha--手动切换
问题导读 1.hadoop的dfs.nameservices如何配置? 2.集群配置中hdfs://mycluster的作用是什么? 3.如何将namenode2切换为active状态? 在参考本手册前请确保Hadoop中HDFS组件已经成功部署并正常运行,同时系统基本环境完备,包括ssh免密码登录、/etc/hosts等。 假设目前转载 2015-12-27 11:07:30 · 2256 阅读 · 0 评论 -
Hadoop2.7.1 集群部署及自动化脚本
http://blog.csdn.net/zcf1002797280/article/details/49500027 实验环境 操作系统:ubuntu 14.04 64位 主机名 IP namenode 10.107.12.10 datanode1 10.107.12.20 datanode2转载 2016-06-30 15:49:01 · 572 阅读 · 0 评论