![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
文章平均质量分 69
cheng911215
这个作者很懒,什么都没留下…
展开
-
hadoop三个配置文件的参数含义说明
常用的端口配置HDFS端口 参数描述默认配置文件例子值fs.default.name namenodenamenode RPC交互端口8020core-site.xmlhdfs://master:转载 2014-08-05 15:02:27 · 902 阅读 · 0 评论 -
HBase框架
1. HBase有哪些基本的特征?HBase是类似于google的bigtable的开源实现,拥有以下特征:1). 在HDFS之上2). 基于列存储的分布式数据库3). 用于实时地读、写大规模数据集其他HBase的特性: 1).没有真正的索引,行顺序存储,也没有所谓的索引膨胀问题。2) 自动分区,表增长时,自动分区到新的节点上。转载 2014-07-29 15:28:47 · 664 阅读 · 0 评论 -
hive中文官方文档
内容列表Cloudera制作的Hive介绍视频安装与配置系统需求安装Hive发行版从Hive源码编译运行Hive配置管理概览运行时配置Hive, Map-Reduce 与本地模式错误日志DDL 操作元数据存储DML 操作SQL 操作查询示例SELECTS 和 FILTER转载 2014-07-17 19:44:24 · 4090 阅读 · 0 评论 -
hbase API
HBase Master是服务器负责管理所有的HRegion服务器,HBase Master并不存储HBase服务器的任何数据,HBase逻辑上的表可能会划分为多个HRegion,然后存储在HRegion Server群中,HBase Master Server中存储的是从数据到HRegion Server的映射。一台机器只能运行一个HRegion服务器,数据的操作会记录在Hlog中,在读转载 2014-08-06 17:46:54 · 439 阅读 · 0 评论 -
hbase 读写数据
HBase提供了对HBase进行一系列的管理涉及到对表的管理、数据的操作java api。常用的API操作有: 1、 对表的创建、删除、显示以及修改等,可以用HBaseAdmin,一旦创建了表,那么可以通过HTable的实例来访问表,每次可以往表里增加数据。 2、 插入数据 创建一个Put对象,在这个Put对象里可以指定要给哪个列增加数据,以及当前的时间戳等转载 2014-07-28 11:03:34 · 5179 阅读 · 0 评论 -
hbase-zookeeper
Zookeeper为HBase提供了稳定服务和failover机制。 -ROOT- && .META. TableHBase中有两张特殊的Table,-ROOT-和.META.Ø .META.:记录了用户表的Region信息,.META.可以有多个regoinØ -ROOT-:记录了.META.表的Region信息,-ROOT-只有一个regi转载 2014-07-28 11:02:46 · 486 阅读 · 0 评论 -
hbase0.95 官方文档
Apache HBase™ 参考指南 HBase 官方文档中文版Copyright © 2012 Apache Software Foundation。保留所有权利。 Apache Hadoop, Hadoop, MapReduce, HDFS, Zookeeper, HBase 及 HBase项目 logo 是Apache Software Fo转载 2014-07-31 10:17:54 · 3017 阅读 · 0 评论 -
hadoop常用命令
启动Hadoop进入HADOOP_HOME目录。执行sh bin/start-all.sh关闭Hadoop进入HADOOP_HOME目录。执行sh bin/stop-all.sh 1、查看指定目录下内容hadoop dfs –ls [文件目录]eg: hadoop dfs –ls /user/wangkai.pt2、打开某个已存在文件转载 2014-08-06 13:02:20 · 351 阅读 · 0 评论 -
hadoop配置文件说明
1、dfs.hosts 记录即将作为datanode加入集群的机器列表2、mapred.hosts 记录即将作为tasktracker加入集群的机器列表3、dfs.hosts.exclude mapred.hosts.exclude 分别包含待移除的机器列表4、master 记录运行辅助namenode的机器列表5、slave 记录运行datanode和tasktracker的机器转载 2014-08-05 15:01:31 · 377 阅读 · 0 评论 -
hadoop配置文件详解及相关操作
一、 Hadoop伪分布配置1. 在conf/hadoop-env.sh文件中增加:export JAVA_HOME=/home/Java/jdk1.62. 在conf/core-site.xml文件中增加如下内容:fs.default.name -这是一个描述集群中NameNode结点的URI(包括协议、主机名称、端口号),转载 2014-08-05 15:05:07 · 562 阅读 · 0 评论 -
hbase scan 类
public static void main(String[] args) throws IOException { //Scan类常用方法说明 //指定需要的family或column ,如果没有调用任何addFamily或Column,会返回所有的columns; // scan.addFamily(); // sc转载 2014-08-12 19:21:56 · 398 阅读 · 0 评论