Hadoop
关注
分享
扫一扫
文章平均质量分 71
yl00
这个作者很懒，什么都没留下…
展开
-
hadoop的安全模式相关命令
NameNode在启动的时候首先进入安全模式，如果datanode丢失的block达到一定的比例（1-dfs.safemode.threshold.pct），则系统会一直处于安全模式状态即只读状态。dfs.safemode.threshold.pct（缺省值0.999f）表示HDFS启动的时候，如果DataNode上报的block个数达到了元数据记录的block个数的0.999倍才可以离开...原创 2012-12-07 11:08:58 · 330 阅读 · 0 评论 -
HDFS Client如何从Datanode读取block
Datanode中包含DataXceiverServer。DataXceiverServer是一个socket server，负责接收client发起的socket连接。DataXceiverServer接收到一个socket连接后，启动一个线程DataXceiver，由DataXceiver具体负责该scoket的处理。DataXceiver从client读取client想要进行操作的操作码。如...原创 2012-12-21 16:43:55 · 142 阅读 · 0 评论 -
HIVE的表操作语句
转自：http://hi.baidu.com/zhangxinandala/item/49752510cc7ad08789a95617 1.创建表的语句： Create [EXTERNAL] TABLE [IF NOT EXISTS] table_name [(col_name data_type [COMMENT col_comment], ...)] [COMMENT ...原创 2013-01-05 15:55:36 · 90 阅读 · 0 评论 -
转 Hive的JDBC连接方法
操作时注意四点 1. 在连接程序运行前要导入hive文件下面的所有的包 2. 运行时间可能较长，这是正常的，只要耐心等待 3. 输入hive --service hiveserver之后，命令框卡住不动是正常情况，如果要使其成为后台程序，只要改输入为 hive --service hiveserver &即可 4. 真正应用是需要将metadata另外放置在一台...原创 2013-01-06 18:59:58 · 108 阅读 · 0 评论 -
转 Java操作Hbase进行建表、删表以及对数据进行增删改查，条件查询
1、搭建环境 新建JAVA项目，添加的包有: 有关Hadoop的hadoop-core-0.20.204.0.jar 有关Hbase的hbase-0.90.4.jar、hbase-0.90.4-tests.jar以及Hbase资源包中lib目录下的所有jar包2、主要程序Java代码 [img]http://yangling00.i...原创 2013-01-06 19:42:08 · 137 阅读 · 0 评论