- 博客(5)
- 问答 (5)
- 收藏
- 关注
原创 Hbase过滤器(一)
首先解释一个名词:谓词下推: 所有的过滤器都会在服务端生效,保证过滤掉的数据不会被传送到客户端1.过滤器的层次结构;最底层是filter接口和filterBase抽象类,都是直接或间接实现接口或继承抽象类2.比较运算符:继承compareFilter的过滤器比filterBase多了一个compare方法,所以需要使用传入的参数定义比较操作的过程3.比较器:comparator,比较器
2015-09-22 14:18:06 670
原创 使用awk命令向集群中其他机器拷贝文件
在集群中,当配置完一个节点后需要向其他节点拷贝该文件,如果一个一个拷贝,效率低下单个拷贝命令 scp -r (目标文件) 主机名:文件夹名所以使用awk命令来实现定义一个slave文件,里面包含所有主机名h1h2h3h4h5cat ./slave |awk ‘{print "scp -r /hadoop2.4 “$1":/home/hadoop/app"}'scp
2015-09-19 07:59:57 704
原创 yarn工作流程
当用户向yarn提交一个应用程序后,yarn分两个阶段运行此任务,第一个阶段启动ApplicationMaster,第二个阶段由ApplicationMaster创建应用程序,为它申请资源,监控整个运行过程,知道任务完成,总得来说有以下几个步骤1.用户向yarn提交应用程序,包括ApplicationMaster程序,2.RM为应用程序分配一个Container,并与对应的NM通信,要求它
2015-09-15 14:46:28 657
原创 yarn基本架构
yarn将hadoop2.x中的mrv.1的JobTracker和TaskTracker分成了一个全局的资源管理器ResourceManager和每个程序所特有的ApplicationMasterResourceManager负责整个集群的资源管理和分配,而ApplicationMaster则负责单个程序的管理yarn基本组成结构yarn使用master/slave结构,resourc
2015-09-15 14:30:32 446
转载 Mysql的引擎
mysql的数据库引擎在安装时如何编译就确定了,如果要重新添加一个mysql的引擎,必须重新编译mysql,下面是几个常用的mysql引擎1.ISAM:是一个明确定义且被时间考验的数据表格管理办法,在设计的时候就考虑倒了数据库的查询次数远比更新次数多,因此,ISAM执行读取操作的速度很快,而且不占用大量的内存和存储资源,ISAM的缺点是不能支持事务处理和容错,如果你的硬盘奔溃了,那么你的数据文
2015-09-14 14:50:41 348
空空如也
zookeeper启动后用jps命令查看QuorumPeerMain进程还在
2015-08-19
js实现动态的给某一个文本框赋值,赋三个文本框值到这个里面
2015-07-08
myeclipse中的tomcat4启动时卡住了,动不了!
2015-07-07
js怎么实现判断下面图片哪个被选中
2015-07-06
TA创建的收藏夹 TA关注的收藏夹
TA关注的人