自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

anlu的博客

在最能奋斗的年纪选择奋斗

  • 博客(5)
  • 问答 (5)
  • 收藏
  • 关注

原创 Hbase过滤器(一)

首先解释一个名词:谓词下推: 所有的过滤器都会在服务端生效,保证过滤掉的数据不会被传送到客户端1.过滤器的层次结构;最底层是filter接口和filterBase抽象类,都是直接或间接实现接口或继承抽象类2.比较运算符:继承compareFilter的过滤器比filterBase多了一个compare方法,所以需要使用传入的参数定义比较操作的过程3.比较器:comparator,比较器

2015-09-22 14:18:06 670

原创 使用awk命令向集群中其他机器拷贝文件

在集群中,当配置完一个节点后需要向其他节点拷贝该文件,如果一个一个拷贝,效率低下单个拷贝命令 scp -r  (目标文件) 主机名:文件夹名所以使用awk命令来实现定义一个slave文件,里面包含所有主机名h1h2h3h4h5cat ./slave |awk ‘{print "scp -r /hadoop2.4 “$1":/home/hadoop/app"}'scp

2015-09-19 07:59:57 704

原创 yarn工作流程

当用户向yarn提交一个应用程序后,yarn分两个阶段运行此任务,第一个阶段启动ApplicationMaster,第二个阶段由ApplicationMaster创建应用程序,为它申请资源,监控整个运行过程,知道任务完成,总得来说有以下几个步骤1.用户向yarn提交应用程序,包括ApplicationMaster程序,2.RM为应用程序分配一个Container,并与对应的NM通信,要求它

2015-09-15 14:46:28 657

原创 yarn基本架构

yarn将hadoop2.x中的mrv.1的JobTracker和TaskTracker分成了一个全局的资源管理器ResourceManager和每个程序所特有的ApplicationMasterResourceManager负责整个集群的资源管理和分配,而ApplicationMaster则负责单个程序的管理yarn基本组成结构yarn使用master/slave结构,resourc

2015-09-15 14:30:32 446

转载 Mysql的引擎

mysql的数据库引擎在安装时如何编译就确定了,如果要重新添加一个mysql的引擎,必须重新编译mysql,下面是几个常用的mysql引擎1.ISAM:是一个明确定义且被时间考验的数据表格管理办法,在设计的时候就考虑倒了数据库的查询次数远比更新次数多,因此,ISAM执行读取操作的速度很快,而且不占用大量的内存和存储资源,ISAM的缺点是不能支持事务处理和容错,如果你的硬盘奔溃了,那么你的数据文

2015-09-14 14:50:41 348

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除