Zaxe-CSDN博客

原创 HA集群搭建

最近在做HA集群搭建的实验，虽说并不是难度很高的事情，但是也足足折腾了我两天，一点都不轻松，不停出问题的时候真的好崩溃，但是昨晚之后回头看看自己做的笔记，又觉得好幸运，毕竟我遇到了很多问题，也了解更多细节，学习到更多的东西。前期准备： 1.修改Linux主机名 2.修改IP 3.修改主机名和IP的映射关系（etc/hosts） 4.关闭防火墙(chkconfig iptables off)

2017-06-05 15:38:45 348

原创 Windows 下Eclipse运行HBase程序

一个HBase实验昨天弄了一整天，实验不难，问题就是我不知道怎么在Windows下利用eclipse来操作HBase，实现增删查等功能背景：已经安装好虚拟机，一切正常，本地的eclipse也可以正常运行。一、创建一个Java项目，建好包、类等例如，项目名称为HbaseDemo二、从虚拟机下复制HBase文件夹到本地，在项目目录下创建一个文件夹，命名为Conf，将从虚拟机复制到的Conf文件夹

2017-06-01 15:53:19 1323 1

原创 Hadoop课程遇到的问题集锦

这学期上的Hadoop课程都快要结束，但是一学期下来遇到的很多问题还没有整理，总结，零零碎碎记录在本子上，今天来个集锦，第一次记录，尽量写得明白些哈哈。一、安装在学Hadoop之前没有学过Linux，所以安装的时候对于一些命令并不是很熟悉，所以安装起来有点困难，记录一下常用命令：（1）编辑有两种，一种是gedit +路径，一种是vi+路径，不太清楚两者区别，但是有一部分文件gedit并不

2017-06-01 15:16:08 430

转载文章标题

Mapreduce在Map与Reduce之间的处理，会对Key进行升序排序，如果这个Key是Text类型则是按Key的首字母进行升序排序的，如果Key是IntWritable类型，则按大小进行升序排序，利用这点，可以对数据进行排序。比如如下的数据：要排成如下的形式：在Map过程将这些数据摆进Context这个数据字典的时候，除了需要注意类型的匹配以外，还要注意Mapreduce对Key的去重特

2017-04-22 10:20:40 209