2016年05月_yuzhuzhong

06月 05月 04月

原创 MapReduce流程简单解析

以最经典的WordCount单词计数为例来介绍Map/Reduce阶段具体的处理步骤。

2016-05-22 19:08:38 11235

原创 Hbase安装详解

一、简介HBase – Hadoop Database，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。HBase利用Hadoop HDFS作为其文件存储系统，利用Hadoop MapReduce来处理HBase中的海量数据，利用Zookeeper作为协调工具。1.HBase(NoSQL)的数据模型1)

2016-05-08 17:18:57 2813

原创 Pig的安装配置

一、简介Pig是基于hadoop的一个数据处理的框架。相对于MapReduce是使用java进行开发的，Pig有一套自己的数据处理语言，Pig的数据处理过程要转化为MR来运行。Pig基本数据类型：int、long、float、double、chararry、bytearray复合数据类型：Map、Tuple、Bag Bag的类型如{('age',31),('na

2016-05-07 21:45:19 1703

原创 Zookeeper的安装配置

一、zookeeperZookeeper 是 Google 的 Chubby一个开源的实现，是 Hadoop 的分布式协调服务，它包含一个简单的原语集，分布式应用程序可以基于它实现同步服务，配置维护和命名服务等Zookeeper服务器集群规模不小于3个节点，要求各服务器之间系统时间要保持一致。ZooKeeper的搭建是为了后面HBase的使用。二、集群模式搭建我的集群是Hadoop

2016-05-07 21:02:54 3944

java+Opencv 提取图片颜色矩特征

利用java+Opencv提取图片的颜色矩特征，运行前提是已经在eclipse中配置好Opencv

2018-04-24

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人