Hadoop
文章平均质量分 84
nucheima
我还是我!
展开
-
Hadoop技术内幕_深入解析Hadoop Common和HDFS架构设计与实现原理——读书笔记(1)
第1章 源代码环境准备 1.1 Hadoop生态系统 (a). Hadoop Common: 为Hadoop的其它项目提供一些常用工具,主要包括系统配置工具Configuration、远程过程调用RPC、序列化机制和Hadoop抽象文件系统FieSystem等。 (b). Avro: 是一个数据序列化系统。可以将数据结构或者对象转换成便...原创 2014-01-24 09:51:19 · 304 阅读 · 0 评论 -
Hadoop技术内幕_深入解析Hadoop Common和HDFS架构设计与实现原理——读书笔记(2)
第2章 Hadoop配置信息处理 2.1 配置文件简介 1. windows 操作系统的配置文件:后缀为 ini java解析 ini 配置文件第三方API有: (1) JCom包:下载JCom-2.2.0-1.jar (2) Apache Commons 工具集:下载commons-configuration-1.1...原创 2014-01-24 12:50:58 · 181 阅读 · 0 评论 -
Hadoop家族安装系列(1)——Hadoop1.2.1分布式安装
在VMware下安装Ubuntu并部署Hadoop1.2.1分布式环境 友情提醒:大家最好通读一遍过后,在理解的基础上安装步骤一步一步设置,因为后面的步骤会对前面的步骤有所启示。 一、所需环境与软件 1. 操作系统:Windows 7 64位、Windows 8 64位 2. 内存:4G以上 3. VMware Workstation 10:VMware-workstation...原创 2014-03-07 11:54:48 · 147 阅读 · 0 评论 -
Hadoop家族安装系列(2)——安装Mahout0.9框架
在Hadoop1.2.1分布式集群环境下安装Mahout0.9框架 友情提醒:大家最好通读一遍过后,在理解的基础上按照步骤一步一步设置,因为后面的会对前面的有所启示。 一、前提条件 Hadoop1.2.1分布式集群环境搭建成功,并且Hadoop集群服务器正常运行。 二、所需环境和软件 1. Hadoop分布式集群环境: 见《在VMware下安装Ubuntu并部署Hadoop1....2014-03-07 19:21:29 · 177 阅读 · 0 评论 -
Hadoop家族安装系列(3)——hive0.12安装
在Hadoop1.2.1分布式集群环境下安装hive0.12 ● 前言: 1. 大家最好通读一遍过后,在理解的基础上再按照步骤搭建。 2. 之前写过两篇<<在VMware下安装Ubuntu并部署Hadoop1.2.1分布式环境>>、《在Hadoop1.2.1分布式集群环境下安装Mahout0.9框架》都是Hadoop家族一系列的,后续还会有其它内容,敬请期待!...原创 2014-03-08 22:30:03 · 192 阅读 · 0 评论 -
Hadoop家族安装系列(4)——pig0.12安装
在Hadoop1.2.1分布式集群环境下安装pig0.12 ● 前言: 1. 大家最好通读一遍过后,在理解的基础上再按照步骤搭建。 2. 之前写过几篇文章是关于Hadoop家族安装系列的,后续还会有其它内容,敬请期待! 3. 好记性不如烂笔头,最近突然想把自己学习的东西整理出来,一则服务大众,二则以后好查阅。由于水平有限,难免有错误,请多谅解并指正,如有什么问题可以留言咨询。 一...2014-03-09 11:31:16 · 161 阅读 · 0 评论