![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
抄经的和尚
入此行,了此事~
展开
-
Hadoop学习(2)-Hadoop配置与安装
在安装Hadoop之前,首先要安装好两个软件: (1)JDK Hadoop就是Java编写的,需要Java来编译执行。 (2)SSH(安全外壳协议),推荐安装OpenSSH。需要通过SSH来启动Slave列表中各台主机的守护线程,所以需要安装SSH。不论是集群还是伪分布式,都是需要到SSH的。 安装步骤如下: 1、下载并安装JDK1.6,在/etc/profile中配置环境变量 2、安装原创 2015-01-27 19:42:55 · 302 阅读 · 0 评论 -
Hadoop学习(1)-基本概念
1、Hadoop是Apache软件基金下的一个开源分布式计算平台,主要以HDFS和MapReduce为核心,向用户提供了系统底层细节透明的分布式基础架构。 2、Apache Lucene项目中的子项目中有个Apache Nutch, 里面用到了hadoop,后来hadoop活了,2008年,单独提出来,作为Apache的一个顶级项目。 3、Hadoop项目结构图 层1: Pig原创 2015-01-27 15:40:50 · 394 阅读 · 0 评论 -
Eclipse开发Hadoop程序
如链接http://blog.chinaunix.net/uid-20577907-id-3613584.html 所示,如果想通过Eclipse开发hadoop程序,需要以下步骤: (1)下载hadoop-****-eclipse-plugin.jar,有的包位于hadoop解压后的文件夹contrib中,有的需要在网上下载。 (2)把第(1)步下载的包放到eclipse下的plugins文转载 2015-02-02 19:40:11 · 268 阅读 · 0 评论