Hadoop
DanielWang_
对开源、NLP、网络编程等领域感兴趣 共同学习~~ best wishes
展开
-
Hbase的安装及配置、eclipse 操作示例
下面说明Hbase ubuntu12.04上的安装,假设在安装Hbase前你已经正确安装了Hadoop(可以参见以前的博文). 1.1下载解压最新版本选择一个 Apache 下载镜像:http://www.apache.org/dyn/closer.cgi/hbase/,下载 HBase Releases. 点击 stable目录,然后下载后缀为 .tar.gz 的文件; 例如 h原创 2013-07-01 17:19:59 · 3199 阅读 · 0 评论 -
Hadoop 在linux 单机上伪分布式 的安装
1,安装JDKsudo apt-get install openjdk-6-jdk2,配置JAVA 环境变量输入命令:sudo gedit /etc/profile打开profile 在文件最下面加入如下内容:# set java homeexport JAVA_HOME=/usr/lib/jvm/java-1.6.0-openjdk-i386/原创 2013-04-21 13:03:28 · 1981 阅读 · 0 评论 -
hadoop 完全分布式 下 datanode无法启动解决方法
问题描述:在集群模式下更改节点后,启动集群发现 datanode一直启动不起来。我集群配置:有5个节点,分别为master slave1-5 。在master以hadoop用户执行:start-all.shjps查看master节点启动情况: NameNode JobTracker Secondary原创 2013-09-01 19:23:36 · 19592 阅读 · 1 评论 -
使用Hadoop Streaming
hadoop大家都了解的,不再细说。之前用java写过MR程序,对Hadoop streaming了解不多,Hadoop streaming是和Hadoop一起发布的实用程序,它允许用户创建和执行使用任何程序或者脚本编写的map或者reduce的mapreducejobs,实际工作中看到不少同学用python、shell、Perl等编写Hadoop streaming程序(开发效率确实高)。在运行原创 2015-08-02 09:52:32 · 3694 阅读 · 0 评论