hadoop
程序猿DD
《Spring Cloud微服务实战》作者、腾讯云TVP、阿里云MVP
展开
-
Ubuntu Server11.04安装Hadoop
实习空下来,尝试一下伪分布式安装Hadoop,记录一下过程。 首先在虚拟机上装了操作系统:Ubuntu Server 11.04 准备工作: hadoop-0.20.2.tar.gz jdk-6u27-linux-i586.bin 安装SUN-Java环境 通过SSH连接到Ubuntu Server ·原创 2014-12-11 14:26:51 · 1047 阅读 · 0 评论 -
Ubuntu Server11.04安装Hadoop
实习空下来,尝试一下伪分布式安装Hadoop,记录一下过程。 首先在虚拟机上装了操作系统:Ubuntu Server 11.04 准备工作: hadoop-0.20.2.tar.gz jdk-6u27-linux-i586.bin 安装SUN-Java环境 通过SSH连接到Ubuntu Server · ...2011-09-16 16:28:44 · 461 阅读 · 0 评论 -
Hadoop中LOG4J问题
今天虚拟机上启动hadoop突然产生一个问题,错误见附件。 localhost: log4j:ERROR setFile(null,true) call failed.localhost: java.io.FileNotFoundException: /home/didi/hadoop-0.20.2/bin/../logs/hadoop-didi-datanode-myserver.log...原创 2011-11-22 23:08:01 · 1009 阅读 · 0 评论 -
hadoop+zookeeper+hbase安装
引自:http://hi.baidu.com/dekar/blog/item/f5c034efcf080e5778f055a6.html 一 机器 192.168.0.203 hd203: hadoop namenode & hbase HMaster 192.168.0.204 hd204: hadoop datanode & hbase HRegionServer ...原创 2011-11-23 10:31:39 · 606 阅读 · 0 评论 -
Hadoop常见问题及解决办法
文章引自:http://blog.csdn.net/zyj8170/article/details/6037934 1:Shuffle Error: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-out Answer: 程序里面需要打开多个文件,进行分析,系统一般默认数量是1024,(用ulimit -a可以看到)对于正常使用是够...原创 2011-11-24 11:14:59 · 1256 阅读 · 0 评论 -
Hive-0.7.1安装(Ubuntu Server11.04+Hadoop-0.20.2)
官方安装指南地址:https://cwiki.apache.org/confluence/display/Hive/GettingStarted 我这里只描述了一下安装环境的伪分布式安装 安装环境: Ubuntu Server 11.04 Jdk1.6.27 Hadoop-0.20.2 先决条件: 安装了JDK1.6和hadoop-0.17以上版本...2011-11-24 13:44:17 · 677 阅读 · 0 评论 -
HBase-0.90.3安装(Ubuntu Server11.04+Hadoop-0.20.2)
方安装指南地址:http://hbase.apache.org/book/quickstart.html 我这里只描述了一下安装环境的伪分布式安装 安装环境: Ubuntu Server 11.04 Jdk1.6.27 Hadoop-0.20.2( 该版本的Hbase只可以运行在Hadoop 0.20.x .HBase运行在没有持久同步功能的H...2011-11-24 16:29:19 · 648 阅读 · 0 评论 -
Ubuntu Server11.04安装Hadoop
6u27-linux-i586.bin 安装SUN-Java环境 通过SSH连接到Ubuntu Server · 通过主页上的jdk-6u27-linux-i586.bin下载并复制到/home/didi,执行安装 $ sudo sh jdk-6u27-linux-i586.bin 完成安装Done,jdk位置为/home/didi/jdk1.6.0_27 改名2011-09-16 16:28:44 · 460 阅读 · 0 评论 -
Hadoop中LOG4J问题
2/bin/../logs/hadoop-didi-datanode-myserver.log (Input/output error) 删除logs下的文件后,重新启动成功原创 2011-11-22 23:08:01 · 992 阅读 · 0 评论 -
hadoop+zookeeper+hbase安装
se HRegionServer & zookeeper 192.168.0.205 hd205: hadoop datanode & hbase HRegionServer & zookeeper 192.168.0.206 hd206: hadoop datanode & hbase HRegionServer & zookeeper 192.168.0.202 hd202: hadoop second namenod原创 2011-11-23 10:31:39 · 685 阅读 · 0 评论 -
Hive-0.7.1安装(Ubuntu Server11.04+Hadoop-0.20.2)
Jdk1.6.27 Hadoop-0.20.2 先决条件: 安装了JDK1.6和hadoop-0.17以上版本 Hadoop已经启动并运行 在Hadoop为Hive设计几个备用目录 hadoop fs -mkdir /tmp hadoop fs -mkdir /user/hive/warehouse(当数据由HIVE管理时,数据存储于此) hadoop fs chmod g+w /tmp hadoop fs chmod g+w /user/hive/warehou2011-11-24 13:44:17 · 566 阅读 · 0 评论 -
Hadoop常见问题及解决办法
原创 2011-11-24 11:14:59 · 1094 阅读 · 0 评论 -
HBase-0.90.3安装(Ubuntu Server11.04+Hadoop-0.20.2)
0.20.2( 该版本的Hbase只可以运行在Hadoop 0.20.x .HBase运行在没有持久同步功能的HDFS上会丢失数据。 Hadoop 0.20.2 没有这个功能。现在只有 branch-0.20-append 补丁有这个功能。详细的说明:Building an Hadoop 0.20.x version for HBase 0.90.2 .) 安装过程: 下载hbase-0.90-3.tar.gz 解压开2011-11-24 16:29:19 · 619 阅读 · 0 评论