hadoop
文章平均质量分 93
ruanjian28
这个作者很懒,什么都没留下…
展开
-
Agent admitted failure to sign using the key 问题解决办法
以下是我在ubuntu中安装ssh过程中遇到的问题,解决办法在网上搜寻到的,感谢广大热心的先行者,谢谢!问题:将cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys 将公钥加到authorized_keys中后,使用命令ssh localhost 时出现Agent admitted failure to sign using the key 这样的原创 2014-03-15 20:37:35 · 818 阅读 · 0 评论 -
centos下hadoop2.2.0源码编译
搭建环境:Centos x 6.4 64bit1、安装JDK我这里用的是64位机,要下载对应的64位的JDK,下载地址:http://www.oracle.com/technetwork/cn/java/javase/downloads/jdk7-downloads-1880260-zhs.html,选择对应的JDK版本,解压JDK,然后配置环境变量,[转载 2014-03-15 21:01:18 · 688 阅读 · 0 评论 -
Hadoop安装配置
转自虾皮工作室http://www.cnblogs.com/xia520pi/archive/2012/05/16/2503949.html#!comments1、集群部署介绍 1.1 Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统(HDFS,Hadoop Distributed Filesystem)和转载 2014-03-15 20:37:40 · 830 阅读 · 0 评论 -
TeraSort实验--测试Map和Reduce Task数量对Hadoop性能的影响
一、实验环境1个master节点, 16个slave节点: CPU:8GHZ , 内存: 2G网络:局域网二、实验描述 通过Hadoop自带的Terasort排序程序,测试不同的map task和reduce task数量,对Hadoop性能的影响。 实验数据由程序中的teragen程序生成,数据量为1GB和10GB。 通过设置mapre转载 2014-03-18 16:42:40 · 1187 阅读 · 0 评论