hadoop
ydd326
这个作者很懒,什么都没留下…
展开
-
Hadoop的调度器
随着MapReduce的流行,其开源实现Hadoop也变得越来越受推崇。在Hadoop系统中,有一个组件非常重要,那就是调度器,它的作用是将系统中空闲的资源按一定策略分配给作业。在Hadoop中,调度器是一个可插拔的模块,用户可以根据自己的实际应用要求设计调度器。Hadoop中常见的调度器有三种,分别为:(1)默认的调度器FIFOHadoop中默认的调度器,它先按照作业的优先级高低,再按照转载 2011-11-23 10:26:47 · 753 阅读 · 0 评论 -
hive的安装
在安装hdoop以后,打算安装hive,数据库用mysql。在安装的过程中还是经过了一番周折的。记录下来,希望对大家有帮助。1. Hadoop的安装 请参考http://blog.csdn.net/ydd326/article/details/68603042. MySQL的安装 sudo apt-get install mysql-server 根用户进入原创 2011-12-09 13:00:34 · 644 阅读 · 0 评论 -
linux下从安装JDK到安装ssh到hadoop单机伪分布式部署
环境: ubuntu 10.10 JDK1.6.0.27 hadoop 0.20.2 一. ubuntu 下 JDK 的安装:1. 下载jdk-6u27-linux-i586.bin2. 拷贝到/usr/java,设置文件的操作权限3. $ ./jdk-6u27-linux-i586.bin开始安装4. 设置环境变量 vi /etc/profile原创 2011-10-10 20:16:21 · 1807 阅读 · 2 评论