2011年10月_kongxx

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 hadoop实战之动态添加节点

本文地址：http://blog.csdn.net/kongxx/article/details/6896230假定已经有了一个hadoop cluster环境，并且已经有了两个slave节点fkongnix1和fkongnix2，这里需要动态添加一个新的节点fkongnix3.对于hadoop分布式模式环境的搭建可以参考 hadoop学习之分布式模式1. 修改${HADOOP_H

2011-10-22 13:38:18 8226

原创 hadoop实战之分布式模式

本文地址：http://blog.csdn.net/kongxx/article/details/68962141. 首先为hadoop的集群准备几台机器，这里机器名如下：fkongnix0 (master)fkongnix1 (slave1)fkongnix2 (slave2)2. 修改每个机器的/etc/hosts文件，确保每个机器都可以通过机器m名互相访问；3.

2011-10-22 13:33:34 3746 1

原创 hadoop "File /user/<user>/input/conf/slaves could only be replicated to 0 nodes, instead of 1"问题及解决办

本文地址：http://blog.csdn.net/kongxx/article/details/6892675安装hadoop的官方文档安装后，在伪分布式模式下运行bin/hadoop fs -put conf input出现以下异常11/10/20 08:18:22 WARN hdfs.DFSClient: DataStreamer Exception: org.a

2011-10-21 08:20:11 7038 1

原创 hadoop实战之伪分布式模式

本文地址：http://blog.csdn.net/kongxx/article/details/6891761Hadoop可以在单节点上以所谓的伪分布式模式运行，此时每一个Hadoop守护进程都作为一个独立的Java进程运行，这种运行方式的配置和操作如下：关于hadoop的安装和测试可以参考hadoop学习之安装与单机模式这里仍假定${HADOOP_HOME}为位置是/data/

2011-10-20 19:46:56 2818 1

原创 hadoop实战之安装与单机模式

本文地址：http://blog.csdn.net/kongxx/article/details/68915911. 下载最新的hadoop安装包，下载地址http://hadoop.apache.org/，这里我使用的是hadoop-0.20.203.0rc1.tar.gz版本；2. 解压压缩包到自己的目录，比如解压到/data/fkong目录下，为了后面说明方法，这里把/data/fk

2011-10-20 18:15:08 3233

原创 Spring + Quartz任务调度实战之动态作业调度

本文地址：http://blog.csdn.net/kongxx/article/details/6860732前面写了几个文章是关于spring中集成作业调度功能的东西，可以参考Spring任务调度实战之TimerSpring任务调度实战之Quartz Simple TriggerSpring任务调度实战之Quartz Cron Trigger但那些例子都是对静态作业

2011-10-10 21:48:14 19819 6