2012年05月_西瓜肚圆圆

10月 09月 08月 07月 06月 05月

原创【hadoop学习笔记】4.eclipse运行wordcount实例

新建一个hadoop工程，如图建一个运行wordcount的类，先不管他什么意思，代码如下/** * Project: hadoop * * File Created at 2012-5-21 * $Id$ */package seee.you.app;import java.io.IOException;import java.util.StringToke

2012-05-28 22:38:34 7235

原创【hadoop学习笔记】3.hadoop eclipse 开发

eclipse中hadoop开发安装hadoop插件。hadoop插件可以从网上下载，也可以自己编译，我用的是1.0.2，编译后再hadoop-1.0.2\build\contrib\eclipse-plugin可以找到安装完hadoop的eclipse插件之后，需要配置hadoop的安装地址。如下图。打开map/reduce视图新建一个hadoop

2012-05-28 22:35:19 2612

原创【hadoop学习笔记】2.hadoop相关命令

hdfs相关操作hadoop使用的是HDFS,能够实现的功能和我们使用的磁盘类似 1、查看文件列表./hadoop fs -lsyongkang@yongkang-OptiPlex-760:~/tools/hadoop-1.0.2/bin$ ./hadoop fs -lsWarning: $HADOOP_HOME is deprecated.

2012-05-28 22:34:22 1139

原创【hadoop学习笔记】1.hadoop安装

环境：Ubuntu11.4 准备工作：a.先安装jdkb.修改/etc/hosts，绑定 10.16.110.7 master （最好不要用127.0.0.1 localhost 后面会出现意想不到的错误） 1.下载hadoop-1.0.2在linux下执行 wget http://apache.etoak.com/hadoop/common/hadoop-1

2012-05-28 22:32:20 994

Java Interactive Profiler 翻译文档

JIP是一个代码剖析工具非常类似于JDK附带的hprof工具。它的特点包括： 1.交互性，允许你在JVM运行过程中随时启动或结束剖析器而hprof是在程序启动时就开启JVM退出时结束。 2.没有本地代码，大部分剖析器都有一些本地组件(native component)因为这些剖析器使用了需要利用本地组件的JVMPI (Java Virtual Machine Profiling Interface)，而JIP是纯Java的，它利用了Java5™的一些特性。JIP对需要剖析的每一个类的每一个方法添加aspect拦截，这些aspect能够捕获执行数据。 3.非常低的开销,在很多情况下hprof将会造成一个程序运行变慢20倍,而JIP是轻量级的几乎没有任何开销。 4.JIP能够通过package/class名设置过滤器

2012-08-09