自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(24)
  • 收藏
  • 关注

转载 mahout0.6版本中,启动出现找不到PrepareTwentyNewsgroups的解决办法

安装完mahout后,会出现java.lang.ClassNotFoundException: org.apache.mahout.classifier.bayes.PrepareTwentyNewsgroups这个错,...

2014-08-31 15:04:45 85

转载 在Hadoop中,引入第三方JAR包时,报ClassNotFoundException问题的解决办法

本人在Windows下用Eclipse开发Hadoop程序,用常规的方法,把第三方的JAR包用Config Build Path的方法引入JAR包,但是运行报错, 后来我把JAR包放到hadoop/lib目录,...

2014-08-24 14:34:07 151

转载 关于在IE8下禁用兼容模式的方法

参见:http://www.iefans.net/ie-jianrong-moshi-mogui-tianshi/ ...

2014-08-05 17:23:09 147

转载 datafu-1.0.0.jar下载

https://www.versioneye.com/java/com.linkedin.datafu:datafu/1.0.0 ...

2014-08-03 15:33:10 85

转载 pig各版本下载

http://mirrors.hust.edu.cn/apache/pig/ ...

2014-08-03 15:17:32 731

转载 mahout各版本下载

http://archive.apache.org/dist/mahout/0.6/ ...

2014-07-29 16:46:03 233

转载 shell小工具查看Hadoop中System.out输出的日志

#!/bin/bashrm ~/log.logecho "Please Input JobID:"read NAMEmap_log="/home/grid/hadoop-1.2.1/logs/userlogs/$...

2014-07-13 22:56:29 78

转载 Linux Shell脚本截取字符串

http://blog.csdn.net/gumanren/article/details/5601544 ...

2014-07-13 22:28:15 40

转载 在VI下进行搜索

你在命令模式下敲斜杆(/)这时在状态栏(也就是屏幕左下脚)就出现了 “/”然后输入你要查找的关键字如果你要继续查找此关键字,敲字符n就可以继续查找了。 ...

2014-07-02 23:31:34 48

转载 个人对shuffle的理解

1)mapping的过程就是把原始数据读成key,value对的形式2)reducer的过程就是把mapping的键值对计算成为我们最终我们想要的数据3)shuffle的定义是:把key相同的行聚合到一起,形成一个{ke...

2014-06-29 22:58:58 97

转载 关于运行Hadoop是报:Type mismatch in key from map

找了好久MaxTemperatureMapper的22行,好像也没有问题,结果在MaxTemperature.java中没有指定:job.setOutputValueClass(IntWritable.class);因为默认...

2014-06-29 09:30:14 99

转载 以JAR包的形式运行Hadoop程序

1.先用带classpath的形式编译所有的java文件:javac -classpath ../hadoop-core-1.2.1.jar *.java2.把所有的class文件打成jar包:jar cvf MaxTe...

2014-06-29 08:46:02 72

转载 Hadoop下添加节点和删除节点

http://www.dataguru.cn/forum.php?mod=viewthread&tid=175348 ...

2014-06-28 23:21:41 53

转载 hadoop 1.2.1的API地址

http://hadoop.apache.org/docs/r1.2.1/api/index.html ...

2014-06-22 22:16:41 38

转载 在Hadoop1.2.1上运行第一个Hadoop程序FileSystemCat

1.设置hadoop-env.sh的exportHADOOP_CLASSPATH=/home/grid/hadoop-1.2.1/myclass 2.设置JAVA_HOME和ClassPath ...

2014-06-22 21:52:05 70

转载 hadoop各版本下载地址

http://mirror.bit.edu.cn/apache/hadoop/common/ ...

2014-06-14 15:56:31 116

转载 Hadoop常用命令

1.向Hadoop中复制文件,一定要是目录对目录:bin/hadoop fs -put ../input in2.查看Hadoop的文件:bin/hadoop fs -ls ./in3.启动集群:bin/star...

2014-06-14 14:32:32 51

转载 hadoop在子节点上没有datanode进程

经常会有这样的事情发生:在主节点上start-all.sh后,子节点有TaskTracker进程,而没有DataNode进程。环境:1NameNode 2DataNode三台机器,Hadoop为1.2.1解决办法:...

2014-06-14 13:30:52 264

转载 Linux下出现command not found的解决办法

不管是普通用户还是ROOT用户,修改~/.bash_profile文件,在文件最后加上:export PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr...

2014-06-08 09:18:32 184

转载 配置Hadoop1.2.1

1.从Apache官网上下载1.2.1,地址:http://apache.dataguru.cn/hadoop/common/hadoop-1.2.1/hadoop-1.2.1-bin.tar.gz2.拷贝文件到虚拟机下(v...

2014-06-07 23:19:24 67

转载 Linux下我常用命令

1.scp:scp ./id_rsa.pub master@192.168.37.1:/home/slave1/.ssh/authorized_keys--从一台机器拷贝到另外一台机器2.tar -xzvf xxx.gz--...

2014-06-07 22:23:26 61

转载 在Linux下实现SSH免密码登录

1.在第两台台PC上输入:ssh-keygen -t rsa,然后敲三下回车,然后ll -a看下是否有.ssh目录2.在第一台机器上把id_rsa.pub以authorized_keys为文件名拷贝到第二台机器上,第二台机器...

2014-06-07 22:05:39 41

转载 Linux下修改用户名

修改用户名:以root身份登录,然后使用下列命令进行修改usermod -l NewUser -d /home/NewUser -m OldUser-l 修改用户名-d 修改登录后使用的路径-m 修改登录名称...

2014-06-07 17:28:57 53

转载 在Ubuntu安装JDK1.6详细步骤

1.首先安装JDK1.6,下载地址:http://pan.baidu.com/s/1c0u2iVA2.下载完成后是BIN格式的文件,拷贝到/home/master下3.执行:sudo chmod u+x jdk.bin,...

2014-05-25 00:24:55 114

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除