- 博客(14)
- 资源 (3)
- 收藏
- 关注
原创 程序员初学机器学习算法
英文原文:4 Self-Study Machine Learning Projects 学习机器学习有很多方法,大多数人选择从理论开始。 如果你是个程序员,那么你已经掌握了把问题拆分成相应组成部分及设计小项目原型的能力,这些能力能帮助你学习新的技术、类库和方法。这些对任何一个职业程序员来说都是重要的能力,现在它们也能用在初学机器学习上。 要想有效地学习机器学习你必须学习相关理论,
2014-05-28 17:12:27 2016
原创 标准wordcount
package wordcount;import java.io.IOException;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.Int
2014-05-28 15:18:02 1166
原创 volatile
Java 语言中的 volatile 变量可以被看作是一种 “程度较轻的 synchronized”;与 synchronized 块相比,volatile 变量所需的编码较少,并且运行时开销也较少,但是它所能实现的功能也仅是synchronized 的一部分。本文介绍了几种有效使用 volatile 变量的模式,并强调了几种不适合使用 volatile 变量的情形。锁提供了两种主要特
2014-05-26 11:14:42 939 2
原创 topk记录
lk@lk-virtual-machine:~/hadoop-1.0.1/bin$ ./hadoop dfs -rmr outputDeleted hdfs://localhost:9000/user/lk/outputlk@lk-virtual-machine:~/hadoop-1.0.1/bin$ ./hadoop jar ~/mytopk.jar top.Top input out
2014-05-11 21:26:59 1357
原创 hadoop记录topk
lk@lk-virtual-machine:~/hadoop-1.0.1/bin$ ./hadoop jar ~/hadoop-1.0.1/to.jar top.Top input output14/05/12 03:44:37 WARN mapred.JobClient: Use GenericOptionsParser for parsing the arguments. Applicat
2014-05-11 19:54:14 2090
原创 hadoop记录topk
lk@lk-virtual-machine:~$ cd hadoop-1.0.1lk@lk-virtual-machine:~/hadoop-1.0.1$ ./bin dfs -mkdir inputbash: ./bin: 是一个目录lk@lk-virtual-machine:~/hadoop-1.0.1$ ./bin/hadoop dfs -mkdir input14/05/
2014-05-11 15:02:57 1727
原创 hadoop测试
lk@lk-virtual-machine:~$ cd hadoop-1.0.1lk@lk-virtual-machine:~/hadoop-1.0.1$ cd binlk@lk-virtual-machine:~/hadoop-1.0.1/bin$ ./stop_all.shbash: ./stop_all.sh: 没有那个文件或目录lk@lk-virtual-machine:~
2014-05-04 20:24:39 2401
原创 hadoop无法启动
dataNode 无法启动是配置过程中最常见的问题,主要原因是多次format namenode 造成namenode 和datanode的clusterID不一致。建议查看datanode上面的log信息。解决办法:修改每一个datanode上面的CID(位于dfs/data/current/VERSION文件夹中)使两者一致。
2014-05-03 17:11:53 1108
原创 cygwin
在windows下通过安装cygwin模拟linux环境,然后再安装hadoop,是一种简单方便的方式。为hadoop准备的windows下cygwin环境安装过程如下:- 下载安装文件最新的cygwin安装文件setup.exe下载地址在这里:http://cygwin.com/install.html。用最新版本的cygwin就可以,我用的是2.774版本的安装程序。- 安装cyg
2014-05-02 12:54:25 3664 1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人