- 博客(8)
- 资源 (60)
- 收藏
- 关注
原创 Mahout 定制ClusterDumper:只输出中心点
hadoop1.0.4,mahout0.5。mahout里面有实现读取聚类算法中的方法,叫做ClusterDumper,这个类输出的格式一般如下:VL-2{n=6 c=[1.833, 2.417] r=[0.687, 0.344]} Weight: Point: 1.0: [1.000, 3.000]... 1.0: [3.000, 2.500]VL-11{n=7 c=[2.8
2013-12-26 21:49:06 2983
原创 hadoop MultipleTextOutputFormat 解析mahout 中kmeans算法输出到不同文件
hadoop 1.0.4 ,mahout 0.5首先说明,本篇博客参考:http://blog.csdn.net/wypblog/article/details/17001131 。其次,这里的hadoop版本用处不是很大,虽然使用的是hadoop1.0.4的版本,但是用到的还是之前的JobConf,因为Job设置不了MultipleTextOutputFormat类。具体参考:http://
2013-12-24 18:47:08 2779
原创 flex 上拉页面显示datagrid
flex:3.0本篇blog参考:http://blog.minidx.com/2008/08/02/1208.html、http://blog.minidx.com/2008/10/04/1473.html写这篇博客主要是因为这两天做的东西涉及到了flex中的visible和includeinlayer属性,通过这两个属性可以重新布局页面,达到动态布局的效果,但是自己在做的时候,设置这两
2013-12-23 17:17:32 1970
原创 hadoop 启动时间写入文件
hadoop1.0.4;昨天看了源码,说到可以使用log信息来打印出来JobTracker的启动时间,然后来解析这个Log文件,但是这里有个问题,就是log文件是在hadoop的主节点namenode的linux机器中的,不是在客户端,读取会有一定的问题,然后就又想到了还是写文件(hdfs文件系统)的方式。只要在JobTracker启动之后,然后再写入即可。还是按源码来说(首先把原来修改的
2013-12-20 14:31:36 2710
原创 hadoop JobTracker获取启动时间
hadoop1.0.4;昨天写了一篇blog,是关于获取hadoop集群任务运行信息的例子,仿照50030界面实现。但是昨天遇到一个问题,就是当集群是第一次启动的时候,获得不了JobID,然后就拼凑不了JobID了,这样对后面的程序会有影响,所以想获得集群的第一个JobID,看到这个JobID是由“job_”+JobTracker启动时间+“0001”得到的,所以获得JobTracker的启动
2013-12-19 23:45:06 3206
原创 hadoop任务监控实现
hadoop1.0.4,struct2.3。本工程仿效hadoop 50030监控界面,取得任务信息,并显示出来。工程可以在http://download.csdn.net/detail/fansy1990/6737451下载。一、先看效果吧:1. 正在运行的任务:从上面可以看到jobId为 job_201312181939_0002正在运行;2. 运行失败:上
2013-12-18 23:48:10 7847 1
原创 easyhadoop:failed to open stream:Permission denied in /var/www/html/index.php
今天又重新部署了下easyhadoop,结果apache后台服务器报这个错误:[Fri Dec 13 10:32:41 2013] [notice] SIGHUP received. Attempting to restart[Fri Dec 13 10:32:41 2013] [notice] Digest: generating secret for digest authentica
2013-12-13 11:26:18 5036
原创 云算法调用平台--web 工程调用hadoop集群1.4
Mahout版本:0.7,hadoop版本:1.0.4,jdk:1.7.0_25 64bit,struts2本次版本更新如下:1)修改了整个目录结构:前台页面的三个模块分开文件夹,一个文件夹只包含一个功能块;前台发送请求给struts,struts调用action,action调用相应的service完成算法调用,service和action全部分开;2)前台调用界面增加了相关验证,同
2013-12-02 00:33:50 6942 2
Mahout案例实战 约会推荐
2015-03-11
FP关联规则置信度
2014-11-19
libimesti推荐系统
2014-09-30
nmon 和 nmon analyser工具
2014-09-24
easyui+spring+struts+hibernate 实例
2014-09-16
MR Unit test需要的相关jar包
2014-07-29
Mahout贝叶斯分类不含标签数据
2014-07-20
Mahout算法调用展示平台2.1-part3
2014-07-06
Mahout算法调用展示平台2.1-part2
2014-07-06
mahout0.9源码(支持hadoop2)
2014-04-09
博客推荐系统源码
2014-02-18
web平台调用hadoop集群2.0
2014-01-03
hadoop启动时间写入文件
2013-12-20
监控hadoop任务信息
2013-12-18
web 工程调用hadoop集群1.4
2013-12-02
flex datagrid doubleclick 实例
2013-11-22
flex dispatchEvent 实例工程
2013-11-19
web 工程调用hadoop集群1.3
2013-11-17
flex 调用java
2013-11-12
svd mahout算法
2013-10-31
读取HDFS序列化文件解析key、value可视化输出
2013-10-25
spark-yarn_2.10-1.6.0-cdh5.7.3.jar
2016-12-24
hotspot关联规则
2015-03-14
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人