云算法调用平台--web 工程调用hadoop集群1.4

原创 2013年12月02日 00:33:50

Mahout版本:0.7,hadoop版本:1.0.4,jdk:1.7.0_25 64bit,struts2

本次版本更新如下:

1)修改了整个目录结构:前台页面的三个模块分开文件夹,一个文件夹只包含一个功能块;前台发送请求给struts,struts调用action,action调用相应的service完成算法调用,service和action全部分开;

2)前台调用界面增加了相关验证,同时把html修改为了jsp,防止提交的action目录不对;

3)本次可用算法:hadoop模块的Text2Vector,mahout的canopy算法;

4)增加了算法监控界面:所有的action首先跳转到其对应的action,然后全部跳转到中间转换的action:transform,transform主要是获得当前运行job的相关信息,获得后返回给monitoring.jsp,显示监控信息。monitoring.jsp每隔三秒刷新,向transform action发送请求获得当前运行job的最新信息。如此循环,等到当前算法的所有job都运行完成后,monitoring.jsp不再发送请求,算法运行完毕。

5)界面修改更加美观。

1.运行本项目的时候需要保证集群已经跑了一次成功的任务,不然会报下面的错误:


2. 运行text2vectory 算法的监控页面:


3.算法运行完成后的界面:


4. 调用canopy可以使用text2vector的输出数据,目前可用的距离计算类只有下图所示的:


5. 点击提交后,会出现一个错误,点击确定后,就可以出现监控界面了,同时这里是否要对原始数据进行分类选择否,是的情况会出现权限不够,暂时没有解决。


6. 算法运行完成后的界面:



本次版本下载在:http://download.csdn.net/detail/fansy1990/6641325


分享,成长,快乐

转载请注明blog地址:http://blog.csdn.net/fansy1990


云算法调用平台--web 工程调用hadoop集群1.3

Mahout版本:0.7,hadoop版本:1.0.4,jdk:1.7.0_25 64bit,structs2; 本篇介绍的是一个云算法调用平台,主要的作用是使用前台的参数配置,然后调用hadoop集...
  • fansy1990
  • fansy1990
  • 2013年11月17日 01:11
  • 5005

Hadoop集群算法调用--web平台2.0

前记 各种版本:Mahout版本:0.7,hadoop版本:1.0.4,jdk:1.7.0_25 64bit,struts2 本版本是《云算法调用平台--web 工程调用hadoop集群1.4》的升级...
  • fansy1990
  • fansy1990
  • 2014年01月03日 02:20
  • 3963

hadoop集群算法调用--web平台2.0

目录(?)[+] 前记 各种版本:Mahout版本:0.7,hadoop版本:1.0.4,jdk:1.7.0_25 64bit,struts2 本版本是《云算法调用平台--web...
  • happywxp
  • happywxp
  • 2014年05月27日 16:12
  • 260

web工程调用Hadoop集群1---win7下java工程调用虚拟机Hadoop集群

需要注意的地方: (1)修改C:\Windows\System32\drivers\etc\hosts文件: 在最后添加一行 192.168.128.138 hadoop ,(这个视具体情...
  • happywxp
  • happywxp
  • 2014年05月27日 19:21
  • 256

云服务器搭建hadoop集群

1:环境准备 3台服务器配置如下公网ip 119.29.186.83 内网ip10.104.157.113 公网ip 119.29.250.47 内网ip 10.104.9.181 公网...
  • qq_30259339
  • qq_30259339
  • 2016年05月13日 23:46
  • 579

WebService怎么理解和JDK1.4下使用WebService

由于项目需要,必须使用WebService进行接口数据交换。于是百度了很多有关的信息,挑选了一些解释的非常好的解释:         WebService是一种跨编程语言和跨操作系统平台的远程调用技术...
  • a445849497
  • a445849497
  • 2016年07月19日 14:21
  • 2634

web项目 调用外部接口 例子

import java.io.BufferedReader; import java.io.IOException; import java.io.InputStream; import jav...
  • LuHanqiang
  • LuHanqiang
  • 2017年08月22日 17:28
  • 463

java客户端调用webservice的例子

 java调用webservice的一段代码:import javax.xml.namespace.QName;import org.apache.axis.client.Call;import or...
  • Johnson_Hong
  • Johnson_Hong
  • 2008年01月30日 16:14
  • 2442

Python Web中REST API使用示例——基于云平台+云服务打造自己的在线翻译工具

做为一个程序员可能在学习技术,了解行业新动态,解决问题时经常需要阅读英文的内容;而像我这样的英文小白就只能借助翻译工具才能理解个大概;不禁经常感慨,英文对学习计算机相关知识太重要了!最近发现IBM的云...
  • testcs_dn
  • testcs_dn
  • 2016年01月03日 17:43
  • 6442

axis2 访问 axis 1.4

axis2 与 axis1.4 的一个兼容性问题 这个问题是我在实际项目中使用 axis2 stub 访问一个 webservice 并发送一段二进制数据时遇到的。  webservice 是由德国...
  • andrewgb
  • andrewgb
  • 2014年09月17日 14:08
  • 490
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:云算法调用平台--web 工程调用hadoop集群1.4
举报原因:
原因补充:

(最多只允许输入30个字)