Grid Application Development: e-Science Application using GT-4 and Web Services (2)

实例研究

网格计算为我们提供了超级的计算能力,但是到底什么样的应用将需要用到网格的能力呢?就目前来说e-Science应用是一个十分合适的候选者。在文章的这一部分,我将引入这样一个实例(分布式肾脏分析模型系统)来说明网格的实际应用领域。该系统的需求不算复杂,医学科研人员需要通过该系统对人体肾脏进行分析,他们可以提供不同的边界条件和实例参数,也可以选择不同的分析模型。当他们决定好参数之后,所有的分析将在远程计算机上的模型上展开直到所有的结果返回给客户端程序并以3D虚拟模型的形式展现在这些科学家的计算机上。系统将为用户提供完善的基于Web的界面,并且一旦用户登陆他将可以使用所有的分析模型来进行分析。回顾这些需求,我们发现后台分析过程是可以发挥网格优势的地方,另外不同的模型可能位于世界各地不同的服务器上,它们可能有不同的访问和管理政策,这些又必须完全对用户透明,所以网格的Single Sign-On安全机制将极大的方便用户权限的管理。

1:系统体系结构图

在系统体系结构图中,用户通过系统提供的门户与系统交互,VOVirtual Organization)将管理用户凭证和Single Sign On, Gridbus Broker将用于用户任务的管理和不同分析模型的通讯,Visualization软件包将把文本分析结果以3D模型的形式展现给用户。 这种体系结构是大多数e-Science应用都采用的基本架构,不管只局限于本系统。VO服务实际上就是用户和组织管理服务,GT-4的安全基础服务将为我们提供这些基本的安全机制。所以我们首先需要做的是将各种分析模型整合在一起并能够将其发布为一个网格服务供Gridbus Broker(参见文章第一部分)来调用。由于医学模型分析都是一些数值分析程序,很多都是用Fortune等语言来编程的,我们的第一步就是要使用Java来创建这些遗留程序的包装程序,然后再利用GT-4WSRF来开发网格服务。

整合遗留程序

首先我们来看看如何整合遗留程序,因为我们的第一个分析模型KSim来自法国,它使用的是Fortune语言,该分析程序是一个可执行文件,它接受一个文本文件parfile.txt作为输入,用户可以在该文件中提供所有的程序所需要的参数然后运行此程序。程序的输出是一个XML文档,包含了所有的分析结果。在我们将它发布成GT-4网格服务之前,我们需要使用Java将该程序包装成Java程序,然后我们可以使用GT-4Java WS Core来进行网格的开发。

public final class KSimExecutor implements Runnable{

       private KSimResource resource = null;

       private String executor = null;

      

       public KSimExecutor(KSimResource resource) throws Exception{

              this(resource, System.getenv().get("KSIM_EXECUTOR"));

       }    

       public KSimExecutor(KSimResource resource, String executor) throws Exception{

              this.resource = resource;

              this.executor = executor;

              prepare();

       }

       public void run(){

              int procCode = execute();

              if(procCode == 0){

                     resource.setStatus(KSimConstant.Status.SUCCESS);

              }else{

                     resource.setStatus(KSimConstant.Status.FAIL);

              }

       }

       /**

        * execute the fortune program for the Ksim

        *

        * @return

        */

       private int execute(){

              try{

                     //create the process using the ksim executable program

                     Runtime runtime = Runtime.getRuntime();

                     Process proc = runtime.exec(executor);

                     //execute the process and return the outcome 0 stands for success

                     return proc.waitFor();

              }catch(Exception e){

                     return -1;

              }

       }

       /**

        * <code> createParfile </code> reads in the parameters from KSimResource and creates

        * the parfile.txt for the ksim simulator

        */

       private void prepare() throws Exception{

              FileWriter writer = null;

              try{

                     File parfile = new File("parfile.txt");

                     File saveDir = new File("save");

                     if(!saveDir.exists()){

                            if(!saveDir.mkdir()){

                                   throw new Exception("Failed to create save directory");

                            }

                     }

                     String output = resource.getOutput();

                     File outputFile = new File(output);

                     if(outputFile.exists()){

                            //clear the current file and create a new output file

                            outputFile.delete();

                            outputFile.createNewFile();

                     }

                     //construct the parfile.txt file

                     writer = new FileWriter(parfile);

                    

                     writer.write(" "+resource.getInput()+"/n");

                     writer.write(" "+output+"/n");

                     writer.write(" "+resource.getSolute()+"/n");

                     writer.write(" "+resource.getTube()+"/n");

                     writer.write(" "+resource.getRegion()+"/n");

                     writer.write(" "+parseFactor(resource.getFactor())+"/n");

                     writer.flush();

                     writer.close();

              }catch(IOException e){

                     if(writer != null){

                            try{

                                   writer.close();

                            }catch(Exception uE){}

                     }

                     throw new Exception("Failed to create the required parfile.txt”,e);

              }

       }

       /**

        * <code> parseFactor </code> parses the factor and convert to correct format for ksim

        *

        * @param factor

        * @return

        * @throws Exception

        */

       private String parseFactor(int factor) throws Exception{

              if(factor < -100 || factor > 100 ){

                     throw new Exception("Factor exceeds the acceptance range.");

              }

              String suffix = null;

              String prefix = null;

              if(factor < 0){

                     suffix = "e0";

                     prefix = new Float(1 - (float)factor / 100).toString();

              }else{

                     suffix = "d0";

                     prefix = new Float(1+ (float)factor / 100).toString();

              }

              return prefix+suffix;

       }    

}

KSimExecutor包装程序实现了Runnable接口目的是可以让它在独立的线程中运行,因为分析程序需要运行一段时间,我们不想浪费资源等待它的执行。我们的包装程序首先将分析输入的数据KSimResource, 将所有所需的参数动态创建parfile.txt文件和save目录。在execute方法中,我们将创建一个Runtime类,它将利用系统环境变量中读取KSim可执行文件的绝对路径创建一个系统进程,并执行该进程。run方法简单的调用execute方法并记录其结果。通过这个包装程序,我们就可以在其他Java程序中使用我们的KSim分析模型了。我们可以开始进入GT-4网格服务的开发阶段。

总结

文章的这一部分我们简单的讨论了我们将要实现的系统的需求和体系结构,该体系结构可以作为对e-Science应用一个通用的解决方案。另外我们还使用Java对我们的第一个Fortune语言编写的分析模型KSim进行了包装,以便其他的Java程序使用。文章的下一部分,我们将开始GT-4网格服务的开发。


Copyright Reserved by Xingchen Chu,Research Programmer,GRIDS laboratory,Department of Computer Science and Software Engineering,The University of Melbourne.

email: xchu@csse.unimelb.edu.au
work: +61 3 8344 1335

Python网络爬虫与推荐算法新闻推荐平台:网络爬虫:通过Python实现新浪新闻的爬取,可爬取新闻页面上的标题、文本、图片、视频链接(保留排版) 推荐算法:权重衰减+标签推荐+区域推荐+热点推荐.zip项目工程资源经过严格测试可直接运行成功且功能正常的情况才上传,可轻松复刻,拿到资料包后可轻松复现出一样的项目,本人系统开发经验充足(全领域),有任何使用问题欢迎随时与我联系,我会及时为您解惑,提供帮助。 【资源内容】:包含完整源码+工程文件+说明(如有)等。答辩评审平均分达到96分,放心下载使用!可轻松复现,设计报告也可借鉴此项目,该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的。 【提供帮助】:有任何使用问题欢迎随时与我联系,我会及时解答解惑,提供帮助 【附带帮助】:若还需要相关开发工具、学习资料等,我会提供帮助,提供资料,鼓励学习进步 【项目价值】:可用在相关项目设计中,皆可应用在项目、毕业设计、课程设计、期末/期中/大作业、工程实训、大创等学科竞赛比赛、初期项目立项、学习/练手等方面,可借鉴此优质项目实现复刻,设计报告也可借鉴此项目,也可基于此项目来扩展开发出更多功能 下载后请首先打开README文件(如有),项目工程可直接复现复刻,如果基础还行,也可在此程序基础上进行修改,以实现其它功能。供开源学习/技术交流/学习参考,勿用于商业用途。质量优质,放心下载使用。
1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。 1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。 1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。
1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。 1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。 1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。
各种安全相关思维导图整理收集。渗透步骤,web安全,CTF,业务安全,人工智能,区块链安全,数据安全,安全开发,无线安全,社会工程学,二进制安全,移动安全,红蓝对抗,运维安全,风控安全,linux安全.zip项目工程资源经过严格测试可直接运行成功且功能正常的情况才上传,可轻松复刻,拿到资料包后可轻松复现出一样的项目,本人系统开发经验充足(全领域),有任何使用问题欢迎随时与我联系,我会及时为您解惑,提供帮助。 【资源内容】:包含完整源码+工程文件+说明(如有)等。答辩评审平均分达到96分,放心下载使用!可轻松复现,设计报告也可借鉴此项目,该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的。 【提供帮助】:有任何使用问题欢迎随时与我联系,我会及时解答解惑,提供帮助 【附带帮助】:若还需要相关开发工具、学习资料等,我会提供帮助,提供资料,鼓励学习进步 【项目价值】:可用在相关项目设计中,皆可应用在项目、毕业设计、课程设计、期末/期中/大作业、工程实训、大创等学科竞赛比赛、初期项目立项、学习/练手等方面,可借鉴此优质项目实现复刻,设计报告也可借鉴此项目,也可基于此项目来扩展开发出更多功能 下载后请首先打开README文件(如有),项目工程可直接复现复刻,如果基础还行,也可在此程序基础上进行修改,以实现其它功能。供开源学习/技术交流/学习参考,勿用于商业用途。质量优质,放心下载使用。
1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。 1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。 1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。
1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。 1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。 1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值