Kitten:编写和运行Hadoop YARN程序的好帮手

http://www.cloudera.com/wp-content/uploads/2012/06/kitten_yarn2.jpg

程序员面对YARN应用的开发就像这只小猫对一团毛线一样一筹莫展

Kitten是Cloudera数据科学高级总监Josh Wills开发的一组工具,实现了配置和运行YARN应用的模板代码,使开发者可以将更多精力放在应用本身的逻辑上,无需太多考虑Hadoop集群的问题。项目于2012年6月发布

Kitten主要可以分为两个部分:

  • Lua编写的配置文件,用于指定应用需要从集群获得的资源
  • 一对Guava服务,一个用于客户端,一个用于应用master,处理应用运行期间执行的所有RPC。

Kitten目前只支持Java语言运用。在项目FAQ里,提到计划增加对C++应用的支持。此外也希望能更好地支持YARN上各种类型应用。

GitHub链接:https://github.com/cloudera/kitten/

这是一个很好的学习编写YARN应用的实例。至于如何编写YARN应用,应该参考这篇官方文档

关于KittenTransfer 该程序是为局域网即时通信开发,难点之一在于局域网内用户列表的建立。当KittenTransfer启动时,首先向局域网内所有启动了KittenTransfer的用户发送一条广播消息,收到消息后,在用户列表中添加发送广播消息的用户。当用户退出KittenTransfer时, 也发送一条广播消息通知其他用户,之后其他用户将用户列表中的该用户删除。启动KittenTransfer后,可以实现与多用户的即时通信,文件传输。消息窗口采用Java Socket处理。 开发环境: Windows XP SP2 + Eclipse 3.3.0 + JDK1.5.0_15 基本使用方法: 1.双击KittenTransferjar.jar或着运行KittenTransfer.java类 2.在用户列表中选择要通信的用户,点击“聊天”按钮,弹出即时通信窗口。如果用户列表中没有显示您要通信的用户,请点击“添加用户”按钮,输入要添加的用户IP添加。 3.在消息输入窗口输入消息后,点击“发送”按钮或者使用键盘快捷键“Ctrl+Enter” 4.向对方传送文件时候,点击“选择”按钮,然后点击“传送”按钮。当对方点击“接收”按钮后,文件开始传送。 KittenTransfer目前发布第一版,如果各位朋友喜欢该程序,希望大家能够支持鼓励一下。由于该程序是利用工作之余的休息时间编写,其中必定还有不足之处,欢迎各位朋友提出宝贵的意见,作者真诚期待与各位朋友共同学习探讨。 作  者 :史永龙 联系方式 :bluecatsyl@sina.com 2009年2月
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值