阿里巴巴开源框架JarsLink



JarsLink (原名Titan) 是一个基于JAVA的模块化开发框架,它提供在运行时动态加载模块(一个JAR包)、卸载模块和模块间调用的API。JarsLink是蚂蚁金服微贷事业群技术部开发的JAVA框架,也是阿里巴巴的开源项目之一https://github.com/alibaba/jarslink,目前在微贷事业群广泛使用。

需求背景

  • 应用拆分的多或少都有问题。多则维护成本高,每次发布一堆应用。少则拆分成本高,无用功能很难下线。

  • 故障不隔离。当一个系统由多人同时参与开发时,修改A功能,可能会影响B功能,引发故障。

  • 多分支开发引发冲突。多分支开发完之后合并会产生冲突。

  • 牵一发动全身。一处核心代码的改动,或一个基础Jar的升级需要回归整个系统。

  • 升级和迁移成本高。中间件升级每个应用都有升级成本。

模块化开发的好处

  • 可插拔,一个应用由多个模块组成,应用里的模块可拆和合,模块可快速在多个系统中迁移和部署。

  • 模块化开发,模块之间互相隔离,实现故障隔离。

  • 一个模块一个分支,不会引发代码冲突。

  • 在模块中增加或修改功能,只会影响当前模块,不会影响整个应用。

  • 动态部署,在运行时把模块部署到应用中,快速修复故障,提高发布效率。

  • 多版本部署,可以在运行时同时部署某个模块的新旧版本,进行AB TEST。

  • 减少资源消耗,通过部署模块的方式减少应用数量和机器数量。

JarsLink的应用场景

  • 微服务集成测试, 目前一个微服务是一个FAT JAR,如果有几十个微服务,则需要启动很多进程,DEBUG端口会很多,使用JarsLink框架合并FAT JAR,再路由请求到其他JAR,就可以只启动一个进程进行DEBUG测试。

  • 数据管理中心,数据采集的数据源多,而且每种数据源都需要对接和开发,通过模块化开发,实现一个数据源使用一个模块进行对接。

  • 指标计算系统,每个TOPIC一个模块,把消息转发到模块中进行消息处理。

  • 后台管理系统,几乎每个系统都有后台开发的需求,新建应用则应用数多,维护成本高,引入模块化开发,一个二级域一个模块来开发后台功能。

目前蚂蚁金服微贷事业部几个系统和几十个模块已经使用JarsLink框架。

JarsLink的特性

隔离性

  • 类隔离:框架为每个模块的Class使用单独的ClassLoader来加载,每个模块可以依赖同一种框架的不同的版本。

  • 实例隔离:框架为每个模块创建了一个独立的Spring上下文,来加载模块中的BEAN,实例化失败不会影响其他模块。

  • 资源隔离:后续会支持模块之间的资源隔离,每个模块使用独立的CPU和内存资源。

动态性

  • 动态发布:模块能在运行时动态加载到系统中,实现不需要重启和发布系统新增功能。支持突破双亲委派机制,在运行时加载父加载器已经加载过的类,实现模块升级依赖包不需要系统发布。

  • 动态卸载:模块能在运行时被动态卸载干净,实现快速下线不需要功能。

易用性

提供了通用灵活的API让系统和模块进行交互。

(全文完点击原文查看开源项目)


近期很多人都在说想学习hadoop大数据,马云也说了:“未来最大的资源就是数据,不参与大数据十年后一定会后悔!”


目前腾讯的社交数据,百度的搜索数据以及阿里的交易数据每天都是PB级别,都是公司最重要的资产。懂得大数据的工程师已成为炽手可热的人才,平均起薪已达年薪30万以上,BAT大量需要这方面人才,这也是进入大公司的捷径。


鉴于此,推荐一位非常牛逼的Hadoop技术牛人:林中天,花名:铁匠。计算机硕士,原BAT高级技术专家,大数据团队Leader,PB级以上数据处理和挖掘专家。


在BAT主导研发过个性化推荐系统、自然语言处理、图像识别等领域的产品和架构,多次出任面试官参与BAT招聘和出题,曾为多家国企上市公司提供Hadoop大数据内训,包括中国移动研究院、重庆高速、安徽电信等,曾获得百度最佳技术个人奖


他现在在做大数据培训,对人工智能大数据感兴趣的可以加他助理了解,扫一扫下面的二维码添加,注明来自并发编程网。可以获得他们的内部教材,以及3980元的VIP视频,先到先得!


 长按即可添加


VIP资料简介


这套VIP视频不仅详细讲了Hadoop生态中各组件的开发技术,还深度讲解了数据挖掘、人工智能相关的算法、神经网络、深度学习等内容!


还有BAT专家精心挑选的技术书籍。


而且为了方便初次接触大数据的小伙伴能快速的进入学习状态,专门加入了大数据学前必备知识。


从语言知识准备到Hadoop集群搭建,需要用到的各种安装包也已经准备好,这套资料可以让你轻松学习大数据技术。


  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值