阿里再开源!基于JAVA的模块化开发框架JarsLink
阿里妹导读:JarsLink是一个基于JAVA的模块化开发框架,它提供在运行时动态加载模块(JAR包)、卸载模块和模块间调用的API,它能够帮助你进行模块化开发,也能帮助你的系统在运行时动态添加新功能,减少编译、打包和部署带来的发布耗时,同时它也是阿里巴巴的开源项目之一,目前在蚂蚁金服微贷事业群各团队广泛使用。
开源地址:https://github.com/alibaba/jarslink
需求背景
应用拆分的多或少都有问题。多则维护成本高,每次发布一堆应用。少则拆分成本高,无用功能很难下线。
故障不隔离。当一个系统由多人同时参与开发时,修改A功能,可能会影响B功能,引发故障。
多分支开发引发冲突。多分支开发完之后合并会产生冲突。
牵一发动全身。一处核心代码的改动,或一个基础Jar的升级需要回归整个系统。
升级和迁移成本高。中间件升级每个应用都有升级成本。
模块化开发的好处
可插拔,一个应用由多个模块组成,应用里的模块可拆和合,模块可快速在多个系统中迁移和部署。
模块化开发,模块之间互相隔离,实现故障隔离。
一个模块一个分支,不会引发代码冲突。
在模块中增加或修改功能,只会影响当前模块,不会影响整个应用。
动态部署,在运行时把模块部署到应用中,快速修复故障,提高发布效率。
多版本部署,可以在运行时同时部署某个模块的新旧版本,进行AB TEST。
减少资源消耗,通过部署模块的方式减少应用数量和机器数量。
JarsLink的应用场景
数据管理中心,如果你需要开发一个数据管理系统,这个系统需要去不同的异构系统采集数据,这些系统会提供不同类型的接口,如RPC,HTTP等。并且数据采集的数据源多,每种数据源都需要对接和开发,数据质量比较差,需要经常修改代码进行发布。在这种场景下,通过模块化开发,实现一个数据源使用一个模块进行对接,上线新数据源只需要新增模块,修改BUG只需要修改某个模块,并能快速上线。
后台管理系统,互联网应用发展到一定阶段会出现很多后台需求,如客服查询用户的信息帮助解答问题,开发查后台数据排查系统BUG,运营使用后台功能发送运营活动等。这些功能发布频率会大于核心系统,如果放在核心系统里会影响其稳定性,所以我们必须要建一个后台系统来开发后台功能,但是这样又带来一个新的问题,很多开发都会来这个系统进行开发,拉多分支造成代码冲突,A业务的BUG影响到B业务。所以如果每个业务线一个模块,每个模块使用一个单独的分支进行开发,就能进行隔离开发,提高开发速度,开发完后在运行时加载到系统中。
微服务集成测试, 目前一个微服务是一个FAT JAR,如果有几十个微服务,则需要启动很多进程,DEBUG端口会很多,使用JarsLink框架合并FAT JAR,再路由请求到其他JAR,就可以只启动一个进程进行DEBUG测试。
指标计算系统,可以把消息转发到不同的模块中进行处理,并输出指标。
目前蚂蚁金服微贷事业部几个系统和几十个模块已经使用JarsLink框架。
JarsLink的特性
隔离性
类隔离:框架为每个模块的Class使用单独的ClassLoader来加载,每个模块可以依赖同一种框架的不同的版本。
实例隔离:框架为每个模块创建了一个独立的Spring上下文,来加载模块中的BEAN,实例化失败不会影响其他模块。
资源隔离:后续会支持模块之间的资源隔离,每个模块使用独立的CPU和内存资源。
动态性
动态发布:模块能在运行时动态加载到系统中,实现不需要重启和发布系统新增功能。支持突破双亲委派机制,在运行时加载父加载器已经加载过的类,实现模块升级依赖包不需要系统发布。
动态卸载:模块能在运行时被动态卸载干净,实现快速下线不需要功能。
易用性
提供了通用灵活的API让系统和模块进行交互。
实现原理
模块加载
JarsLink为每个模块创建一个新的URLClassLoader来加载模块。并且支持突破双亲委派,设置了overridePackages的包将由子类加载进行加载,不优先使用父类加载器已加载的。
模块的卸载
卸载模块需要满足三个条件:
模块里的实例对象没有被引用
模块里的Class没有被引用
类加载器没有被引用
所以需要做到三点卸载实例,卸载类和卸载类加载器,整个模块的卸载顺序如下:
关闭资源:关闭HTTP连接池或线程池。
关闭IOC容器:调用applicationContext.close()方法关闭IOC容器。
移除类加载器:去掉模块的引用。
卸载JVM租户(开发中):卸载该模块使用的JVM租户,释放资源。
模块间隔离
模块化开发需要解决隔离性问题,否则各模块之间会互相影响。模块之间的隔离有三个层次:
类隔离:为每个模块创建一个类加载器来实现类隔离。
实例隔离:为每个模块创建一个新的IOC容器来加载模块里面的BEAN。
资源隔离:对每个模块只能使用指定的CPU和内存。
目前JarsLink实现了类隔离和实例隔离,资源隔离准备引入ALIJVM多租户来解决。
模块间通讯
模块之间的通讯也有三种方式,RPC,本地调用,深克隆/反射。
本地调用:目前JarsLink的doAction就是使用的这种通讯方式,这种方式要求模块的类加载器是父子关系,且IOC容器也是父子容器。
RPC调用:用于跨JVM的模块之间调用,利用SOFA 4动态API在模块中发布和引用TR服务来实现。
深克隆/反射:深克隆其他模块的入参,反射其他模块的方法实现调用。
类加载机制
OSGI类加载机制的关系采用的是网状结构,每个模块通过 Export-Package 来声明我要给别人用哪些类,通过 Import-Package来声明我要用别人的哪些类。JarsLink采用扁平化管理,每个模块都有一个共同的父类,这个父类加载器就是加载ModuleLoader类的加载器,如果是SOFA应用,模块的父加载器是KernelAceClassLoader,类加载器关系如下:
如果所有模块都需要使用的类,可以通过KernelAceClassLoader加载,如果是SOFA系统可以通过POM引入。
JarsLink框架类图
JarsLink框架的类图如下:
AbstractModuleRefreshScheduler:入口类,负责定期扫描本地和内存中的模块是否发生变更,如果变更,则更新模块。
ModuleLoader:模块加载引擎,负责模块加载。
ModuleManager:模块管理者,负责在运行时注册,卸载,查找模块和执行Action。
Module:模块,一个模块有多个Action。
Action:模块里的执行者。
阿里再开源!基于JAVA的模块化开发框架JarsLink相关推荐
- 蚂蚁金服开源 ——基于 SOFABoot 进行模块化开发
SOFA 中间件是蚂蚁金服自主研发的金融级分布式中间件,包含了构建金融级云原生架构所需的各个组件,包括微服务研发框架,RPC 框架,服务注册中心,分布式定时任务,限流/熔断框架,动态配置推送,分布式链 ...
- 国产开源基于 Java 的轻量级 CMS 解决方案 天梯
天梯(tianti) Java 轻量级的 CMS 解决方案-天梯.天梯是一个用 Java 相关技术搭建的后台 CMS 解决方案,用户可以结合自身业务进行相应扩展,同时提供了针对 dao.service ...
- 18个开源的Java CMS
18个开源的Java CMS 1.InfoGlue infoglue是一个高级的.可扩展的.健壮的内容管理系统,完全用Java开发.重要的功能包括完全支持多语言,站点之间良好的重用,以及广泛的集成能力 ...
- OpenJWeb(v1.9)企业级信息化应用平台开源版发布公告(基于Java语言开发)
OpenJWeb(v1.9) 企业级信息化应用平台 开源版发布公告 (基于Java语言开发) 软件开发人员的创业伴侣.架构参考 软件外包公司的二次开发利器 Java培训机构 ...
- OpenJWeb(v1.9) 企业级信息化应用平台开源版发布公告(基于Java语言开发)
软件开发人员的创业伴侣.架构参考 软件外包公司的二次开发利器 Java培训机构的经典实战教程 政府.企业节约信息化成本的法宝 关键词 :java web应用 企业级 信息化 快速开发平台 发布时 ...
- Java微服务_医疗管理项目_基于若依快速开发框架
一.项目简介 项目简介:尚医疗是专门为各大医院.门]诊提供的一款医疗管理平台.系统包含:系统 管理.药品进销存管理.看病就诊.收费管理.检查管理.数据统计等核心模块.通过尚医 疗系统可以快速方便的管理 ...
- 基于Java的开源CMS有哪些推荐,各自特点是什么
选了10个最强大.最易用的CMS,向大家做一个简要介绍. Alfresco是一个开源的企业网站内容管理系统,它提供了文档管理.多人协作.记录管理.知识管理网页内容和图像管理等功能.它使用Spring. ...
- java eop_javashopeop Javashop-eop是一套开源的java快速开发框架 联合开发网 - pudn.com
javashopeop 所属分类:Java编程 开发工具:Java 文件大小:10761KB 下载次数:5 上传日期:2017-01-24 13:21:05 上 传 者:zhangqiang 说明: ...
- 阿里开源的Java诊断工具——Arthas
文章目录 1 问题背景 2 前言 3 Arthas有什么作用 4 入门小实践 5 SpringBoot应用.Arthas.Arthas Tunnel Server之间的关系 1 问题背景 线上生产环境 ...
最新文章
- Android进阶知识:事件分发与滑动冲突(一)
- linux 磁盘诡异的被占用
- 简单探索MNIST(Softmax回归和两层CNN)-Tensorflow学习
- Kibana:数据分析的可视化利器
- matlab error函数_深度对比Python(Numpy,Scipy)与Matlab的数值精度
- idea ssm html增删改,intellij idea采用ssm框架实现的数据库增删查改demo
- JAVA并发编程实践 下载
- Atitit 档案学 档案管理 attilax学习总结
- 工业互联网大数据之数据管理与治理的简易理解
- 测试工程师从面试到入职
- 基于Python的自动聊天机器人
- 大数据比手势锁靠谱?支付宝回应质疑
- error in ./node_modules/@lit/reactive-element/decorators/state.jsModule parse failed: Unexpected
- IDEA文档注释(教程+模板)
- 真实生活的记录:我三年的外企生涯(10) 出处:天涯虚拟社区
- (更新时间)2021年6月5日 商城高并发秒杀系统(.NET Core版) 36-高并发秒杀项目k8s集群部署
- vCenter 6.7 HTML web console连接vm黑屏
- python里面title_python中title=(.*?)是什么意思
- hub_thread
- java-net-php-python-jspm招警考试模拟题库计算机毕业设计程序
热门文章
- 【Git笔记2】必知习惯和如何版本回退
- 自动化测试?看完这篇就够了
- 秒半价,限三天。戴尔i7高配电脑低至2750元
- 10 个不可不知的 Python 图像处理工具 !
- mysql 5.6 proxy_mysql-5.6+mysql-proxy构建主从复制与读写分离
- python用递归方式实现最大公约数_关于python最大递归深度 - 998
- modelandview使用过程_面试问烂的 Spring AOP 原理、Spring MVC 过程
- 深度学习:tensorflow Layers的实现,numpy实现深度学习(二)
- RabbitMq--4--集群(转载)
- 基础-快速排序(基本)