支持代码生成和多表查询的ORM框架MyORM(一)

一、概述

这里发布一个自己的ORM框架。有兴趣的朋友可以看一下,能留下一些宝贵的意见当然更好了。这个框架有两个版本,第一个版本已经用在了线上的系统中。最近几天重新调整了一下框架的体系结构,也只有这样才能跟大家描述清楚(尽量描述清楚)。毕竟是新版本,希望大家能够为我发现潜在的bug(当然也可以是一些明显的错误)。

由于我的项目是基于mysql的,所以与其他数据库相关的代码都去掉了,如果以后有这个需求的话再加上去。

不去与hibernateibatis比较了,存在总是有他的道理,他们已经非常成熟并且深入人心。

写这个框架是基于两个方面来考虑的:开发效率和运行效率。简而言之就是:

开发效率:

1.       bean层和dao层代码生成自动化,输入一份数据库设计文档(限定格式),自动生成bean层和dao层的代码。

2.       Bean的增删改全自动化,调用对应dao的增删改函数,就会自动生成并执行相应的sql语句。如 DAOManage.sysLogDao.save(log),会生成相应的insert语句并执行。这里的DAOManager是一个dao层自动生成的静态类。

3.       Sql查询结果的转换自动化,随便执行一条sql查询语句,执行结果为ResultList,执行ResultList.get(i).get(SysLog.class),不说大家也知道是什么意思。特别适合于多表查询。

运行效率:

1.       对于updatedelete,不需要先从数据库查出该对象,这里不用担心update时未更新的字段会被覆盖。

2.       对于insertupdate,只有发生了更改的字段才会入库,也就是说,当在一个属性上执行了set函数后该属性所对应的字段才会出现在sql语句中。

3.       对于select,从查询结果到javabean的转换避免了hibernateibatis的反射或动态代理。反射或动态代理比直接的java操作慢上200倍,如果用CIGLIB做优化大概慢上10-30倍。

4.       JDBC实现。

 

图片比较大,需要点击图片单独打开才能看得清楚

下载、安装和配置请见下一页

 

二、体系结构

整个框架的体系结构如图所示:

 



 

开发阶段的SQL生成器、代码配置器和代码生成器是一个已经做好的工具,以web形式发布。稍后做详细介绍。

整个体系结构的流程为:

1.       SQL生成器分析数据库设计文档(这里用的是EXCEL),提取并执行SQL建表语句

2.       代码配置器读取数据库表信息,配置和生成配置信息,保存为映射文件

3.       代码生成器读取映射文件生成beandao代码

4.       系统启动,加载映射文件

5.       执行dao层的增删改,生成相应的sql语句,执行SQL执行器的sql执行(增//改)函数,返回受影响的行数或自增一id

6.       执行SQL执行器的sql查询函数,生成resultset,查询结果处理器将resultset转换为对应的javabean

 

三、SQL生成器、代码配置器和代码生成器

1.工具一览

 

 



 

MyORM配置下的Doc->SQL链接是SQL生成器

MyORM配置下的SQL->Bean链接是代码配置配置器和生成器。

 

2. SQL生成器,从Excel提取并执行sql建表语句



 

直接把excel中的数据表拷到上面的文本框中就行了。Excel中的表格式如下:



 注:N:非空,PK:主键,AC:子增一,K:索引,这里创建的是组合索引。

 

3.代码配置器

 



 



 

该页面的上半部分,是数据库的基本配置信息。其中分表规则用于指定分表的后缀名,规定为总表名+_xxx”格式,这里规定得有些死板,以后再改。各分表和总表对应着同一个bean类。

下半部分是数据库中表,分表会被过滤掉。在这里可以配置表所对应的类名、字段所对应的属性名和属性的注释。对于属性名,已经按照java的规则(个别例外)由字段名默认生成。

对于上述图中的默认字段列,在查找、更新、或删除时会用到,可以根据字段进行找、更新、或删除(对应着 sqlwhere 字段),如果调用时无字段参数,就默认取为该字段。

上述的图中,除了字段注释可以为空外,其他都不能为空。

配置完毕后,点击生成按钮即可生成相应的beandao代码。

 

4.代码生成器

代码生成没有界面可以展现,只有执行完毕后的结果,如图:



 
 

5.java类型和sql类型的对应关系

 

 

事实上,我这里根本就不关心底层的sql类型,只关心jdbc中的数据类型,对应关系如下:

 

 

Jdbc类型

Java类型

Byte

byte

Integer

int

Short

short

Long

long

Float

float

Double

double

Boolean

boolean

String

String

Java.sql.Date

Java.util.Date

Java.sql.Time

Java.util.Date

Java.sql.Timestamp

Java.util.Date

Java.math.BigDicimal

double

Java.math.BigInteger

long

 

对于其他的数据类型,可以添加。

 

 

6.补充

针对每个表生成的bean类包含两个,一个是bean类,另一个是抽象父类beanBase,生成的代码存在于抽象父类中,开发者自己扩展的代码存在于bean子类中,这样在生成代码时就不会覆盖开发者的代码了,因此若要重新生成bean子类,必须先手动删除该子类。对于dao也一样。

 

 

 

 

 

下一页

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
ef-orm A Simple OR-Mapping framework on multiple databases. 使用手册(中文)http://geequery.github.io/ef-orm/manual/EF-ORM-user-guide.docx  使用示例工程 https://github.com/GeeQuery/ef-orm/tree/master/orm-tutorial EF-ORM是一个轻量,便捷的Java ORM框架。并且具备若干企业级的应用特性,如分库分表、JTA事务等。 代码生成插件for eclipse(请在eclipse中Help/Install new software后输入地址并安装)http://geequery.github.io/plugins/1.3.x/特点一 EF的设计的一个主要目的是提高开发效率,减少编码工作,让开发者“零配置”“少编码”的操作数据库大部分功能。 例如:数据库查询条件的传入问题是所有ORM框架都不能回避的一个问题,所以我经常在想——既然我们可以用向DAO传入一个Entity来实现插入操作,为什么就不能用同样的方法来描述一个不以主键为条件的update/select/delete操作?为什么DAO的接口参数老是变来变去?为什么很多应用中,自行设计开发类来描述各种业务查询条件才能传入DAO?为什么我们不能在数据访问层上花费更少的时间和精力?   JPA1.0和早期的H框架,其思想是将关系型数据库抽象为对象池,这极大的限制了本来非常灵活的SQL语句的发挥空间。而本质上,当我们调用某H框架的session.get、session.load、session.delete时,我们是想传递一个以对象形式表达的数据库操作请求。只不过某H框架要求(并且限制)我们将其视作纯粹的“单个”对象而已。JPA 2.0为了弥补JPA1.0的不足,才将这种Query的思想引入为框架中的另一套查询体系——Criteria API。事实上针对单个对象的get/load/persist/save/update/merge/saveOrUpdate API和Criteria API本来就为一体,只不过是历史的原因被人为割裂成为两套数据库操作API罢了。   因此,对于关系型数据库而言——Entity和Query是一体两面的事物,所谓Query,可以包含各种复杂的查询条件,甚至可以作为一个完整的SQL操作请求的描述。为此,EF彻底将Entity和Query绑在了一起。这种思想,使得—— 开发人员需要编写的类更少。开发人员无需编写其他类来描述复杂的SQL查询条件。也无需编写代码将这些查询条件转换为SQL/HQL/JPQL。DAO层也不会有老要改来改去的接口和API,几乎可以做到零编码。 对单个对象进行CRUD的操作API现在和Criteria API合并在一起。Session对象可以直接提供原本要Criteria API才能提供实现的功能。API大大简化。 IQueryableEntity允许你将一个实体直接变化为一个查询(Query),在很多时候可以用来完成复杂条件下的数据查询。比如 ‘in (?,?,?)’, ‘Between 1 and 10’之类的条件。 xxQL有着拼装语句可读性差、编译器无法检查、变更维护困难等问题,但是却广受开发人员欢迎。这多少有历史原因,也有Criteria API设计上过于复杂的因素。两者一方是极端灵活但维护困难,一方是严谨强大而学习和编写繁琐,两边都是极端。事实上JPA的几种数据查询方式存在青黄不接的问题。选择查询语言xxQL,项目面临后续维护困难,跨数据库移植性差;选择Criteria API,代码臃肿,操作繁琐,很多人望而却步。EF的设计思想是使人早日摆脱拼装SQL/HQL/JPQL的困扰,而是用(更精简易用的)Criteria API来操作数据库。 基于轻量级Criteria API的操作方式,使得对数据库的变更和重构变得非常轻松,解决了SQL语句多对软件维护和移植造成产生的不利影响。 阅读推荐:第3、4章 特点二,将SQL的使用发挥到极致,解决SQL拼凑问题、数据库移植问题 大部分OLTP应用系统到最后都不免要使用SQL/JPQL,然而没有一个很好的方法解决SQL在多种数据库下兼容性的问题。 EF-ORM中采用了独特的SQL解析和改写技术,能够主动检查并确保SQL语句或者SQL片段在各个数据库上的兼容性。 EF中除了Criteria API以外,可以直接使用“SQL语句”或者“SQL片段”。但是这些SQL语句并不是直接传送给JDBC驱动的,而是 有着一个数据库方言层,经过方言层处理的SQL语句,就具备了在当前数据库上正确操作的能力。这相当于提供了一种能跨数据库操作的SQL语言。(E-SQL) E-SQL不但解决了异构数据库的语法问题、函数问题、特殊的写法问题,还解决了动态SQL问题、绑定变量扩展等特性。 对于各种常用SQL函数和运算符,都可以自动转换为当前数据库支持的方言来操作。其函数支持也要多于HQL支持的函数。 阅读推荐:第7、8章 特点三,可能是业界最快的ORM框架. 得益于ASM的动态代码生成技术,部分耗时操作通过动态代码固化为硬编码实现,EF-ORM的大部分操作性能要超过已知的其他框架。 实际性能测试表明,EF的大部分操作都要快于Hiberante和MyBatis, 部分操作速度甚至数十倍于上述框架。 EF在极限插入模式下,甚至刷新了每秒10万条写入的记录。远远超过了其他框架。 一个初步的性能测试:测试代码:http://geequery.github.io/ef-orm/manual/performance-test.rar 测试报告:http://geequery.github.io/ef-orm/manual/performance-compare.docx 阅读推荐:第9、17章 特点四,分库分表 开发过程中参照了Hibernate Shards、Alibaba TDDL、Cobar等框架,也是基于词法分析器来提取SQL参数,并计算路由。 能支持分库维度含糊等场景下的分库分表。以及包括多库多表下的 order by , distinct, group by, having等操作。 阅读推荐:第10章 特点五,常用DDL操作的封装 从数据库元数据访问,到建表,创建约束,创建sequence等各种DDL操作进行了封装,用户无需编写各种SQL,可以直接通过API操作数据库结构。 尤其是ALTER TABLE等修改数据库的语句,各种不同的RDBMS都有较大语法差异。特点六、解决各种跨RDBMS的移植问题 1、DML操作、自增值处理与返回、查询这些不同数据库操作差异很大的东西,都了统一的封装。 2、DDL操作、建表、删表、trunacte,Sequence创建和TABLE模拟Sequence等,都做了支持。 3、对SQL语法操作和函数的改写与支持。其他特性轻量 该框架对应用环境、连接池、 是否为J2EE应用等没有特殊要求。可以和EJB集成,也可与Spring集成,也可以单独使用。整个框架只有两个JAR包,模块和功能都较为轻量。依赖少 整个框架只有三个jar库。间接依赖仅有commons-lang, slf4j等7个通用库,作为一个ORM框架,对第三方依赖极小。简单直接的API 框架的API设计直接面向数据库操作,不绕弯子,开发者只需要数据库基本知识,不必学习大量新的操作概念即可使用API完成各种DDL/DML操作。 最大限度利用编译器减少编码错误的可能性 API设计和元数据模型(meta-model)的使用,使得常规的数据库查询都可以直接通过Criteria API来完成,无需使用任何JPQL/HQL/SQL。可以让避免用户犯一些语法、拼写等错误。JPA2规范兼容 使用JPA 2.0规范的标准注解方式来定义和操作对象。(但整个ORM不是完整的JPA兼容实现)更高的性能 依赖于ASM等静态字节码技术而不是CGlib,使得改善了代理性能;依赖于动态反射框架,内部数据处理上的开销几乎可以忽略。操作性能接近JDBC水平。对比某H开头的框架,在写入操作上大约领先30%,在大量数据读取上领先50%以上。更多的性能调优手段 debug模式下提供了大量性能日志,帮您分析性能瓶颈所在。同时每个查询都可以针对batch、fetchSize、maxResult、缓存、级联操作类型等进行调整和开关,可以将性能调到最优。可在主流数据库之间任意切换 支持Oracle、MySQL、Postgres、MSSQL、GBase、SQLite、HSQL、Derby等数据库。除了API方式下的操作能兼容各个数据库之外,就连SQL的本地化查询也能使之兼容。JMX动态调节 可以用JMX查看框架运行统计。框架的debug开关和其他参数都可以使用JMX动态调整。动态表支持 表结构元数据的API也向用户开放,同时支持在使用过程中,灵活调整映射关系,因此用户可以用API动态的创建表结构的模型,从而实现各种动态类型和表的映射(例如POJO中包含一个Map,用于映射各种动态扩展的字段)企业级特性支持 SQL分析,性能统计,分库分表,Oracle RAC支持,读写分离支持 标签:eform
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值