【Java orm 框架对比】十四新增 gaarason/database-all 框架对比


本次更新内容如下

新增 gaarason/database-all框架对比

一万条数据以内与其他框架保持一致

数据量超过十万时存储与查询性能还需要优化

orm框架使用性能比较

测试方法拉取代码,配置数据库账号信息,直接启动,然后打开控制台页面通过页面点击测试

比较mybatis-plus、lazy、sqltoy、mybatis-flex、easy-query、mybatis-mp、jpa、dbvisitor、beetlsql、dream_orm、wood、hammer_sql_db、原生jdbc、qdbc、gaarason/database-all 操作数据

环境:

idea 
jdk17
spring boot 3.0.7
mysql 8.0

测试条件常规对象

orm 框架 是否支持xml 是否支持 Lambda 对比版本 编码方式 注意事项
mybatis ☑️ ☑️ 3.5.4 lambda +xml 优化 ------------------------------
sqltoy ☑️ ☑️ 5.2.98 lambda ------------------------------
lazy ✖️ ☑️ 1.2.4-JDK17-SNAPSHOT lambda ------------------------------
mybatis-flex ☑️ ☑️ 1.8.0 lambda +xml 优化 ------------------------------
easy-query ✖️ ☑️ 1.10.31 insert ignore into (当前版本不支持) 不支持upsert操作
mybatis-mp ☑️ ☑️ 1.4.1 xml 优化 ------------------------------
jpa ☑️ ☑️ 3.0.7 ---------------------- ------------------------------
dbvisitor ☑️ ☑️ 5.4.3 xml 优化 ------------------------------
beetlsql 支持md ☑️ 3.26.0-RELEASE insert ignore into 优化 ------------------------------
dream_orm ✖️ ☑️ 1.3.0 insert ignore into (当前版本不支持) 不支持upsert操作
wood ☑️ ☑️ 1.2.9 insert ignore into (当前版本不支持) 不支持upsert操作
hammer_sql_db ☑️ ☑️ 0.7.0 insert ignore into (当前版本不支持) 连接的数据库中如果没有表项目无法启动
jdbc ✖️ ✖️   ---------------------- ------------------------------
qdbc ☑️ ☑️ 4.2.7 ---------------------- ------------------------------
gaarason/database-all ✖️ ☑️ 6.5.1 lambda 注意声明gaarasonDataSource会与第三方声明冲突

数据库表(含有唯一性索引s_u)

CREATE TABLE `sys_user`
(
    `column_name` varchar(255) COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '额外字段',
    `create_time` datetime                                DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '创建时间',
    `id`          bigint NOT NULL AUTO_INCREMENT COMMENT '用户ID',
    `is_deleted`  tinyint(1) DEFAULT NULL COMMENT 'null',
    `password`    varchar(255) COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '密码',
    `scope`       varchar(255) COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT 'null',
    `status`      tinyint(1) DEFAULT NULL COMMENT '状态',
    `update_time` datetime                                DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '更新时间',
    `username`    varchar(255) COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '用户名',
    PRIMARY KEY (`id`) USING BTREE,
    UNIQUE KEY `s_u` (`scope`,`username`)
) ENGINE=InnoDB AUTO_INCREMENT=9223371632070323791 DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_general_ci;

比较方法:增加、修改、删除、分页查询(当前项目暂时只比较批量新增和分页)

项目设计

声明 ORMRepository 接口提供对应增删改查方法

在这里插入图片描述

声明 ORMComparisonRepository接口 继承 ORMRepository 下游由不同ORM实现声明 SysUserRepository 接口 继承 ORMRepository 用于循环调用不同orm实现方法执行方法测试产生测试结果声明抽象类 SysUserRepositoryAbstractRecord 继承 ORMComparisonRepository 并且提供对应的框架执行结果存储

在这里插入图片描述

不同ORM框架mybatis-plus、sqltoy、Lazy、easy-query、mybatis-mp、jpa、dbvisitor、beetlsql、dream_orm、wood、hammer_sql_db、原生jdbc、qdbc 、gaarason/database-all创建 ORMComparisonRepository 的实现

在这里插入图片描述

不同 ORM 操作数据的实现

 

在这里插入图片描述

测试条件 批量插入数据 10、100、1000、10000、100000 ,分页查询数据 10、100、1000、10000、100000

项目启动后使用浏览器打开 http://localhost:1003/sys/user/run-compare

 

测试条件(细节比较) 批量插入数据 1~10000,分页查询数据 1~10000

项目启动后使用浏览器打开 http://localhost:1003/sys/user/run-particulars-compare

导出测试数据为MD

项目启动后使用浏览器打开 http://localhost:1003/sys/user/export-compare-result

测试执行过程

清空需要插入表中所有数据
通过ORM框架进行数据批量新增、而后进行分页查询,记录消耗时间,输出md文档

查看结果曲线图

测试结果(结果只提供参考)

QDBC(batchStory) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 309毫秒 112毫秒 680毫秒 5916毫秒 58921毫秒
MYBATIS_FLEX(batchStory) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 47毫秒 59毫秒 329毫秒 2845毫秒 31641毫秒
Eloquent(batchStory) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 22毫秒 29毫秒 183毫秒 3918毫秒 280391毫秒
LAZY(batchStory) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 6毫秒 25毫秒 166毫秒 1481毫秒 16191毫秒
MYBATIS_MP(batchStory) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 17毫秒 47毫秒 284毫秒 2584毫秒 28652毫秒
JDBC(batchStory) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 79毫秒 15毫秒 83毫秒 739毫秒 7088毫秒
DB_VISITOR(batchStory) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 24毫秒 39毫秒 162毫秒 3674毫秒 281271毫秒
MYBATIS_PLUS(batchStory) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 66毫秒 59毫秒 345毫秒 2822毫秒 29268毫秒
JPA(batchStory) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 68毫秒 57毫秒 205毫秒 1454毫秒 18526毫秒
SQLTOY(batchStory) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 37毫秒 34毫秒 119毫秒 919毫秒 9471毫秒
BEETL_SQL(batchStory) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 251毫秒 64毫秒 177毫秒 1467毫秒 13280毫秒
QDBC(findPage) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 52毫秒 101毫秒 744毫秒 7142毫秒 59325毫秒
MYBATIS_FLEX(findPage) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 34毫秒 12毫秒 65毫秒 459毫秒 3848毫秒
Eloquent(findPage) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 50毫秒 34毫秒 74毫秒 462毫秒 4300毫秒
LAZY(findPage) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 26毫秒 10毫秒 33毫秒 240毫秒 1861毫秒
MYBATIS_MP(findPage) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 30毫秒 12毫秒 52毫秒 366毫秒 2975毫秒
JDBC(findPage) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 6毫秒 6毫秒 48毫秒 330毫秒 2718毫秒
DB_VISITOR(findPage) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 21毫秒 8毫秒 33毫秒 304毫秒 2439毫秒
MYBATIS_PLUS(findPage) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 39毫秒 12毫秒 63毫秒 396毫秒 3052毫秒
JPA(findPage) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 108毫秒 23毫秒 89毫秒 368毫秒 2190毫秒
SQLTOY(findPage) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 34毫秒 11毫秒 37毫秒 182毫秒 1329毫秒
BEETL_SQL(findPage) 影响行数:10 影响行数:100 影响行数:1000 影响行数:10000 影响行数:100000
执行时间: 53毫秒 13毫秒 47毫秒 291毫秒 2233毫秒

写在最后

经过不间断时间的框架收集、学习、实验、编码、测试市面上常见的ORM框架,过程中拜读了很多作者的博文、样例,学习很多收获很多。 重新梳理下整理的框架:mybatis-plus、lazy、sqltoy、mybatis-flex、easy-query、mybatis-mp、jpa、dbvisitor、beetlsql、dream_rom、wood、hammer_sql_db、原生jdbc、qdbc、gaarason/database-all

下面从一下几点出发作出总结

文档方面:学习过程中mybatis-plus、jpa、db_visitor、gaarason/database-all提供的文档资料是比较全和完善,经得住市场的考验技术方面:beetlsql、easy-query、mybatis、wood、db_visitor系列 三类框架都已经支持spring 和solon生态 其技术架构设计可以推荐大家学习并发方面:jpa、db_visitor 还需要开发时候深度优化处理大数据存储方面: Lazy 、原生jdbc、hammer_sql_db、beetlsql、easy-query、sqltoy、dream_rom、wood、gaarason/database-all具有一定优势大数据查询方面:sqltoy、dream_orm、Easy_query、Lazy、db_visitor 反射处理的比较优秀

小数据量下各ORM框架处理时间大体相近或者通过优化后趋于一致,重点看一万数据以后框架处理能力体现价值

以上是个人整理的观点,如果大家有不同的想法和意见可以在gitee或者个人博客留言CSDN

细节数据对比(一万以内基本相差不大)

细节数据对比,数据属于并发行测试数据,如果测试总数是一百,那么会执行一百次batchStory,一百次findPage 每次执行的条数在之前数据的基础上+1

从形成的折线图看(具体趋势看排名与测试结果)

存储性能对比: lazy、原生jdbcdream_rom、sqltoy、beetlSql、hammer_sql_db、db_visitor、easy-query、gaarason/database-all 更适合并发性数据存储。、mybatis-flex、mybatis-mp、mybatis-plus、jpa、qdbc 处理耗时较长波动较大分页查询性能对比: lazy、mybatis-flex、mybatis-mp、mybatis-plus、 dream_rom、easy-query、sqltoy、db_visitor、beetlSql 、jpa、hammer_sql_db、原生jdbc、gaarason/database-all都比较稳定。qdbc性能不佳

批量保存:

一万条数据以内 原生jdbc、lazy、mybatis-flex、mybatis-mp、mybatis-plus、easy-query、sqltoy、beetlSql、jpa、db_visitor、wood、hammer_sql_db、qdbc、gaarason/database-all 性能趋于一致十万数据时,处理时间由快到慢依次是:两万毫秒以内:原生jdbc、sqltoy、db_visitor、wood、beetl_sql、dream_rom、easy-query、lazy、hammer_sql_db、两万毫秒以上: jpa、mybatis-plus、mybatis-mp、mybatis-flex、qdbc、gaarason/database-all

分页查询:

一万条数据以内 几款ORM均保持在600毫秒内十万数据时,处理时间由快到慢依次是:四千毫秒以内:sqltoy、dream_rom、lazy、easy-query、beetlSql、jpa、db_visitor四千毫秒以上:原生jdbc、mybatis-mp、mybatis-plus、wood、mybatis-flex、hammer_sql_db、qdbc、gaarason/database-all

快速数据对比(大数据曲线图)

优化项

时间 2024年5月7日添加 wood框架对比测试数据库存储和查询测试结果容易上手快速集成,但是内部使用了大量字符串不易于编写时间 2024年5月8日针对mysql 配置 rewriteBatchedStatements=true 保存时间明显提高时间:2024年5月9日事件 新增hammer_sql_db框架对比测试,该框架上手比较简单比较灵活测试结果hammer_sql_db 批量存储做的很优秀,但当分页获取数据量超过一万后分页查询性能开始下降时间:2024年5月11日事件 新增原生jdbc测试测试结果 因为未对jdbc过分优化,从结果过上看insertBatch 存在一定优势但是不大、分页查询结果集映射单纯for循环迭代会很慢时间:2024年5月20日事件 优化easy-query批量新增测试结果 优化后easy-query 批量新增数据趋于稳定时间:2024年5月21日事件 优化jpa数据存储、十万数据存储操作分批处理,表结构新增四十个测试字段测试结果 优化后jpa 批量新增数据趋于稳定事件大大缩减,新增四十个字段后所有ORM框架处理时间明显增多,但不是呈现倍数增加时间:2024年5月28日事件 新增qdbc 框架对比测试结果 qdbc基于spring JdbcTemplate处理存储和查询性能均有所不佳时间:2024年5月28日事件 新增gaarason/database-all 框架对比测试结果 gaarason/database-all处理insert into无唯一性索引时趋于原生sql,但是一旦出现唯一行索引后性能明显下降

issues 处理

#I9Q8UD事件:大表大数据处理,在原先表结构上增加40个字段测试结果:当表结构修改时使用原生sql需要修改(db_visitor、原生jdbc、mybatis、mybatis-flex、mybatis-mp),相反使用lambda表达式则不需要过多调整问题:如果表不存在hammer框架回无法启动,已经提交开发者issues使用过程中如果字段中包含下划线那么hammer 框架必须声明字段框架否则数据无法插入影响测试结果,对应的issues已经提交#I9QGIL事件:easy-query 优化测试结果#I9QDC7事件: 新增结果导出Excel#I9P24G优化纯jdbc测试#I9SQ6K优化hammer框架连接数据库检测数据库空表问题#ICB1W6请求增加 Gaarason/database-all 的测评对比,谢谢~

关注公众号第一时间获取动态

  • 当前项目地址:https://gitee.com/wujiawei1207537021/spring-orm-integration-compare
  • lazy-orm地址:https://gitee.com/wujiawei1207537021/wu-framework-parent/tree/master/wu-database-parent
  • mybatis地址:https://gitee.com/baomidou/mybatis-plus
  • sqltoy地址:https://gitee.com/sagacity/sagacity-sqltoy
  • mybatis-flex地址:https://gitee.com/mybatis-flex/mybatis-flex
  • easy-query地址:https://gitee.com/xuejm/easy-query
  • mybatis-mp地址:https://gitee.com/mybatis-mp/mybatis-mp
  • dbvisitor地址:https://gitee.com/zycgit/dbvisitor
  • beetlsql地址:https://gitee.com/xiandafu/beetlsql
  • dream-orm地址:https://gitee.com/moxiaoai/dream-orm
  • wood地址:https://gitee.com/noear/wood
  • hammer_sql_db地址:https://gitee.com/featherfly/hammer
  • qdbc地址:https://gitee.com/qdbp/qdbp-jdbc
  • gaarason/database-all地址:https://gitee.com/gaarason/database-all

相關推薦

2024-09-28

程序:  Gdaodemo 使用文档:  Gdaodoc   同类型框架性能压测 对比 性能压测数据:《Gdao—orm框架性能压测 gdao+gorm+sqlx+原生sql执行》 特点 规范性:用标准化结构体统一映射表增删改查操作 高效性:比直接调用

2024-07-24

mybatis-mp是一款真正意义上ORM框架,绝对好用的不行!!! 官方文档:https://mybatis-mp.cn 1.6.0 rc1 发布 1:减少生成器maven依赖 2:增加多主键兼容   10 大与众不同的亮点: 1:mybatis-mp - 亮点一:可自定义动态默

2023-02-08

容各种项目(协议不限 HTTP,与其它库无冲突,对各类 Web 框架集成友好且提供 SpringBoot, JFinal 的 Demo) 工程轻量小巧(仅依赖 fastjson,Jar 仅 280KB,Java 文件仅 59 个共 13719 行代码,例如 APIJSONORM 4.3.1) 多年持续迭代(2016 年至今连续

2024-05-25

对多,多对多; 11:支持自定义 sql 模板,再也不用担心框架支持不足; 12:内置代码生成器,通过配置,可定制自身规范; 13:全新的框架,全新的设计理念,新的就是好!

2024-06-06

对多,多对多; 11:支持自定义 sql 模板,再也不用担心框架支持不足; 12:内置代码生成器,通过配置,可定制自身规范; 13:全新的框架,全新的设计理念,新的就是好!

2024-06-04

对多,多对多; 11:支持自定义 sql 模板,再也不用担心框架支持不足; 12:内置代码生成器,通过配置,可定制自身规范; 13:全新的框架,全新的设计理念,新的就是好!

2024-06-07

对多,多对多; 11:支持自定义 sql 模板,再也不用担心框架支持不足; 12:内置代码生成器,通过配置,可定制自身规范; 13:全新的框架,全新的设计理念,新的就是好!

2024-06-17

对多,多对多; 11:支持自定义 sql 模板,再也不用担心框架支持不足; 12:内置代码生成器,通过配置,可定制自身规范; 13:全新的框架,全新的设计理念,新的就是好!

2024-06-01

对多,多对多; 11:支持自定义 sql 模板,再也不用担心框架支持不足; 12:内置代码生成器,通过配置,可定制自身规范; 13:全新的框架,全新的设计理念,新的就是好!

2024-06-29

对多,多对多; 11:支持自定义 sql 模板,再也不用担心框架支持不足; 12:内置代码生成器,通过配置,可定制自身规范; 13:全新的框架,全新的设计理念,新的就是好!

2025-05-08

开源地址: github: https://github.com/sagframe/sagacity-sqltoy gitee: https://gitee.com/sagacity/sagacity-sqltoy idea 插件 (可直接在 idea 中检索安装): https://github.com/imyuyu/sqltoy-idea-plugin sqltoy 脚手架项目:https://github.com/CoCoTeaNet/sra-admi

2023-08-29

多结果。并兼容 Spring 及 MyBatis 用法。 它不依赖任何其它框架,因此可以很方便的和任意一个框架整合在一起使用。 依赖 <dependency> <groupId>net.hasor</groupId> <artifactId>dbvisitor</artifactId> <version>5.4.0</v

2024-07-12

对多,多对多; 11:支持自定义 sql 模板,再也不用担心框架支持不足; 12:内置代码生成器,通过配置,可定制自身规范; 13:全新的框架,全新的设计理念,新的就是好!

2024-05-29

对多,多对多; 11:支持自定义 sql 模板,再也不用担心框架支持不足; 12:内置代码生成器,通过配置,可定制自身规范; 13:全新的框架,全新的设计理念,新的就是好!