线程池管理框架 DynamicTp-1.0.9 发布


DynamicTp 简介

DynamicTp 是一个基于配置中心实现的轻量级动态线程池监控管理工具,主要功能可以总结为动态调参、通知报警、运行监控、三方包线程池管理等几大类。

经过几个版本迭代,目前最新版本v1.0.9具有以下特性

特性

  • 代码零侵入:所有配置都放在配置中心,对业务代码零侵入

  • 轻量简单:基于 springboot 实现,引入 starter,接入只需简单4步就可完成,顺利3分钟搞定

  • 高可扩展:框架核心功能都提供 SPI 接口供用户自定义个性化实现(配置中心、配置文件解析、通知告警、监控数据采集、任务包装等等)

  • 多平台通知报警:提供多种报警维度(配置变更通知、活性报警、容量阈值报警、拒绝触发报警、任务执行或等待超时报警),已支持企业微信、钉钉、飞书、邮件报警,同时提供 SPI 接口可自定义扩展实现

  • 监控:定时采集线程池指标数据,支持通过 MicroMeter、JsonLog 日志输出、Endpoint 三种方式,可通过 SPI 接口自定义扩展实现

  • 任务增强:提供任务包装功能,实现TaskWrapper接口即可,如 MdcTaskWrapper、TtlTaskWrapper、SwTraceTaskWrapper,可以支持线程池上下文信息传递

  • 兼容性:JUC 普通线程池和 Spring 中的 ThreadPoolTaskExecutor 也可以被框架监控,@Bean 定义时加 @DynamicTp 注解即可

  • 可靠性:框架提供的线程池实现 Spring 生命周期方法,可以在 Spring 容器关闭前尽可能多的处理队列中的任务

  • 多模式:参考Tomcat线程池提供了 IO 密集型场景使用的 EagerDtpExecutor 线程池

  • 支持多配置中心:基于主流配置中心实现线程池参数动态调整,实时生效,已支持 Nacos、Apollo、Zookeeper、Consul、Etcd,同时也提供 SPI 接口可自定义扩展实现

  • 中间件线程池管理:集成管理常用第三方组件的线程池,已集成Tomcat、Jetty、Undertow、Dubbo、RocketMq、Hystrix、Grpc 等组件的线程池管理(调参、监控报警)

  • 线上大规模应用:参考美团线程池实践,美团内部已经有该理论成熟的应用经验

v1.0.9 发布记录

Features

  • 告警类型新增邮件告警渠道,感谢 @林林林 提供实现

  • adapter 模块新增 grpc 服务端线程池管理

BugFix

  • AbstractDtpNotifier 添加无参构造函数,修复自定义告警器 SPI 无法接入问题

  • ApolloRefresher 调整为实现 ConfigFileChangeListener 接口,修复配置类型为 properties 类型时,多次修改参数间隔生效的问题,感谢 @NY 提供实现

  • 调整线程池告警配置初始化时机,修复在 DtpRegistry 初始化前使用因告警项没初始化导致的 NPE 问题,感谢 @林林林 提供实现

Refactor

  • 将 core 模块中 adapter 包迁移到 adapter-common 模块中,彻底解耦

  • 重构抽象 notify 模块部分代码

  • 重构抽象 adapter 模块部分代码

Optimize

  • 兼容低版本 dubbo(2.7.3) 线程池监控,感谢 @songxiaohua 提供实现

  • 兼容 Spring 5.2 以下 applicationContext.findAnnotationOnBean 获取不到注解的情况,感谢 @Redick01 提供实现

  • MemorySafeLinkedBlockingQueue 阻塞队列添加拒绝策略

  • 优化项目日志输出

项目地址

目前累计 2.2k star,感谢你的 star,欢迎 pr,业务之余一起给开源贡献一份力量

官网:https://dynamictp.cn

gitee地址:https://gitee.com/dromara/dynamic-tp

github地址:https://github.com/dromara/dynamic-tp


相關推薦

2023-02-09

DynamicTp 简介 DynamicTp 是一个基于配置中心实现的轻量级动态线程池监控管理工具,主要功能可以总结为动态调参、通知报警、运行监控、三方包线程池管理等几大类。 经过多个版本的迭代,目前最新版本 v1.1.0 具有以下特性

2023-03-30

DynamicTp 简介 DynamicTp 是一个基于配置中心实现的轻量级动态线程池监控管理工具,主要功能可以总结为动态调参、通知报警、运行监控、三方包线程池管理等几大类。 经过多个版本的迭代,目前最新版本 v1.1.2 具有以下特性

2023-01-04

Override public void prepare(Object o) { log.info(this.getName() + " 使用线程---" + Thread.currentThread().getName()); } @SneakyThrows @Override public String task(Object o, TaskSupport support) { System.out.println("CaseTimeoutTaskA Begin"); Thread.sleep(400); for (int i1 = 0; i1 < i; i1++)

2023-09-28

dynamic-tp v1.1.4 已经发布,轻量级动态线程池 此版本更新内容包括: Feature 支持 Spring 项目,SpringBoot 相关特性只在 starter 模块引入,@炼龙 添加 jvmti 黑科技模块,方便集成管理各种三方包线程池,@炼龙 升级 VariableLinke

2023-06-04

admin 管理后台 这版主要是修改大并发问题,如果用户线程忙不过来,就添加用户线程,这样保持网站畅通。 1.4.0开启额外警告后,很多warning unused 主要是定义了没有使用,特别是在ORM时候, 因为有些表没有这种类型就不会

2023-06-25

架自带ORM,使用链接池方式,目前支持mysql ✅ 9. 框架自带线程池,和用户代码运行的线程池 ✅10. 框架使用asio自带的协程 ✅11. 框架特色是I/O 使用协程池 用户代码运行使用线程池,类似GO那种调度,只是针对http请求调度 ✅12. 框架

2023-12-21

架自带ORM,使用链接池方式,目前支持mysql ✅ 9. 框架自带线程池,和用户代码运行的线程池 ✅10. 框架使用asio自带的协程 ✅11. 框架特色是I/O 使用协程池 用户代码运行使用线程池,类似GO那种调度,只是针对http请求调度 ✅12. 框架

2022-12-25

型对象里面,使用urlpath映射到函数挂载点,使用协程、线程池、数据库链接池。 QQ群:668296235 与社区开发者探讨C++ WEB开发的乐趣 1.特性🔥🔥🔥🔥🔥 ✅ 1. 自带json 编解码不用第三方库,标准json支持 ✅ 2. 支持多域名网站

2023-12-03

架自带ORM,使用链接池方式,目前支持mysql ✅ 9. 框架自带线程池,和用户代码运行的线程池 ✅10. 框架使用asio自带的协程 ✅11. 框架特色是I/O 使用协程池 用户代码运行使用线程池,类似GO那种调度,只是针对http请求调度 ✅12. 框架

2024-02-09

新配置名 备注 maxThreads exchangeThreads 交换线程数,用于消息接收等(原来的名字,语义不明) coreThreads codecThreads 解码线程数,用于编解码等(原来的名字,语义不明) / ioThreads Io线程数,用于连接

2022-10-16

布式爬虫框架。一行代码开发一个分布式爬虫,拥有"多线程、异步、IP动态代理、分布式、JS渲染"等特性; 特性 1、简洁:API直观简洁,可快速上手; 2、轻量级:底层实现仅强依赖jsoup,简洁高效; 3、模块化:

2022-09-01

1、增加用户管理模块 用于管理用户权限及信息 2、优化线程栈历史记录 对历史堆栈信息进行数据高度压缩,减少通信负载 3、优化 线程池监控 切入原生JDK线程池,对原生数据进行无缝监控 4、优化proxy代理层数据连接池,加

2022-09-15

得代码更加简洁高效,并解决了由来已久的一个bug:网络线程接收到客户端请求,把文件读写交给磁盘IO线程后,在磁盘线程处理过程中如果客户端断开连接,对应的网络线程将空转导致CPU跑满。解决方法是task对象使用引用计数

2022-10-12

abled_for_threads_without_privilege_checks进行控制是否忽略对某些线程执行的语句进行改写。 OpenSSL:在内置OpenSSL的平台上,MySQL使用的OpenSSL库升级至1.1.1q。 监视缓冲池调整容量:InnoDB提供了两个新的状态变量Innodb_buffer_pool_resize_statu