Karafka v2.0.24 发布,基于 Apache Kafka 的应用程序开发框架


Karafka v2.0.24 现已发布。Krafka 是一个用于简化基于 Apache Kafka 的 Ruby 应用开发的框架,它允许开发者在使用异步 Kafka 消息时使用类似于标准 HTTP 约定(params 和 params_batch)的方法。Karafka 不仅可以处理传入的消息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。

此版本更新内容如下:

  • [Feature]为 Pro 提供开箱即用的加密支持。
  • [改进] 在#pause上添加检测。
  • [改进] 在重试时添加检测。
  • [改进] 分配#id给类似于其他实体的 consumers,以便于调试。
  • [改进] 在默认的LoggerListener中添加重试和暂停。
  • [改进] 引入一个新的最终terminated状态,该状态将在退出之前启动,但在完成所有检测和其他操作之后。
  • [改进] 确保状态转换是线程安全的,并确保状态转换可以单向发生。
  • [改进] 优化代理到Karafka::App的状态方法。
  • [改进] 通过引入显式#to_s报告来简化状态使用。
  • [改进] 将自动生成的 ID 从SecureRandom#uuid更改为SecureRandom#hex(6)
  • [改进] 默认情况下每 5 秒发出一次统计信息。
  • [改进] 引入可以在需要时交换的通用消息解析器。
  • [修复] 启用consumer_persistence时不触发代码重新加载。
  • [修复] 所有消费者组件关闭且状态为停止后关闭生产者。这将确保任何与 Kafka 消息传递相关的检测仍然可以运行。

升级说明

如果你因为根本不使用而想禁用librdkafka统计,可更新kafka statistics.interval.ms设置并将其设置为0

class KarafkaApp < Karafka::App
setup do |config|
# Other settings...
config.kafka = {
'statistics.interval.ms': 0
}
end
end

更新说明:https://github.com/karafka/karafka/releases/tag/v2.0.24


相關推薦

2022-08-24

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 目前 Karafka v2.0.5 发布了,此版本更新内容如下: 修复 Ruby on Rails 的 karafka.rb 模板中不必要的双换行符 修复手动暂停的分区在重新平衡后不会被处

2022-09-04

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: 改善 client closing。 修复:多个 LRJ 主题同时获取会阻碍 LRJ 启动的能力(#1002) 引入 pre-enqueue 同步执行层以防止 LRJ 出现&n

2022-07-10

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: 从侦听器内联代码中提取消费分区器。 引入虚拟分区器概念,用于并行处理来自单个主题分区的数据。 在轮询时发生 kafk

2023-07-01

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [改进] 为迭代器提供时间支持 [改进] 为admin #read_topic提供时间支持 [改进] 为consumer #see提供时间支持。 [改进] 删除客

2023-05-24

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [Feature] 提供将 CurrentAttributes 与 ActiveJob 的 Karafka 适配器一起使用的能力。 [Feature] 引入集体虚拟分区偏移量管理。

2023-06-21

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [Improvement] 通过检查 librdkafka 上的实时分配丢失状态,来显着提高#revoked?响应质量。 [Improvement] 改进将在已撤销的分

2024-02-28

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [增强] 基于路由的 Swarm 主题分配 (Pro) [增强] 发布 swarm 中无响应节点的-1关闭原因状态。 [增强] 允许在 DataDog 监听器直方

2023-10-22

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [功能] 引入 Appsignal 集成,用于 errors 和 metrics 跟踪。 [改进] 为 VP 提供#synchronize,以便在需要跨 VP consumers 工作时允许

2024-02-21

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [功能] 为OSS和Pro提供swarm能力。 [功能] 提供在 DLQ (Pro) 中使用复杂策略的能力。 [增强] 支持使用:partition用作 ActiveJ

2023-08-22

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [增强功能] 引入 connection.client.rebalance_callback 事件,用于再平衡的工具化。 [重构] 引入低级命令代理来处理希望如

2023-01-12

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [Feature] 允许通过设置active为 false 来禁用给定的主题。它会将它们排除在 consumption 之外,但会允许它们定义使用管理 API

2022-05-24

Karafka 2.0 Beta 发布,更新内容如下: 更新作业队列的阻塞引擎,允许非阻塞作业的执行 提供 #prepared hook,总是在获取循环未阻塞之前运行。 [Pro] 为调度优化器引入性能跟踪器 提供暂停(#pause)和恢复(#resume)消费者给

2022-04-19

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容: 修复了一个 BUG,在缺少启动文件和 Rails 时,railtie 出现 generic exception 而失败(#818) 修复了在捆绑安装过程中,并行原始规范

2024-04-03

AutoMQ 在 2024.02 正式发布了基于 Apache Kafka 3.4.0 的云原生重构版本 1.0.0,AutoMQ 1.0.0 版本相比原版提供了 Serverless、自动负载均衡、秒级分区迁移和 All in 对象存储能力,让 Kafka 用户能充分利用云的弹性能力和廉价存储,实现十