Karafka v2.1.0 发布,基于 Apache Kafka 的应用程序开发框架


Karafka v2.1.0 现已发布。Krafka 是一个用于简化基于 Apache Kafka 的 Ruby 应用开发的框架,它允许开发者在使用异步 Kafka 消息时使用类似于标准 HTTP 约定(params 和 params_batch)的方法。Karafka 不仅可以处理传入的消息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。

此版本更新内容如下:

  • [Feature] 提供将 CurrentAttributes 与 ActiveJob 的 Karafka 适配器一起使用的能力。
  • [Feature] 引入集体虚拟分区偏移量管理。
  • [Feature] 使用虚拟偏移量过滤掉重试时会重新处理的消息。
  • [Improvement] 不再中断 ActiveJob 中失败的并行虚拟分区的处理,因为它由虚拟标记补偿。
  • [Improvement] 始终对 Pro ActiveJobs 使用虚拟偏移管理。
  • [Improvement] 不要尝试在已撤销的分区上标记偏移量。
  • [Improvement] 确保 VP 组件不会注入到非 VP 策略中。
  • [Improvement] 改进复杂的策略继承流程。
  • [Improvement] 优化 DLQ + MoM feature 组合的偏移量管理。
  • [Change] 删除Karafka::Pro::BaseConsumer以支持Karafka::BaseConsumer。(#1345)
  • [Fix] 修复max_messagesmax_wait_time在 errors.yml 中没有引用的问题(#1443)

更新说明:https://github.com/karafka/karafka/releases/tag/v2.1.0


相關推薦

2022-08-24

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 目前 Karafka v2.0.5 发布了,此版本更新内容如下: 修复 Ruby on Rails 的 karafka.rb 模板中不必要的双换行符 修复手动暂停的分区在重新平衡后不会被处

2022-09-04

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: 改善 client closing。 修复:多个 LRJ 主题同时获取会阻碍 LRJ 启动的能力(#1002) 引入 pre-enqueue 同步执行层以防止 LRJ 出现&n

2022-07-10

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: 从侦听器内联代码中提取消费分区器。 引入虚拟分区器概念,用于并行处理来自单个主题分区的数据。 在轮询时发生 kafk

2023-07-01

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [改进] 为迭代器提供时间支持 [改进] 为admin #read_topic提供时间支持 [改进] 为consumer #see提供时间支持。 [改进] 删除客

2023-06-21

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [Improvement] 通过检查 librdkafka 上的实时分配丢失状态,来显着提高#revoked?响应质量。 [Improvement] 改进将在已撤销的分

2022-12-22

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [Feature]为 Pro 提供开箱即用的加密支持。 [改进] 在#pause上添加检测。 [改进] 在重试时添加检测。 [改进] 分配#id给类似于

2024-02-28

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [增强] 基于路由的 Swarm 主题分配 (Pro) [增强] 发布 swarm 中无响应节点的-1关闭原因状态。 [增强] 允许在 DataDog 监听器直方

2023-10-22

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [功能] 引入 Appsignal 集成,用于 errors 和 metrics 跟踪。 [改进] 为 VP 提供#synchronize,以便在需要跨 VP consumers 工作时允许

2024-02-21

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [功能] 为OSS和Pro提供swarm能力。 [功能] 提供在 DLQ (Pro) 中使用复杂策略的能力。 [增强] 支持使用:partition用作 ActiveJ

2023-08-22

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [增强功能] 引入 connection.client.rebalance_callback 事件,用于再平衡的工具化。 [重构] 引入低级命令代理来处理希望如

2023-01-12

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容如下: [Feature] 允许通过设置active为 false 来禁用给定的主题。它会将它们排除在 consumption 之外,但会允许它们定义使用管理 API

2022-05-24

Karafka 2.0 Beta 发布,更新内容如下: 更新作业队列的阻塞引擎,允许非阻塞作业的执行 提供 #prepared hook,总是在获取循环未阻塞之前运行。 [Pro] 为调度优化器引入性能跟踪器 提供暂停(#pause)和恢复(#resume)消费者给

2022-04-19

息,而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。 此版本更新内容: 修复了一个 BUG,在缺少启动文件和 Rails 时,railtie 出现 generic exception 而失败(#818) 修复了在捆绑安装过程中,并行原始规范

2024-04-03

AutoMQ 在 2024.02 正式发布了基于 Apache Kafka 3.4.0 的云原生重构版本 1.0.0,AutoMQ 1.0.0 版本相比原版提供了 Serverless、自动负载均衡、秒级分区迁移和 All in 对象存储能力,让 Kafka 用户能充分利用云的弹性能力和廉价存储,实现十