51工具盒子
kafka 、 zookeeper 集群（一）
<h2>一、入门</h2> <p><strong>1、简介</strong></p> <p>Kafka is a distributed,partitioned,replicated commit logservice。它提供了类似于JMS的特性，但是在设计实现上完全不同，此外它并不是JMS规范...
kafka
使用 Kafka 和 MongoDB 进行 Go 异步处理
<p>在我前面的博客文章 "<a href="https://www.melvinvivas.com/my-first-go-microservice/">我的第一个 Go 微服务：使用 MongoDB 和 Docker 多阶段构建</a>" 中，我创建了一个 Go 微服务示例，它发布一...
Apache Kafka启动错误 – 配置消息格式版本的值无效 3.0-IV1。
英文: Apache Kafka StartUp Error - Invalid value 3.0-IV1 for configuration message.format.version 问题 {#heading} ============= 我已在Microsoft WSL（Linux分发版Ubuntu 18）上安装了Apache Kafka，突然间在我们的本地...
Kafka 确保消费者组保持活跃
英文: Kafka ensuring consumer group stays alive 问题 {#heading} ============= 我有一个在独立的Kubernetes Pod中生成生产者和消费者的过程。我想使用`auto.offset.reset "latest"`，因此需要确保消费者 Pod 在生产者 Pod 之前启动，因为我不...
Kafka 消费者未从主题接收任何消息，尽管组 ID 和客户端 ID 已正确设置。
<p>英文:</p> <p>Kafka Consumer not receiving any message from Topic even though group id and client id is set correctly</p> <h1>问题 {#heading}</h1> <p>...
kafka消费者发送消息失败
<p>报错信息:Failed to send messages after 3 tries.</p> <pre><code>[2020-03-30 06:53:28,302] ERROR Error in handling batch of 1 events (kafka.producer.async.ProducerSendTh...
Kafka 2.12-2.5.0部署文档
#### 什么是Kafka 在流式计算中，Kafka一般用来缓存数据，Storm通过消费Kafka的数据进行计算。 Apache Kafka是一个开源消息系统，由Scala写成。是由Apache软件基金会开发的一个开源消息系统项目。 Kafka最初是由LinkedIn公司开发，并于 2011年初开源。2012年10月从Apache Incubator毕业。该项目的目标是为...
kafka重启后提示/brokers/ids/1已被注册问题解决
<p>项目中kafka异常重启导致输出日志报错如下:</p> <pre><code>[2022-11-04 08:24:31,508] FATAL [KafkaServer id=1] Fatal error during KafkaServer startup. Prepare to shutdown (kafka.server...
自定义 Apache Kafka Serializer（序列化器）
<h2>1、简介 {#1简介}</h2> <p>在 Apache Kafka 中传输消息时，客户端和服务器会就使用共同的语法格式达成协议。Apache Kafka 提供了默认的转换器（Converter），如 <code>String</code> 和 <code>Long</code>。同时也...
管理 Kafka 消费者组
1、简介 {#1简介} ----------- 消费者组允许多个消费者从同一 Topic 消费数据，有助于创建更具可扩展性的 Kafka 应用。 本文将带你了解消费者组以及它们如何在其消费者之间重新平衡分区（Rebalance Partition）。 2、消费者组是什么？ {#2消费者组是什么} ---------------------- 消费者组是一组与一个或多个 ...
