NATS JetStream 流与持久化订阅实践
---title: NATS JetStream 流与持久化订阅实践keywords:- NATS- JetStream- Stream- Consumer- 持久化订阅description: 使用 NATS JetStream 创建流与消费者，实现持久化订阅与消息确认，适合高可靠实时场景。categories: - 文章资讯 - 技术教程---# NATS Jet...
中间件开发
Kafka Connect Elasticsearch Sink 连接器写入索引实践
使用 Elasticsearch Sink 连接器将 Kafka 主题写入索引，配置连接与写入模式、键处理与容错策略。
Kafka MirrorMaker 2 集群间主题复制实践
---title: Kafka MirrorMaker 2 集群间主题复制实践categories: - 应用软件 - 系统工具---
Kafka Streams 拓扑设计与交付一致性（2025）
---标题: Kafka Streams 拓扑设计与交付一致性（2025）关键词: - Kafka Streams - 拓扑 - Exactly-once - 状态存储 - 重分区描述: 通过合理的 Kafka Streams 拓扑设计、重分区与状态存储策略，结合 Exactly-once 交付与容错机制，提升一致性与性能。categories: - 文章资讯 ...
Kafka 主题保留与压缩策略（Retention、Compaction 与验证）
配置Kafka主题的时间/大小保留策略与日志压缩，按业务键保留最新值并降低存储成本，提供参数示例与端到端验证方法。
Kafka消费者再平衡与分区分配策略
---title: Kafka消费者再平衡与分区分配策略keywords:- Kafka- 再平衡- 分区分配- sticky- cooperativedescription: 理解消费者组的再平衡机制与分配策略，优化暂停与恢复的影响，稳定高并发消费性能。tags:- Kafka- cooperative- sticky- 再平衡- 分区分配- 数据- 消费cat...
Apache Kafka 3.8 版本解读：功能增强与弃用提示
概述 Kafka 3.8 的关键变化与弃用提示，延续从 ZooKeeper 向 KRaft 的迁移路线，并强调客户端请求版本与 Java
Kafka Streams Exactly-Once v2 事务处理与状态容错实践
---title: Kafka Streams Exactly-Once v2 事务处理与状态容错实践keywords: exactly_once_v2, processing.guarantee, transactions, state store, topologydescription: 配置 Kafka Streams 使用 Exactly-Once v2 事务保障端到端一致性，示例...
Apache Pulsar 与 Kafka 对比（多租户、存储层与消息语义）
系统对比 Pulsar 与 Kafka 的架构与能力，涵盖多租户、存储层与消息语义差异，并提供选型与验证方法。
Kafka 事务与精确一次语义（Idempotent Producer、Transactional 与验证）
---title: Kafka 事务与精确一次语义（Idempotent Producer、Transactional 与验证）date: 2025-11-26keywords:- Kafka- 精确一次- EOS- Idempotent Producer- Transactional- read_committeddescription: 通过幂等生产与事务边界实现Kafka...
Kafka 主题保留与压缩策略（Retention、Log Compaction、cleanup.policy）
设计 Kafka 主题的保留与压缩策略，合理配置 `cleanup.policy=delete/compact`，并验证可靠性与成本的平衡。
Kafka 事务与端到端一致性（2025）
# Kafka 事务与端到端一致性（2025）端到端一致性需要在生产、消费与持久化之间协同保障。## 一、幂等生产与事务- 幂等生产：避免重复消息；配置生产者幂等与重试。- 事务：将多个写入合并为原子操作，保障一致性。## 二、Exactly-once (EOS)- EOS：在流处理与下游写入之间实现 Exactly-once。- 偏移与状态：对偏移与状态进行一致性管理。#
Kafka Connect S3 Sink分区与格式实践
配置Kafka Connect S3 Sink将消息落地到S3并进行分区与格式化，提供可验证的Connector配置与验证命令，支撑数仓与分析。
Kafka 保留与压缩策略治理（2025）
# Kafka 保留与压缩策略治理（2025）Kafka 的保留与压缩配置影响成本与查询与一致性，需要按业务治理。## 一、保留与分段- retention.ms：控制时间保留与容量规划。- segment.bytes：设定分段大小，平衡文件数量与恢复时长。## 二、压缩与键- cleanup.policy：`delete` 与 `compact` 组合策略。- log com
Kafka Schema Registry 兼容策略与演进（Backward_Forward_Full 与验证）
---title: Kafka Schema Registry 兼容策略与演进（Backward/Forward/Full 与验证）date: 2025-11-26keywords:- Schema Registry- 兼容策略- Backward- Forward- Fulldescription: 配置与验证Schema Registry的兼容策略，指导Avro模式的演进与回...
