硬件技术

Kafka 保留与压缩策略治理(2025)

# Kafka 保留与压缩策略治理(2025) Kafka 的保留与压缩配置影响成本与查询与一致性,需要按业务治理。 ## 一、保留与分段 - retention.ms:控制时间保留与容量规划。 - segment.bytes:设定分段大小,平衡文件数量与恢复时长。 ## 二、压缩与键 - cleanup.policy:`delete` 与 `compact` 组合策略。 - log com

ClickHouse 物化视图实时聚合与去重治理(2025)

# ClickHouse 物化视图实时聚合与去重治理(2025) ## 一、表与视图设计 - 明细表:存储原始事件;索引按查询模式设计。 - 物化视图(物化视图):将明细写入 `AggregatingMergeTree` 进行 `实时聚合` 与 `去重`。 ## 二、聚合与去重 - 聚合函数:`sum/count/uniqExact/argMax` 等;按业务选择。 - 去重:使用 `uniq

Chaos Mesh 混沌注入与故障演练(2025)

# Chaos Mesh 混沌注入与故障演练(2025) Chaos Mesh 提供多种故障注入类型与调度控制,适合在低风险环境进行演练。 ## 一、故障类型 - 网络:延迟/丢包/断连。 - 资源:CPU/内存压力与磁盘 IO 限制。 - 系统:PodKill/NodeKill 与时间漂移。 ## 二、范围与调度 - 选择器:按命名空间/标签精确注入范围。 - 调度:定时与一次性演练;限制

ClickHouse 写入与查询优化(2025)

# ClickHouse 写入与查询优化(2025) ClickHouse 面向高并发分析型查询,优化重点在表引擎与数据布局与查询路径。 ## 一、表与索引 - MergeTree 家族:根据写入与查询模式选择合适引擎(如 MergeTree、ReplacingMergeTree、SummingMergeTree)。 - 主键与排序键:合理设置提升范围查询与跳过数据块效率。 ## 二、分区与