工程实践

DuckDB 查询执行引擎深度实战:从 Vector/DataChunk 内存布局到推送式 Pipeline 与并行聚合的工程全解

深入拆解 DuckDB 查询执行引擎:Vector/DataChunk 的五种向量形态与 UnifiedVectorFormat 归一化、selection vector 零复制过滤与自适应过滤器重排、从火山模型到推送式 Pipeline 的架构重构、Local/Global 状态分离的 radix 分区并行聚合,并给出生产级参数配置与性能调优实战观点。

RoPE 旋转位置编码深度工程实战:从复数旋转不变性、NTK/YaRN 长上下文外推到生产级上下文扩展

拆解 RoPE 旋转位置编码的数学本质(复数旋转与相对位置恒等式)与工程实现(rotate_half、fp32 相位精度、cache 复用),分析长度外推崩塌的真实机理(低频欠训练 + 高频 OOD),对比 PI / NTK-aware / YaRN / LongRoPE 四类修补方案,给出可运行的频率重映射代码、注意力温度补偿写法与 needle-in-haystack 评测骨架,并总结 GQA、Tensor Parallel、chunked prefill、mrope 多模态等六个生产落地陷阱。

Substrait 跨引擎查询计划表示深度实战:从代数算子、类型系统到扩展机制与生产落地

Substrait 是查询计划领域的 LLVM IR。本文从 Rel/Expression/Type 三大核心数据模型出发,深入剖析 function_reference 扩展机制、nullability 严格类型系统、Variadic 函数签名与 Producer/Consumer 能力协商,并结合 Velox、Apache Gluten 的生产实践给出落地建议与踩坑清单。