多模态 AI 推理的服务化架构：视觉-语言模型的批处理与调度优化
深入剖析多模态AI推理服务化的核心架构设计，涵盖异构批处理策略、Vision Encoder调度、KV Cache分层管理、动态分辨率分配等关键工程实践，含Python/Rust代码示例。
LLM Inference
Intel AMX 矩阵扩展深度实战：CPU 大语言模型推理的高性能工程实践
从硬件架构、编程模型到生产部署，全方位剖析 Intel AMX 矩阵扩展在 CPU LLM 推理中的工程实践。深入讲解 Tile 寄存器、TMUL 指令集、AMX Intrinsics 编程、与 ARM SME 的对比、NUMA 感知调度策略，以及 Granite Rapids 的性能前景。
MoE 推理工程深层实战：专家并行、负载均衡、Expert Offloading 与生产级 Serving
从生产环境出发，深入拆解 MoE 推理系统中最棘手的工程挑战——专家并行策略、动态负载均衡、Expert Offloading 机制、以及面向请求调度的完整 Serving 架构。涵盖 DeepSeek-V3 的 256 专家路由机制、三级 Offloading 策略、Expert Affinity Batch Scheduling 等核心工程实践。
LLM Inference 编译器图优化全栈实战：从算子融合到自动调优的深度工程解析
深入剖析 LLM 推理引擎的图优化技术栈：算子融合策略与实现、从 AITemplate 到 FlagGems 的算子库演进、Meta Schedule 自动调优机制、以及基于 Triton 的算子手写优化。通过完整 Transformer 层融合优化实战案例，揭示从计算图到高性能 CUDA kernel 的全链路工程方法论。
