LLM 推理引擎显存与调度深度实战：从 PagedAttention 到 Continuous Batching 与 Prefix Caching 的生产调优
从显存算术出发拆解LLM推理成本：KV Cache容量模型、PagedAttention分页管理、Continuous Batching迭代级调度、Prefix Caching前缀复用，以及vLLM/SGLang生产级调优清单与踩坑记录。
推理部署
Mooncake 与分离式 LLM 推理：KV Cache 传输、缓存与 Prefill-Decode 解耦深度工程实战
深度解析分离式LLM推理架构的设计哲学与工程实现，聚焦KV Cache传输协议、分布式缓存管理、RDMA高效传输、生产部署实践，以Mooncake/Prefill-Decode解耦为例
CUDA Graph 与持久化内核：AI 推理的零启动开销革命
深入解析CUDA Graph与Persistent Kernel技术如何消除AI推理中的GPU启动开销。涵盖动态形状处理、GPU Direct RDMA集成、生产级调度架构设计，以及A100上70%吞吐提升的实测数据。
2026年 AI Agent 工程化实践：从概念验证到生产部署的演进之路
系统梳理2026年AI Agent工程化实践的核心概念、技术演进和落地经验，涵盖从早期RAG到现在多Agent协作的发展脉络，分析当前面临的挑战和未来趋势，为开发者提供从概念验证到生产部署的完整参考。
Rust 重塑 AI 基础设施：从 PyTorch Rust 绑定到 LLM 推理引擎的系统级优化实战
深入剖析 Rust 在 AI 基础设施中的崛起：从 vLLM Rust 调度器的 PagedAttention 实现到 Candle/Hugging Face ML 框架，再到 Polars 数据处理与 DataFusion 查询引擎，全面覆盖 Rust 在 LLM 推理、数据管道、Python 扩展方面的实战方案。包含完整的代码示例和从 Python 到 Rust 的迁移路径。
LLM 推理优化深度实战（最终版）
深入拆解现代LLM推理引擎核心技术——从PagedAttention的显存管理、Continuous Batching的吞吐优化，到Speculative Decoding的解码加速，附带完整代码示例和vLLM部署实践。
构建一个有手有脑的 AI Agent：ReAct 推理循环、函数调用与多智能体编排实战
深入剖析生产级 AI Agent 的工程实现：ReAct 推理闭环、function calling 强类型工具契约、分层记忆与主管-Worker 多智能体编排，附可运行 Python 代码与上线四道保险。
万亿参数大模型推理系统架构：从显存墙到多节点部署的实战工程
深入剖析万亿参数大模型推理的系统化工程架构，涵盖TP/PP/EP/DP四维并行策略组合、KV Cache三级存储/H2O淘汰策略、MXFP4/FP8量化协同、vLLM多节点部署实战（含docker-compose配置）、PD分离架构与Ray调度层调优、关键监控指标与自适应batch调度，以及HBM4-PIM/光学互连/联邦推理等前沿方向展望。
AI推理中KV Cache的跨层调度与推测解码协同优化：从vLLM PagedAttention到TensorRT-LLM的工业实践
深入分析AI推理中KV Cache管理与推测解码的协同优化问题，涵盖vLLM PagedAttention的工程代价、推测解码与Prefix Cache的冲突分析、TensorRT-LLM的Context-Aware调度方案，以及一个可落地的Spec-Aware KV Scheduler（SKVS）架构设计与性能基准测试。
视觉语言模型推理引擎工程实战：从 vLLM 到 SGLang 的架构演进
深入解析视觉语言模型(VLM)推理引擎的核心工程挑战与解决方案，涵盖视觉编码器优化、KV Cache异构管理、两阶段调度策略、CUDA Graph兼容性以及生产部署中的显存建模与长视频Token预算管理。
LLM Inference 编译器图优化全栈实战：从算子融合到自动调优的深度工程解析
深入剖析 LLM 推理引擎的图优化技术栈：算子融合策略与实现、从 AITemplate 到 FlagGems 的算子库演进、Meta Schedule 自动调优机制、以及基于 Triton 的算子手写优化。通过完整 Transformer 层融合优化实战案例，揭示从计算图到高性能 CUDA kernel 的全链路工程方法论。
边缘智能：AI 推理从云端下沉到设备端的技术革命
随着物联网设备的爆发和隐私保护需求的增长，AI 推理正在从云端走向边缘。本文深入分析边缘智能的关键技术路径与产业落地。
LLM推理优化与部署实战：从vLLM到TensorRT-LLM的生产级性能调优指南
从vLLM到TensorRT-LLM，深入讲解LLM推理优化的核心技术：PagedAttention、Continuous Batching、投机解码、量化加速。包含Docker/K8s部署方案、性能基准对比与生产级监控配置。
Agent因果推理工程：从相关性到因果性的认知跃迁
深入解析Agent因果推理工程的核心方法论，从结构因果模型、因果发现算法、反事实推理引擎、因果表征学习四个维度构建具备真正因果理解能力的Agent系统，探讨从统计关联到因果认知的工程实现路径。
LLM推理PD分离架构深度工程实践：从Prefill-Decode异构到分布式KV Cache传输
深入剖析LLM推理PD分离架构的工程实践：从Prefill-Decode异构到分布式KV Cache传输，涵盖DistServe、Mooncake、NVIDIA Dynamo等系统的设计原理与传输协议优化。
