Multi-Tenant GPU Scheduling in Production: From Time-Slicing to MIG and Beyond 深度解析多租户 GPU 调度三大模型(Time-Slicing、MIG、vGPU)的原理、生产级实现与选型策略,含完整 Kubernetes 部署示例和性能基准对比。 GPU并行计算 2026年09月30日 0 点赞 0 评论 53 浏览
eBPF 在 GPU 显存监控与 NVIDIA MIG 动态重平衡中的工程实践 在多租户AI推理集群中,利用eBPF运行时监控GPU显存压力,结合NVIDIA MIG分区动态重平衡,实现显存利用率从40%提升至75% 的工程实践深度指南 eBPF入门 2026年10月06日 0 点赞 0 评论 53 浏览
NVIDIA MIG 深度实战:GPU 硬件分区、Kubernetes 多租户调度与 AI 推理优化 深入解析 NVIDIA MIG (Multi-Instance GPU) 硬件分区技术原理、Kubernetes 多租户调度实战、AI 推理性能调优与生产监控,覆盖 A100/H100 配置、GPU Operator 部署与 vLLM 推理框架最佳实践。 K8s核心 2026年10月01日 0 点赞 0 评论 51 浏览
GPU 时间片调度与多租户推理隔离工程实践 深入剖析GPU多租户共享技术栈:从MPS轻量级并发到MIG硬件分区,从CUDA时间片抢占到推理引擎级Tag-Based公平调度。覆盖NVIDIA H100/Blackwell架构、vLLM、TensorRT-LLM等生产级架构实战。 GPU并行计算 2026年10月06日 0 点赞 0 评论 34 浏览