Hugging Face Blog·· 2 天前AI 评分34
Ai2 如何用 GPU 时间预算与分层公平分配改进集群调度
Impactful scheduling for GPU clusters
AI 导读
Ai2 用 GPU 时间预算、分层公平分配和时间切片契约替换了原有的优先级调度器,把"哪个项目该拿多少 GPU 时间"从事后逐个协调变成透明的预算流程。Ai2 管理数千块 NVIDIA H100、B200 和 B300,集群规模 88 到 1024 块 GPU,服务约 150 名内部研究者,待处理需求常达可用 GPU 的 2-3 倍。
来源:Hugging Face Blog · huggingface.co