Oossa

Allen Institute推出预算驱动的GPU调度器

AI基础设施团队以基于预算的公平共享调度器取代优先级系统,让研究人员按份额使用GPU时间,并将值班维修工作减少了74%。

简讯作者: Oossa 发布日期: 1 分钟阅读

Allen Institute for AI (Ai2)推出了一款新的GPU集群调度器,根据预算分配和分层公平共享机制,决定运行哪些研究任务。系统为每个项目分配固定比例的GPU时长,例如,Project A1可获得总算力的35%;只有有预算支持的任务才能避免被抢占。调度器还要求任务承诺至少运行一段时间,达到这一时长后,系统便可回收资源供其他任务使用。工程师表示,这项变化带来的实际可用算力提升相当于30%,人工修复工作也减少了74%。

为什么重要

研究人员如今可以获得可预测的GPU使用份额,值班人员手动终止长时间运行任务所花的时间也大幅减少。

这篇文章有帮助吗?
分享

继续阅读

Oossa · 新闻简报

一周 AI,讲明白

每周一,用通俗的语言讲清值得知道的新闻。免费,无垃圾邮件。