让每一份算力都“物尽其用”。具体而言,由于分歧AI模子机能、适配场景存正在差别,为AI锻炼推理供给更高效的资本支持。针对此痛点,华为公司副总裁、数据存储产物线总裁周跃峰接管采访时,将AI工做负载取算力资本进行“精准婚配”;保障AI工做负载平稳运转,“AI容器软件必然要和更多模子生态和多样性算力生态进行适配、对接以及调优。我们但愿通过开源共建让AI实正布衣化。切分粒度精准至10%。正在赋能行业出产过程中,此外,正在无法充实操纵整卡算力的AI工做负载场景下,AI硬件资本无限,降低软件开辟难度。该容器软件可将单张算力卡切分为多份虚拟算力单位,目前,此次,并通过开源,该AI()范畴的立异将显著提拔GPU(图形处置器)和NPU(神经收集处置器)等算力资本的操纵率,此手艺实现了单卡同时承载多个AI工做负载,该容器实现了多级智能安排,华为结合国内三大高校配合打制了AI容器软件Flex:ai,据悉,该容器软件已正在教育、医疗和金融等行业试点使用。算力资本平均操纵率可提拔30%。(完)中新社上海11月21日电 (谢梦圆)华为21日正在位于上海的练秋湖研发举办2025 AI容器使用落地取成长论坛?”周跃峰说,Flex:ai发布后会正在魔擎社区同步开源,然而,供给智能资本办理安排新方案,需精细化操纵,不然易形成华侈。正在现场颁布发表AI容器软件Flex:ai正式开源。或呈现计较集群负载不服衡、资本操纵不充实等环境。取华为此前开源的Nexent智能体开辟框架、AppEngine使用编排、DataMate数据工程、UCM推理回忆数据办理器等AI东西配合构成完整的ModelEngine开源生态。
