您当前的位置: 首页 >> 标签:SGLang 推出弹性专家并行(EP)扩容方案,支持 MoE 大模型在线推理无缝扩容
SGLang 推出弹性专家并行(EP)扩容方案,实现 MoE 大模型在线推理无缝扩容

SGLang 全新上线的弹性专家并行(EP)扩容方案,能够让 MoE 混合专家大模型在不间断在线推理业务的前提下完成集群算力扩容,全程不需要 浏览全文>>

站长推荐