跳到正文
原文
量子位· 量子位的朋友们·· 13 小时前

商汤大装置日均6万亿Token服务背后,异构推理集群如何提升效能?

日均6万亿Token服务背后,商汤大装置如何提升推理效能?

SI 导读

商汤大装置通过PD分离与异构混合调度构建万卡级集群,在相同高端卡条件下将Token吞吐量提升至5倍。其平台日均Token服务量达6万亿,预计2026年Q4将增至10万亿。此前AI基础设施竞争主要依赖算力规模,现转向通过架构创新提升高质量Token产能。

SI 评分29

来源:量子位 · qbitai.com

© 2026 SI·Hot · Super Intelligence Hot · 超级智能热点 · 网站数据均来源于网络公开资料,版权归来源方所有