20:51
元脑服务器推出支持Mooncake KV缓存共享的G3.5层全闪方案
格隆汇9月14日|元脑服务器面向大模型推理场景,推出支持Mooncake KV缓存共享的G3.5层全闪方案。方案以元脑全闪服务器NF5286为核心,与Mooncake缓存组件、推理框架的缓存感知调度协同,为推理集群提供独立于计算节点、可按业务需求单独规划的KV Cache共享空间。当上下文需求增长时,可以单独扩展缓存资源;当GPU节点扩容、调整或维护时,缓存资源也不必完全随计算节点变化。

2026-09-14325.8k

商务、渠道、广告合作/招聘立即咨询

相关文章

中国8月末社融存量同比增7.2%,M2同比增7.5%

林春木 · 4小时前

cover_pic

沙特关键输油管道将停运数周,布油飙涨4%!

默德君 · 27分钟前

cover_pic

叫停上市,OpenAI究竟打什么算盘?

弗雷迪 · 2小时前

cover_pic

“大空头”炮轰AI巨头!垄断者的游戏罢了

林春木 · 19分钟前

cover_pic