浪潮信息发布"元脑SD200"超节点,面向万亿参数大模型创新设计
北京2025年8月8日 /美通社/ -- 8月7日,浪潮浪潮信息发布面向万亿参数大模型的信息向万超节点AI服务器"元脑SD200"。该产品基于浪潮信息创新研发的发布多主机低延迟内存语义通信架构,以开放系统设计向上扩展支持64路本土GPU芯片。元脑亿参元脑SD200可实现单机内运行超万亿参数大模型,超节创新并支持多个领先大模型机内同时运行及多智能体实时协作与按需调用,点面目前已率先实现商用。数大设计在实际评测中,模型元脑SD200运行DeepSeek R1和Kimi K2等全参模型的浪潮64卡整机推理性能实现超线性扩展。
当前,混合专家模型(MoE)的发布高效架构正在驱动大模型参数规模持续扩展,国内外前沿大模型的元脑亿参参数量快速突破万亿规模,这给算力系统架构提出新的超节创新挑战。一方面,点面模型参数量增加和序列长度增加带来的数大设计键值缓存(KV cache)激增,需要智能计算系统具有超大显存空间承载,依靠单芯片或节点的性能提升已难以为继;且其推理过程作为通信敏感型计算,对分布式计算通信延时要求极高,需要构建更大向上扩展(Scale up)高速互连域。另一方面,智能体AI开启多模型协作的新范式,其推理过程需要生成比传统模型多近百倍的数据词元(token),导致计算量激增。
元脑SD200超节点AI服务器是浪潮信息面向万亿参数大模型AI时代而设计,创新研发多主机低延迟内存语义通信架构,基于开放总线交换技术构建,在单机内实现了64路GPU芯片的高速统一互连,成功解决万亿大模型对超大显存空间和超低通信延时的核心需求。在开放架构之上,元脑SD200通过智能总线管理和开放的预填充-解码(Prefill-Decoder)分离推理框架实现软硬件深度协同,智能化管理复杂AI计算任务。
- 在架构层面,元脑SD200基于自主研发的开放总线交换技术首创多主机三维网格系统架构,实现64路本土GPU芯片高速互连;通过创新远端GPU虚拟映射技术,突破多主机交换域统一编址难题,实现显存统一地址空间扩增8倍,单机可以提供最大4TB显存和64TB内存,为万亿参数、超长序列大模型提供充足键值缓存空间。同时,依托百纳秒级超低延迟链路,构建64卡大高速互连域统一原生内存语义通信,实测结果表明,在推理过程常见的小数据包通信场景中,全规约(All Reduce)性能表现优异,显著提升计算与通信效率。
- 在系统层面,根据万亿参数大模型计算、通信需求特征,浪潮信息开发智能总线管理系统,实现超节点64卡全局最优路由的自动创建,支持不同拓扑切换,资源按需切分。对于全规约、全聚集(All Gather)等典型通信算子,开展不同数据量大小的细粒度通信策略设计,如多层级通信机制等,实现通信延时进一步降低。同时依托开放的PD分离框架,支持异步KV Cache高效传输与差异化并行策略,在提升业务服务级别目标的同时保持对多元算力的兼容性,实现计算与通信架构的深度协同优化。
元脑SD200超节点AI服务器通过软硬协同系统创新,成功向上扩展突破芯片性能边界,在大模型场景中展示出优异的性能表现。结合优化的PD分离框架,SD200超节点满机运行DeepSeek R1全参模型推理性能超线性提升比为3.7倍,满机运行Kimi K2全参模型推理性能超线性提升比为1.7倍。
当前,开源模型的飞跃式进步正在加速智能时代的到来,推动研发范式从封闭走向开放协作。同时,随着大模型参数量的持续提升,对算力基础设施的建设提出了更高要求。浪潮信息通过开放系统架构创新,为开源大模型的规模化落地和应用创新提供关键支撑。
(责任编辑:知识)
-
I have a best friend.She has long,straight,black hair,big,black eyes and a small nose.She is very th ...[详细]
-
[特别声明:此文章为新浪彩票独家文章,严禁各媒体 公众号等转载,违规必究!严惩不贷!]詹天端:02 05 06 07 10 16 28 34 35 + 03 08 12惠孟叔:07 10 13 15 ...[详细]
-
北京时间7月24日,在哥伦比亚广播公司CBS)下一周结束其美巡赛转播之际,解说员伊恩-贝克-芬奇Ian Baker-Finch)宣布退休。这位嗓音亲切的澳大利亚人近19年来始终是该电视台高尔夫赛事解说 ...[详细]
-
来源:北青体育 张昆龙22日晚, 北京国安在足协杯1/4决赛中客场挑战青岛西海岸,最终双方历经点球大战才决出胜负,国安以6比4的总比分120分钟2比2)淘汰对手晋级4强。此役虽然赢球了,但国安的发挥并 ...[详细]
-
近日油管主ElAnalistaDeBits分享新视频,展示了《生化危机9:安魂曲》第一人称与第三人称的对比画面。演示画面来自PC版,RTX5090显卡开启光追,画质超高。对比视频:《生化危机9》玩家可 ...[详细]
-
北京时间7月25日,洛蒂-沃德Lottie Woad)周四完成了她的职业首秀,表现与业余时期相差无几。这位最新崛起的英格兰新星在苏格兰女子公开赛首轮打出67杆,低于标准杆5杆,与多位选手一同落后领先者 ...[详细]
-
来源:北青体育 肖赧2025赛季国内职业联赛球员转会第二个转会窗口夏季转会窗口)于6月23日开启,至7月21日关闭。权威足球转会网站“德转”的信息显示,至7月21日24点,涉及中超俱乐部的转会累计10 ...[详细]
-
老牌甲级劲旅山东围棋队新赛季披上了“银丰”新战袍,并于7月18日在济南银丰华美达酒店举行山东银丰队成立仪式。随后,一场围甲焦点战也在此开打,由山东银丰队主场对阵同门兄弟队伍贵州仁怀酱香队。著名国手、中 ...[详细]
-
上海这段时间仿佛浸在了梅雨里,不仅入梅开篇就是场“暴力梅”,而且雨下得“梅”完“梅”了。梅雨季雨水多、空气湿度大、气温高、食物衣物等都容易发霉,大家也把梅雨称为同音的“霉雨”。梅雨季的气候特点给人带来 ...[详细]
-
作者:王弈冬Jay,像许多美国围棋爱好者一样,是因为《棋魂》而爱上了围棋。那时他还在读高中,常常出现在西雅图围棋中心Seattle Go Center)学棋、对弈。仅仅一年后,他就飞速入段,展现出惊人 ...[详细]
- Carville pulls Epstein story, apologizes after Melania lawyer contact
- 全包比半包装修贵多少 全包装修注意事项
- 防守“断电”葬送好局,烈豹八强首战不敌上海队
- 欧锦赛热身赛:约基奇23+19+4擒希腊 丰泰基奥21分力克拉脱维亚
- 比利·简·金杯深圳总决赛8月8日开票,郑洁担任赛事推广大使
- 徽韵流播处 文明暗香来
- 周鸿祎:智能体将变成赛博牛马 人们可以上班摸鱼
- 歌手孙悦儿子andy艺术首展:18岁少年的Z世代创作宣言
- 辉常视角丨全民健身、全民全运,在这场“国球”乒乓比赛中完美诠释
- 曾靠“肉鸽+射击”破圈的老牌MMO厂商,在SLG领域又有新动作