媒体界
行业纵横 资讯速递 科技前沿 峰会论坛 企业快讯 商业快讯

中科曙光scaleFabric技术体系落地,为国产大模型Token效率提升注入新动能

2026-09-14来源:互联网编辑:瑞雪

近日,中科曙光正式推出基于scaleFabric原生无损RDMA的Token加速技术体系,构建了“算—存—传”三级紧耦合的超级通道,并实现GPU直通网络IBGDA技术的国内首次规模化应用。这一突破标志着国产AI计算基础设施在系统级创新领域迈出关键一步,为大规模模型训练与推理提供了更高效的硬件支撑。

据技术团队介绍,scaleFabric网络架构在时延控制上达到国际领先水平:单跳转发时延仅260纳秒,网卡端到端时延低于1微秒,与英伟达NDR方案持平;在三跳基准测试中,端到端时延较主流RoCE方案降低63%。这一特性在万卡级分布式训练场景中尤为关键,网络通信耗时占比可从30%-50%显著压缩,为计算、存储、网络协同优化提供了基础保障。

中科曙光高速网络互联产品部总工程师万伟指出,当前AI大模型普遍采用Transformer架构,Token处理效率已成为衡量模型效能的核心指标。随着模型规模扩张,单GPU难以承载完整模型,必须通过模型并行方式在集群中分配计算任务。这一过程中,Token数据在GPU间的传输效率、KV Cache的存储复用能力,以及网络通信的同步性,共同构成了制约模型产出的三大瓶颈。

针对计算环节的通信延迟问题,scaleFabric原生支持GPUDirect RDMA技术,允许网卡直接读写GPU显存,绕过CPU内存中转。更进一步的IBGDA技术则将通信控制权完全交给GPU,使GPU Kernel可直接驱动网卡进行数据传输。这种设计消除了传统路径中CPU协调通信产生的延迟,在高频小包通信场景中可提升30%以上的传输效率。

存储系统的优化同样关键。技术团队构建了包含NVMe over RDMA、XDS和NFS over RDMA的存储直通技术体系:NVMe over RDMA加速远端NVMe存储访问,XDS支持GPU直接读取远端存储数据,NFS over RDMA提升传统文件存储效率。三项技术可根据场景动态组合,例如训练数据加载采用NFS over RDMA,热点数据通过NVMe over RDMA加速,KV Cache卸载则依赖XDS实现GPU直连存储。

在MoE(混合专家)架构大模型应用中,scaleFabric的IBGDA技术展现出显著优势。以DeepSeek模型为例,其通过DeepEP框架实现的专家并行通信会产生大量高频小消息,传统网络方案难以满足需求。IBGDA的规模化部署使集群推理性能提升15%-20%,首Token时延(TTFT)和输出Token时延(TPOT)等关键指标得到优化。

值得关注的是,这项突破性技术已实现软硬解耦。中科曙光北京公司scaleFabric产品经理纵瑞博透露,IBGDA作为软件技术层,已完成与国产生态和NVIDIA生态的适配。用户只需启用支持IBGDA的通信库,无需修改上层业务代码即可获得性能提升,这种“透明式”升级方案大幅降低了技术迁移成本。

从产业视角看,IBGDA的规模化落地为国产AI计算基础设施提供了新的发展路径。在单卡算力存在差距的现实条件下,通过系统级创新提升集群整体性能成为关键突破口。scaleFabric网络架构已与DeepEP等通信框架完成适配,其开放架构设计也正在与多家国产GPU、CPU厂商展开联合优化,旨在构建除RoCE和InfiniBand之外的第三条技术路线。

技术演进方面,scaleFabric下一代产品将支持800G网络带宽和更高交换容量,同时引入多平面架构、包喷洒技术和乱序重组能力。这些升级将进一步优化拥塞控制、故障自愈和负载均衡机制,为MoE等复杂模型架构提供更高效的国产高速互连方案,推动国产智算基础设施通过系统优化实现整体性能跃升。

中科循环资源科技产业园项目启动 打造多板块循环经济新引擎
重型卡车报废拆解回收区用地面积为8.0万㎡,规划年拆解重卡5万台,年回收废钢约40万吨、有色金属约2.5万吨、再制造零部件5万台套,建成后将成为东北地区重要的商用车循环利用基地和废钢保供基地。 中科循环研究…

2026-09-14

石景山2026工业互联网洽谈会:供需对接,为产业协同发展添活力
会上,石景山区生态环境局、北京市自来水集团、北京市地铁运营有限公司等8家单位集中发布场景需求,覆盖生态环保、城市供水、轨道交通、绿色物流、燃气热电、产业绿链和云计算等领域。该平台由中关村工业互联网产业园联…

2026-09-13

阿里WaClaw赋能电商:AI助力商家高效整合内容,变身创意好帮手
它当然可以生成图片和视频,但其更主要的目标,是把分散的工具、常见的种草玩法和商家的品牌素材接入同一套工作流程。 当AI能够帮助商家看懂一条热门视频,再把其中的方法转化为适合自家商品的内容时,“创意合伙人”这…

2026-09-13

AI时代内容安全如何保障?6大厂商对比与选型全攻略
先确定需要审核的内容类型、风险分类和处置边界;按部署方式、数据要求和预算筛除不适用的方案;使用统一的真实业务样本开展PoC,比较效果、时延和运营效率;计算接口、人工、实施、硬件和长期运维在内的总体成本。中小…

2026-09-13

OpenAI Astra需求激增致系统承压 暂停专业版新用户注册服务
A:因为最新模型Astra需求量前所未有,给公司基础设施系统带来了巨大压力,专业版套餐对系统的负担最大,所以公司暂时关闭了该服务层级的新用户注册功能。 A:Astra于9月3日发布,在AI推理、编程和计算机…

2026-09-13

从展示到运营:中燃总部AI创新馆“六大引擎”引领能源企业展厅数智变革
中燃总部AI创新馆则跳出了这一框架,将展厅本身作为企业数智化运营的“可视化入口”,通过六大AI超级引擎的立体呈现,让参观者直观感知中国燃气从传统能源供应商向城市服务赋能者的转型路径。 中燃AI创新馆在此基础上…

2026-09-12

初中网管打造hao123,1190万卖百度被质疑,二十年后方知是双赢之举
尝到甜头的李兴平顺势加码,持续扩充网站收录数量,花费几十元注册域名,正式定名hao123。 百度赢在了格局与长远:拿下PC时代最核心的下沉流量入口,守住早期竞争壁垒,依托海量用户持续造血,顺利跻身互联网巨头…

2026-09-12