中文科技资讯
业界资讯 互联网 手机资讯 电脑硬件 数码产品 家电产品 APP应用 手机游戏 美通快讯

中科曙光scaleFabric技术体系落地,为国产大模型Token效率提升注入新动能

2026-09-14来源:互联网编辑:瑞雪

近日,中科曙光正式推出基于scaleFabric原生无损RDMA的Token加速技术体系,构建了“算—存—传”三级紧耦合的超级通道,并实现GPU直通网络IBGDA技术的国内首次规模化应用。这一突破标志着国产AI计算基础设施在系统级创新领域迈出关键一步,为大规模模型训练与推理提供了更高效的硬件支撑。

据技术团队介绍,scaleFabric网络架构在时延控制上达到国际领先水平:单跳转发时延仅260纳秒,网卡端到端时延低于1微秒,与英伟达NDR方案持平;在三跳基准测试中,端到端时延较主流RoCE方案降低63%。这一特性在万卡级分布式训练场景中尤为关键,网络通信耗时占比可从30%-50%显著压缩,为计算、存储、网络协同优化提供了基础保障。

中科曙光高速网络互联产品部总工程师万伟指出,当前AI大模型普遍采用Transformer架构,Token处理效率已成为衡量模型效能的核心指标。随着模型规模扩张,单GPU难以承载完整模型,必须通过模型并行方式在集群中分配计算任务。这一过程中,Token数据在GPU间的传输效率、KV Cache的存储复用能力,以及网络通信的同步性,共同构成了制约模型产出的三大瓶颈。

针对计算环节的通信延迟问题,scaleFabric原生支持GPUDirect RDMA技术,允许网卡直接读写GPU显存,绕过CPU内存中转。更进一步的IBGDA技术则将通信控制权完全交给GPU,使GPU Kernel可直接驱动网卡进行数据传输。这种设计消除了传统路径中CPU协调通信产生的延迟,在高频小包通信场景中可提升30%以上的传输效率。

存储系统的优化同样关键。技术团队构建了包含NVMe over RDMA、XDS和NFS over RDMA的存储直通技术体系:NVMe over RDMA加速远端NVMe存储访问,XDS支持GPU直接读取远端存储数据,NFS over RDMA提升传统文件存储效率。三项技术可根据场景动态组合,例如训练数据加载采用NFS over RDMA,热点数据通过NVMe over RDMA加速,KV Cache卸载则依赖XDS实现GPU直连存储。

在MoE(混合专家)架构大模型应用中,scaleFabric的IBGDA技术展现出显著优势。以DeepSeek模型为例,其通过DeepEP框架实现的专家并行通信会产生大量高频小消息,传统网络方案难以满足需求。IBGDA的规模化部署使集群推理性能提升15%-20%,首Token时延(TTFT)和输出Token时延(TPOT)等关键指标得到优化。

值得关注的是,这项突破性技术已实现软硬解耦。中科曙光北京公司scaleFabric产品经理纵瑞博透露,IBGDA作为软件技术层,已完成与国产生态和NVIDIA生态的适配。用户只需启用支持IBGDA的通信库,无需修改上层业务代码即可获得性能提升,这种“透明式”升级方案大幅降低了技术迁移成本。

从产业视角看,IBGDA的规模化落地为国产AI计算基础设施提供了新的发展路径。在单卡算力存在差距的现实条件下,通过系统级创新提升集群整体性能成为关键突破口。scaleFabric网络架构已与DeepEP等通信框架完成适配,其开放架构设计也正在与多家国产GPU、CPU厂商展开联合优化,旨在构建除RoCE和InfiniBand之外的第三条技术路线。

技术演进方面,scaleFabric下一代产品将支持800G网络带宽和更高交换容量,同时引入多平面架构、包喷洒技术和乱序重组能力。这些升级将进一步优化拥塞控制、故障自愈和负载均衡机制,为MoE等复杂模型架构提供更高效的国产高速互连方案,推动国产智算基础设施通过系统优化实现整体性能跃升。

iPhone 18 Pro系列京东开售!早鸟票用户享专属权益 最快9分钟送达
此前成功抽中京东Apple新品早鸟票的用户无需抢购,已在开售当晚丝滑购入心仪机型,更获得了以旧换新补贴500元及AppleCareServices原厂服务等专属权益。 开售不久,就有网友在京东抢到iPho…

2026-09-14

9月数码盛宴来袭!芯片系统新机齐登场,手机厂商混战谁将脱颖而出?
月数码圈迎来发布会狂欢,各大手机厂商扎堆发布新机、新处理器、全新手机系统,从联发科、高通两大芯片巨头,到小米、华为、OPPO、vivo、荣耀、iQOO 一众国产手机品牌,发布会排期密密麻麻,新机大战一触即发。…

2026-09-14

中国移动发布AI可信计算:构建全生命周期AI安全方案 启动生态共建合作
IT时代网9月12日消息,在2026中国算力大会主论坛上,中国移动正式发布AI可信计算(AITC),并启动AI可信计算生态共建战略合作。据介绍,中国移动基于移动云全栈国产化算力底座,融合机密计算、国产密码、信…

2026-09-13

海洋浮标水质监测站:远程唤醒设备,高效保障海洋水质监测运维
综上,海洋浮标水质监测站远程休眠唤醒是高效的运维操作方式,通过前期工况核查、远程指令下发、设备状态核验、数据校验归档的标准化流程,可顺利完成设备唤醒作业。规范开展远程唤醒操作,能够有效提升海上浮标设备的运维…

2026-09-12

600元捡漏16G+1T安卓机!系统修复蓝牙故障,原充加持性价比拉满
这机器含金量在16G+1T存储上面,功能完好的最低要750元,而这台600元核心故障是蓝牙时好时坏,我拿到的时候确实不能用,点蓝牙都打不开。其实闲鱼有些所谓的“故障机”并不是硬件问题,很多就是系统或软件问题…

2026-09-12

百元价位耳夹式耳机怎么选?三款热门机型实测对比,帮你精准避坑!
虹觅小云夹是三款中唯一带有防漏音模式的机型,可以通过反向声波降低声音外泄,在图书馆、教室、办公室都可以放心使用,静音场景的体验十分出色,这在百元价位的耳机里非常少见。续航方面:FIIL Atom为8+36…

2026-09-12

IIFAA智能体可信身份工作组成立 50余家机构携手共筑智能商业信任基石
IIFAA联盟负责人表示,智能体可信身份工作组将推动构建统一的智能体身份框架,建立覆盖身份注册、授权与意图传递、运行状态持续核验、审计追溯等环节的全链路可信体系,为智能体进入真实商业场景构建统一、可靠、可验证…

2026-09-11