中科曙光发布词元加速技术体系:IBGDA十万卡级集群完成验证
9月11日消息,中科中科曙光正式发布scaleFabric Token加速技术体系,曙光率先在国内实现IBGDA技术(即InfiniBand GPU直连异步技术)的发布规模化应用。
据中科曙光相关产品负责人介绍,词元scaleFabric通过构建“算存传”三级紧耦合的加速技术集群词元加速通道,在网络层面与计算、体系存储紧密协同,万完成提升词元吞吐效率,卡级实现词元在大模型训练、验证推理到存储复用全链路的中科高速流转。
较低时延可减少数据在多级网络中的曙光传输耗时,使IBGDA与存储直通带来的发布路径优化进一步延伸至大规模集群,推动计算、词元存储与网络协同提升词元生成效率。加速技术集群
在大模型推理时代,体系混合专家模型(MoE)已成为主流架构,IBGDA技术的价值进一步凸显。在MoE通信中,IBGDA通过减少CPU参与关键通信路径,大幅提升并行通信效率。
此前,IBGDA的规模化落地主要由国际厂商主导,国产RDMA网卡与GPU直通的落地案例极为罕见。目前,中科曙光自研IBGDA技术已在十万卡级大规模集群中完成验证,实现该领域的关键补位。
随着IBGDA进入规模化部署阶段,基于scaleFabric的词元加速技术体系有望进一步提升多卡间数据交换效率,为混合专家模型等提供新的国产高速互连选择,也为国产智算基础设施通过系统优化提升整体性能提供支撑。
相关文章:
- 王慧文声援西贝:有没有人要组局买下来 才不管是不是预制菜
- 热搜第一!网友吐槽苹果iOS 27电池图标丑
- 别再吵了!国家这次动真格,老房子“电梯大战”终于要剧终了?
- 对比三星Z Fold8!iPhone Duo几乎折痕不可见 苹果手段被吐槽鸡贼
- 李昊谈比赛中为队友“出头”:对方欺负我队友,我们不能吃亏
- 苹果Beats 360头戴耳机上市:续航32小时 售价2999元
- 三色独立发光!小米首款RGBMini LED电视图赏
- iOS 27正式版Bug太离谱!下拉通知栏+控制中心iPhone当场卡死 只能重启
- 41岁C罗:我肯定会打进1000球才退役 有媒体想杀我但根本没法做到
- 单打四强出炉!国乒男单占2席惊现超级黑马;日乒男单8人全军覆没
相关推荐:
- 男子豪饮1斤白酒开车上高速失控:倒车撞护栏后直接当场大睡
- 北京最严无人机管理规定11月15日起实施!全域禁飞 不得持有、存放无人机
- 营收断崖式下滑!德国百年零部件商申请破产:车市低迷成主因
- 698元!影石AI录音领夹麦发布 墨水屏直接变身电子工牌
- 莱昂纳德2年1.15亿提前续约猛龙 生涯总收入超5亿
- 黄仁勋同台助阵!微软官宣10月7日发布会:Surface旗舰Ultra将至
- 小米手表S5 41mm陶瓷白亮相:莹白陶瓷表圈+钻石型表冠
- 荣耀Magic9首发!MagicOS 11发布:搭载新一代YOYO AI能力大升级
- 《黑魂》15周年!不被看好的游戏却成为魂类奠基石
- 注意!iPhone 13以下先别着急升iOS 27