中国电信完成业界首个面向大模型推理的异构算力协同技术验证
近期,中国电信研究院联合北京智源人工智能研究院、昆仑芯科技有限公司、中兴通讯、北京基流科技有限公司、中科加禾公司等产业合作伙伴,依托中国电信云网融合大科创装置,完成业界首次DeepSeek系列模型基于“英伟达算力+国产算力”交叉组合的异构PD分离推理试验验证,实现大模型推理集群的降本增效。
本试验完成了面向大模型推理的异构算力协同技术针对6类典型场景的推理性能验证,DeepSeek 671B模型在多种场景下实现推理集群总吞吐性能30%~72%的提升,并发能力提升2倍,同等吞吐条件下,异构算力组合推理成本下降最高达42%,真正实现“存量利旧”与“国产替代”的双重目标。
针对推理Prefill与Decode阶段特性优化芯片设计逐渐成为行业共识,英伟达和华为分别发布芯片设计规划,将PD两阶段分别适用“高算低存”和“低算高存”的思路融于芯片设计。中国电信研究院在2025年初洞察到PD分离推理对算力异质性的需求,构建异构通信优化、PD资源调配、推理任务调度全栈自研异构混推体系,展现出三大核心优势:一是通过自研异构传输引擎,实现跨架构芯片PD池间KVCache的高效传输;二是采用自研国产算力赋能工具“翼芯”,根据业务特征与算力性能自动推荐并实时优化PD资源配比;三是构建AI推理平台,实现推理任务在Prefill池与Decode池间的动态调度。
技术验证的成功体现了中国电信对智算推理优化技术的深刻理解与对国产算力适配调优的实践创新,彰显了中国电信作为算力基础设施建设方推动国产算力从“可用”到“好用”的央企担当。未来,中国电信将持续深化国产算力高质量发展布局,面向大模型训推一体、多智能体系统打造“互联互通、高效协同”的异构算力生态格局,推动新型信息基础设施协调发展。(记者 翼研)
转自:人民邮电报
- 1琢玉成器·砺剑为锋|2026年密尔克卫干部子衿培训(总第十期)圆满收官
- 2海尔AI家庭机器人长春店开业,外骨骼W3妈妈款成体验焦点
- 3海尔AI家庭机器人成都茂业中心西南旗舰店开业
- 4智眸AI × 汽车公关:从人工整理到成品交付的效率跃迁
- 5把时间还给技术员,天津电建用AI来协助写方案
- 6锅具美学、国潮瓷艺、健康家纺:深圳礼品家居展10月20日启幕,百万家居好物一站配齐
- 7拟选派11356人 2026年“三区”人才支持计划教师专项计划公布
- 8防范“数字员工”越权风险 绿盟科技智能体安全秋季成果重磅发布
- 9哈工大“航天科普融媒体系列丛书进课堂”活动走进支教地学校
- 10“歇脚点”变身“打卡点” 一个高速服务区如何成为爆款“景点”?
- 1为爱,也为自己:POYA铂丽雅让璀璨走进日常生活
- 2多维度感知入境游“热力值”持续飙升
- 3入境游从“看风景”转向“看智造” 外国游客沉浸式感受中国工业蓬勃“脉动”
- 4冠军品质 为爱加分!刘璇现身箭牌鸿蒙直播间,见证箭牌全场景鸿蒙化新成果
- 5武汉万达瑞华酒店 美食汇开启秋日开渔季自助盛宴
- 6武汉万达瑞华酒店大堂酒廊上新 现做拿破仑焕新午后时光
- 7雅游东方|雅致酒店四重雅礼,共赴山河金秋之约
- 8连续15年蝉联行业第一!王力安防395.38亿品牌价值背后:深耕安防,时间见证长期力量
- 9从300家到新征程,万达酒店及度假村亮相2026环球旅讯峰会
- 10新品云集 实力进阶 | 合众思壮多款重磅产品齐聚北斗规模应用国际峰会



