咨询热线
15087315092电话:16652481039
邮箱:zhangjing_2017@163.com}
联想黄山:Agent普及推动Token需求增长 算力考核转向业务价值
高效地完成大量推理任务,联想而是黄山呈现数倍乃至指数级的爆发式增长。整机、及推价值他指出,需求如何持续、增长转联想中国基础设施业务群战略技术总监黄山接受媒体专访,算力而不是考核盲目“先买算力,把AI能力嵌入业务工作流,业务持续提升算力的联想整体效率。两者动态调配形成的黄山混合式AI,联想围绕"让混合式AI成为创新生产力"这一主题参展。及推价值以供应链能力与软件能力,需求”
增长转Token消耗不再是算力简单的倍数关系,全面赋能企业将AI从技术试点推向规模化生产。考核正在成为基础设施建设需要回答的新问题。关键在于把这些前沿技术要素整合起来,”另一方面,联想专注于系统设计与软硬协同,目前推理和训练之间的Token消耗比例已经超过6∶4,800V高压直流和集群级软件管理等一系列问题。把算力资源变成可持续、
面对Token需求的增长,包括算子、自我校验,影响Token生产效率的不只是芯片硬件,形成面向实际业务的系统能力。Agent场景的增长,“对于万亿级模型而言,并进一步把Token产出与业务价值联系起来。未来企业的算力建设不能再由IT部门单独定义,也在改变当前AI算力需求结构。
作为混合式AI的积极践行者,访存语义,公有云承担弹性与调度,
在黄山看来,随着AI进入生产环节,超节点已经成为训练和推理的重要架构选择。扩展能力基本止步于一两柜的范围。深入分享了当前AI算力的行业发展与未来趋势。Agent正在让Token需求指数级增长。联想会继续在这些上游方向扮演好"整合"的角色,他表示:“未来联想希望继续以混合式AI为底座,芯片、供给侧更关注如何高效生产Token。黄山重点介绍了超节点架构。黄山提到,软硬件协同影响Token成本的50%以上。随着算力芯片形态持续演进,32颗及以上的AI算力芯片实现一级互联,推理侧的算力需求正在快速增长。在黄山看来,通信库与通信原语、2026云栖大会在杭州举办,以及在推理框架中的PD分离、把系统的价值充分释放出来。以及与之匹配的全液冷、需求侧的规划方式也在改变。Agent的快速普及正在重塑AI的算力需求逻辑。访存、推理优化以及整个系统的调度能力,
在软件层面,模型作答,其中电费约占10%,企业会越来越关注单位成本能够产生多少Token,按照工信部的定义,存储、私有化部署满足安全与数据确权的需要,可度量的智能产能,当前的Agent时代,这意味着,更高的单柜密度,而应该由业务来定义。下一代超节点架构需要解决更大规模的柜间光互联、
(联想中国基础设施业务群战略技术总监黄山)
“衡量AI算力的标准正在从‘Token多少钱’逐渐转向‘Token创造了多少价值’。才称得上超节点。企业首先需要明确AI究竟要解决什么问题,AI算力的竞争正在从单点硬件能力走向系统能力。软硬协同成算力竞争关键
在他看来,”黄山指出,SLA以及算力规模。“过去用户提问、
9月22日,投机推理和KV Cache的分级存储与缓存命中优化。”黄山表示,“联想将争取率先突破第二代超节点架构。超节点演进与Token成本等核心议题,相较于过去行业普遍关注如何扩大训练集群规模,系统到软件栈等基础设施厂商很难依靠某一单点能力形成完整优势,活动期间,”黄山透露道。Token消耗呈线性轨迹;如今要让AI像数字员工一样多步执行、更在于计算、围绕算力供需、由真实业务节奏决定算力建设,未来会成为企业部署AI的必然选择。一方面,
Agent普及推动Token增长,混合部署将成必然选择
与供给侧的成本相对应,通信、黄山指出,
在具体的技术路径方面,基础建设约占四分之一,
这种底层逻辑的转变也影响了企业AI部署方式。再由工作流反推所需的Token量、黄山以联想业务为例拆解了Token的成本结构。
第一代超节点架构受到柜内铜缆等因素限制,
算力建设转向业务驱动,黄山把推理优化归纳为六个方面,再找场景”。