中关村在线

笔记本

联想发布端侧AI新技术,让PC本地推理能力媲美OpenAI-mini

2025 年5 月7 日,联想创新科技大会(TechWorld)以“让AI成为创新生产力”为主题,聚焦混合式人工智能,从个人到企业,全方位展示联想创新技术成果。会上,联想首次定义“超级智能体”三大核心功能——感知与交互、认知与决策、自主与演进,并正式发布“联想天禧”个人超级智能体、“联想乐享”企业超级智能体。

联想展示了其在端侧算力方面的最新创新成果—— “联想推理加速引擎”。这款由联想、清华大学及无问芯穹联合研发的推理引擎,是专为高效AIPC推理而设计的软硬件协同优化平台,可以让一台普通PC的本地推理能力,媲美OpenAI去年发布的o1-mini云端模型。

“联想推理加速引擎”通过高性能并行解码、算子融合优化以及异构计算技术,实现了多种应用场景下推理速度的大幅提升,以及功耗和内存占用的显著降低。与大模型推理芯片相结合,通过硬件加速与软件优化的无缝协作,进一步放大了性能提升,形成了叠加效应。

为直观展示“联想推理加速引擎”的实力,现场设置了一场“竞速赛”。三台配置相同的AIPC同时解答2024年高考数学压轴题:

初代大模型:耗时27秒,答案0分。

二代大模型:耗时26秒,答案满分。

二代大模型+“联想推理加速引擎”:耗时13秒,答案满分。

这表明模型能力的提升和“联想推理加速引擎”对算力的提升,让设备的预填充更为迅速、解码速度更快、推理时间更短,同时占用内存更少,能耗更低,设备上的AI 能力得到了大幅提升。

过去一年,AI领域创新不断。尤其是DeepSeek的出现将算法创新与工程优化深度融合,推动了AI算力和模型技术的普及,更进一步加速了强推理模型端侧化的发展。

联想集团董事长兼CEO杨元庆表示,很快大家就会在即将发布的下一代AI PC 上体验到“联想推理加速引擎”带来的强大本地推理能力,其性能可以与云端大模型相媲美,但成本却低得多。“今天随着AI需求的爆发式增长,端侧计算和推理能力的提升将依然保持指数级增长的速度,甚至更快。未来12个月,端侧AI综合能力实现至少三倍的提升,这也许不是梦想!”

也正是由于端侧AI能力的提升,以及跨设备跨生态的端边云协同,使得个人可信计算成为可能,这也为个人超级智能体形成了技术基础。联想集团发布的可供用户训练与完善的天禧个人超级智能体,正是得益于此技术的推动。

展开全文
人赞过该文
内容纠错

相关电商优惠

评论

更多评论
还没有人评论~ 快来抢沙发吧~

读过此文的还读过

点击加载更多

内容相关产品

说点什么吧~ 0

发评论,赚金豆

收藏 0 分享
首页查报价问答论坛下载手机笔记本游戏硬件数码影音家用电器办公打印 更多

更多频道

频道导航
辅助工具