联想单机部署DeepSeek推理性能实现新突破
2025年03月17日 14:28
来源: 中国证券报·中证网
7人评论
1
1
东方财富APP
Scan me!

方便,快捷

手机查看财经快讯

专业,丰富

一手掌握市场脉搏

手机上阅读文章
Scan me!

提示:

微信扫一扫

分享到您的

朋友圈

K图 00992_0]

  炒股第一步,先开个股票账户

  中证报中证网讯(记者孟培嘉)3月17日,联想宣布旗下首款AMD AI大模型训练服务器联想问天WA7785a G3在单机部署671B(满血版)DeepSeek大模型时,可实现极限吞吐量6708token/s,将单台服务器运行大模型的性能推向新高。

  据悉,依托联想万全异构智算平台,联想通过访存优化、显存优化、PCIe 5.0全互联架构创新以及精选SGLang框架中性能最优算子等诸多创新方式,对大模型从预训练、后训练到推理的全流程进行持续优化,在模拟问题对话场景时,最高可支持并发数158,TPOT 93毫秒,TTFT 2.01秒;而在模拟代码生成时,并发数可达140,TPOT 100毫秒,TTFT 5.53秒。

  这一成绩意味着,单台联想问天WA7785a G3可以支撑1500人规模企业的正常使用,是继联想问天WA7780 G3服务器单机部署满血版DeepSeek大模型总吞吐量突破2500 token/s后,单机部署该大模型推理性能的又一次突破。

(文章来源:中国证券报·中证网)

文章来源:中国证券报·中证网 责任编辑:65
原标题:联想单机部署DeepSeek推理性能实现新突破
郑重声明:东方财富发布此内容旨在传播更多信息,与本站立场无关,不构成投资建议。据此操作,风险自担。
举报
分享到微信朋友圈
Scan me!

打开微信,

点击底部的“发现”

使用“扫一扫”

即可将网页分享至朋友圈

扫描二维码关注

东方财富官网微信

还可输入
清除
提交评论
郑重声明: 1.根据《证券法》规定,禁止编造、传播虚假信息或者误导性信息,扰乱证券市场;2.用户在本社区发表的所有资料、言论等仅代表个人观点,与本网站立场无关,不对您构成任何投资建议。用户应基于自己的独立判断,自行决定证券投资并承担相应风险。 《东方财富社区管理规定》
热门评论 查看全部评论
全部评论
最新 最热 最早
2025-03-17 15:15:53 来自 湖北
PE12,净利润、现金流近200亿!最低估值科技股,估值相当于10元的小米,50的快手,静候后期估值修复爆发!
置顶 删除 举报 评论 点赞
香港交易所股东 : 想忽悠人来买联想哈哈
2025-03-18 01:45:21 来自 广东
删除 举报 评论 点赞
股大V 回复 股大V : 事实说话,快手! 查看图片
2025-03-17 15:56:19 来自 湖北
删除 举报 评论 点赞
还有3条回复, 点击查看全部
2025-03-17 15:02:38 来自 湖北
同时,开始跨入了机器人、智能驾驶
置顶 删除 举报 评论 点赞

扫一扫下载APP

扫一扫下载APP
信息网络传播视听节目许可证:0908328号 经营证券期货业务许可证编号:913101046312860336 违法和不良信息举报:021-61278686 举报邮箱:jubao@eastmoney.com
沪ICP证:沪B2-20070217 网站备案号:沪ICP备05006054号-11 沪公网安备 31010402000120号 版权所有:东方财富网 意见与建议:4000300059/952500
搜索
复制