CUDA已不足为虑:AMD显卡AI神优化 2周时间性能涨3倍
最新9月2日消息,NVIDIA的CUDA公认护城河能力极高,AMD的显卡跑实际应用往往要比NVIDIA吃亏很多,然而AMD最近说CUDA不足为虑也是真的,A卡在优化上也做到神速提升。
SemiAnalysis日前发布了一份AMD与NVIDIA显卡在Qwen3.5 397B及MiniMax M3两款开源大模型上的性能及成本对比,出战的是两边当前最强的MI355X显卡与B300显卡。
AMD这边对比了两个时间点,一个是8月12日,一个是最新的8月31日,因为NVIDIA的显卡性能一如既往保持水准,AMD则是在快速优化提升。

在Qwen3.5大模型上,AMD在短短两周时间内就大幅提升了MI355X显卡的表现,8月12日时90 TTFT(首字时间)大多在2.0秒至5.5秒之间; 8月31日时大部分工况的时延压缩到了0.9秒至3.5秒区间,响应速度提升近一倍。
此前MI355X的吞吐性价比天花板在50M tok/$左右;优化后在低时延段(如1.5s -2.5s)就突破了80M-110M tok/$,并在TP2工况下最高达到了~140M tok/$,差不多三倍水平。
这个性能也非常接近NVIDIA当前的旗舰AI卡B300了,不过后者在低时延下的性能依然领先。

在MiniMax M3大模型上也有类似的结果,8月12日时MI3550X跟B300差距很大,但到了8月31日,优化后的MI355X交互速度从之前大约55tok/s/user提升到了230tok/s/user,也是三倍左右的提升。

整体来说,AMD在过去两周时间内就大幅优化了MI355X的性能,两个开源大模型中各种工况下速度提升2倍到3倍是不成问题的,部分情况下提升超过3倍,尽管还不能说超越B300,但性能水平也是天差地别了。
别忘了,AMD的显卡在性价比上依然有优势的,MI355X的每小时Tco成本是1.5美元,B300是2.26美元,差距在1/3左右,折算下来MI355X的整体效益也很可观了。

AMD的这些提升基本上符合他们发布ROCm 10时的宣传,在硬件不变的情况下各种优化就能把大模型的推理性能提升3倍以上。
有了这些基础,AMD真的可以不用仰视CUDA的生态优势了,今年还会有性能更强大的MI455X新一代AI平台上市,继续优化的话说不定可以赶超NVIDIA一次。

《CUDA已不足为虑:AMD显卡AI神优化 2周时间性能涨3倍》转载自互联网,如有侵权,联系我们删除,QQ:369-8522。
相关图文
-
美光扔出王炸!DDR6带宽暴涨2倍 400层NAND量产
快科技10月22日消息,据报道,美光近日在2026年OCP峰会上公布下一代存储技术路线图,覆盖DDR6、LPDDR6、vHBM及G11 NAND四大方向,多项指标较上代实现翻倍级提升。DDR6的带宽预计达到DDR5的两... -
内存越堆越烫!SK海力士把散热件塞进夹层:热阻降低30%
快科技10月22日消息,SK海力士的下一代高带宽内存(HBM)定名iHBM,思路是把散热结构直接做进内存封装内部,不再只靠外置的散热器和冷板把热带走。HBM难散热是结构决定的,多层DRAM(动态随机... -
DIY寒冬将至!2027年PC内存更难买也更贵:产能全被AI吃了
快科技10月22日消息,据集邦咨询最新研究报告,2027年PC内存供应可能进一步收缩,原因是存储厂商持续将产能向AI加速器所需的高带宽存储器及数据中心其他存储产品倾斜。这或将推高面向消费者的... -
突发!美光桃园工厂刚刚宣布今起罢工24小时:内存恐再涨价
快科技10月22日消息,据报道,美光在中国台湾地区的劳资协商出现分化:台中工会昨日与公司达成协议并撤回调解,桃园工会则因利润分享方案未获具体回应,于今日上午9点启动24小时罢工。与台中... -
你还在纠结32GB还是64GB内存:单条1TB DDR6已经公布!
快科技10月22日消息,美光在2026年OCP峰会上公布了下一代存储技术路线图,涉及DDR6、LPDDR6、HBM与G11 NAND四条产品线。其中DDR6被定位为面向高可靠性服务器市场,美光称其带宽将达到DDR5的两...












