RTX 5090用户狂喜!英伟达免费送1.9倍AI性能:本地跑模型再也不用折腾
最新9月4日消息,英伟达在IFA 2026上宣布多项本地AI重大升级。三款主流智能体应用Hermes Agent、OpenClaw和Perplexity Portable Computer将支持Windows一键本地部署。用户无需手动下载模型或调整参数,程序自动检测GPU并完成配置。

在性能提升上,llama.cpp(大语言模型推理框架)最新优化在GeForce RTX 5090上实现最高1.9倍推理吞吐提升。Qwen3.6-27B模型token吞吐量提升50%,Qwen3.6-35B加速达90%。
与此同时,推理框架vLLM在RTX PRO 6000 Blackwell上实现了20%的速度提升,双DGX Spark集群则达到1.4倍提升。

除了让已有模型跑得更快,英伟达还大幅降低了本地AI的部署门槛。Perplexity Portable Computer将于9月登陆Windows和Linux平台,提供一键本地部署功能,不过需要配备24GB及以上显存的英伟达GPU。
完成本地部署后,用户可在本地完整运行工作流,不消耗积分,必要时才将部分任务提交云端,且上传前需获得用户许可。
Perplexity只是本次支持一键部署的三款应用之一。Hermes Agent由Nous Research开发,是通用型智能体。配置完成后可调用工具、跨任务保持上下文、跨会话记忆信息并随时间积累可复用技能。OpenClaw号称GitHub最大AI项目,已获超38万星标。
英伟达同步开放NVIDIA PAIR工具测试版。该工具可自动发现家庭局域网内所有兼容PC,将独立推理请求路由至空闲算力设备,实现多机协同推理。此外,PAIR还兼容Windows、macOS和Linux,支持RTX 20系列及更新GPU。

《RTX 5090用户狂喜!英伟达免费送1.9倍AI性能:本地跑模型再也不用折腾》转载自互联网,如有侵权,联系我们删除,QQ:369-8522。
相关图文
-
美光扔出王炸!DDR6带宽暴涨2倍 400层NAND量产
快科技10月22日消息,据报道,美光近日在2026年OCP峰会上公布下一代存储技术路线图,覆盖DDR6、LPDDR6、vHBM及G11 NAND四大方向,多项指标较上代实现翻倍级提升。DDR6的带宽预计达到DDR5的两... -
内存越堆越烫!SK海力士把散热件塞进夹层:热阻降低30%
快科技10月22日消息,SK海力士的下一代高带宽内存(HBM)定名iHBM,思路是把散热结构直接做进内存封装内部,不再只靠外置的散热器和冷板把热带走。HBM难散热是结构决定的,多层DRAM(动态随机... -
DIY寒冬将至!2027年PC内存更难买也更贵:产能全被AI吃了
快科技10月22日消息,据集邦咨询最新研究报告,2027年PC内存供应可能进一步收缩,原因是存储厂商持续将产能向AI加速器所需的高带宽存储器及数据中心其他存储产品倾斜。这或将推高面向消费者的... -
突发!美光桃园工厂刚刚宣布今起罢工24小时:内存恐再涨价
快科技10月22日消息,据报道,美光在中国台湾地区的劳资协商出现分化:台中工会昨日与公司达成协议并撤回调解,桃园工会则因利润分享方案未获具体回应,于今日上午9点启动24小时罢工。与台中... -
你还在纠结32GB还是64GB内存:单条1TB DDR6已经公布!
快科技10月22日消息,美光在2026年OCP峰会上公布了下一代存储技术路线图,涉及DDR6、LPDDR6、HBM与G11 NAND四条产品线。其中DDR6被定位为面向高可靠性服务器市场,美光称其带宽将达到DDR5的两...












