英伟达和昆仑万维各押了一条游戏AI路线 | DLSS 5明日推送更新!Matrix Game 4.0,单卡实时可交互世界模型

英伟达DLSS 5新模型明日推送,神经渲染模块半年提速十倍,而昆仑万维Matrix Game 4.0开源,单张RTX 5090跑通实时游戏世界模型。一个是成熟渲染管线上的AI增强模块,一个是由AI实时生成画面的原生世界模型,AI正从游戏的生产边缘进入运行时的核心回路了。

DLSS 5十倍提速、哈利波特游戏本月接入
英伟达和昆仑万维同时改写游戏规则

◆ 新版模型明天推送RTX 50系  

◆ Matrix Game 4.0单张RTX 5090跑通游戏世界模型

本周游戏图形学的核心命题可以浓缩成两组数字。

英伟达周二宣布DLSS 5神经渲染模型将于10月16日推送更新,3D引导神经渲染模块自身的推理速度相比今年3月首次公开演示累计提升十倍,模型参数量缩减24%至约1.18亿,4K显存占用下降20%。需要界定的是十倍提速特指神经渲染子模型的推理速度,并不等于游戏整体帧率提升十倍,目前唯一实装的《NBA 2K27》上,RTX 5080以4K运行帧数由约240升至约300,整体帧率增益最高1.4倍。

而昆仑万维旗下Skywork AI发布Matrix Game 4.0,宣称是首个可在单张消费级显卡上实时运行的游戏世界模型,一张RTX 5090实现480p分辨率下60 FPS,官方标称按键至画面的端到端延迟低于150毫秒,工程测试最优值约112毫秒,模型权重与游戏代码以Apache 2.0协议同步开源。

图片

一条线索在压缩AI渲染的算力成本,一条线索在重建AI世界的规则表示,两者指向的行业位置却是重合的,即AI从游戏生产流程的边缘工具进入运行时的核心回路。理解这两组数字的分量,需要回到各自的起点。

{18AD5A63-15B2-4F9B-8F49-0D6DB6FBCC91}.png

从双卡5090到300帧  神经渲染的半年工程清障

DLSS的演进史本身就是一部图形学对算力妥协与反妥协的历史。

2018年初代DLSS用卷积网络做时序超分辨率,代价是画面涂抹感与延迟。2025年DLSS 4全面转向Transformer架构,超分辨率、光线重构与帧生成统一到同一模型家族。

图片

DLSS 5迈出的步子比前四代加起来都大,它引入3D引导神经渲染,模型在超分之外同时读取游戏引擎输出的已渲染帧、运动矢量、材质、光照与几何缓冲,对画面的光照响应与材质表现重新估计。

DLSS 5是光栅化与光线追踪管线之上的后置增强模块,引擎依然负责几何与光照的传统计算,AI参与的是画面呈现层的再加工,而非取代渲染管线本身。

争议随之而来。

玩家社区对AI改写美术风格普遍持保留态度,更现实的质疑是硬件负担。

IGN在9月的实测提供了注脚,即便以RTX 5090运行4K,开启DLSS 5后帧率依然明显下滑,3月演示时这套系统甚至需要双卡5090才达到可玩水平。一项让旗舰硬件都难以承载的技术无法成为开发者的常规选项,这是图形学史上反复验证过的规律,光栅化与光线追踪都经历过同样的成本曲线下移,神经渲染也不会例外。

图片

过去半年英伟达做的事情本质上是一场针对推理负载的持续清障。模型规模缩减24%,4K显存占用下降20%,神经渲染环节GPU开销降至9月版本的一半,十年图形技术积累里沉淀的量化、蒸馏与管线调度经验被搬进神经网络的推理路径。

更值得记录的是生成边界的收敛,相较3月演示中人物年龄被AI明显改写的案例,新版对角色外观的改动已经收敛到不易察觉的程度,开发者可以通过SDK将面部等特定元素排除在AI处理范围之外,场景光照与材质的提升则保持肉眼可见的幅度。性能数字决定技术能否落地,边界控制决定创作者是否接受它,两者缺一不可。

当然,新版模型目前仅面向RTX 50系显卡、RTX Spark笔记本电脑与GeForce NOW云端,英伟达已确认RTX 40系将在RTX 50调优完成后获得官方支持,尚无具体日期,RTX 30及更早显卡因缺少原生FP8支持,目前没有官方支持计划。

模组社区在9月已经通过替换CUDA二进制文件在RTX 40乃至30上强制运行DLSS 5,性能代价相当可观,这一插曲说明硬件边界里商业排序的成分不少于技术成分。

内容侧的铺开速度超出多数人的预期。

图片

《NBA 2K27》9月首发独占之后,《霍格沃茨之遗》将于11月5日接入,《燕云十六声》也官宣11月跟进,RTX Remix在10月23日向模组社区开放这套能力,《辐射4》《镜之边缘》等经典作品的玩家重制项目可以直接调用神经渲染的光照与材质增强,模组作者还能自定义增强规则。

图片
图片

从首发独占到多品类铺开,DLSS 5只用了不到两个月。

图片

把规则还给代码

Matrix Game要回答的问题比DLSS 5更根本。

DLSS处理的是已有游戏如何变得更好看,Matrix Game追问的是一个世界能否干脆由AI实时画出来,同时还像一个真正的游戏那样运转。

图片

世界模型赛道此前的挫败集中在规则脱缰。

以谷歌Genie系列为代表的视频原生路线让一个模型身兼数职,记忆世界状态,结算游戏规则,还要持续生成画面。Demo阶段的视觉效果足够惊艳,雪山、城市、沙漠随按键延展,可画面偶尔多一棵树尚能忍受,若NPC位置、玩家血量、任务输赢也由模型临场发挥,产物便不再是游戏,而是一段可交互的统计幻觉,统计上成立与因果上成立之间的鸿沟是这条路线从演示走向产品最大的暗礁。

Matrix Game 4.0的分工设计直接绕开了这处暗礁。

Coding Agent把自然语言需求改写成游戏代码,游戏引擎充当裁判,维护世界状态、执行规则结算并输出结构草图,视频模型作为画师照草图渲染最终画面。

图片

这套架构不是一次成型,回看这条产品线的迭代史,1.0解决生成的世界听懂玩家操作,2.0解决实时,3.0补上长时记忆,3.5稳住空间与角色一致性,4.0把世界状态从模型的隐式记忆里彻底交还给引擎,每一步都在为最终的解耦铺路。分工的效果落在细节里,玩家中弹先扣盾牌耐久,盾碎后开始扣血,血量归零游戏真正结束,每一帧画面由模型生成,每一次伤害结算由代码裁决。这是世界模型从看起来像个游戏走到真正按游戏规则运行的分水岭。








英伟达研究团队的同期工作StreamRender H3采用相近的代码运行世界思路,官方数据显示8张GB200上单步扩散渲染耗时218毫秒,媒体据其技术报告推算的交互延迟约500毫秒,需要说明的是两者分辨率与评测口径并不一致,不具备直接可比性,且已有开发者依据其开源代码重新推演,认为按出厂调度输入到显示的实际滞后可能显著高于这一推算值。

Matrix Game 4.0把同一思路压进单张消费级显卡,官方标称端到端延迟低于150毫秒,最优测试约112毫秒。口径各异的数字不宜排座次,单卡实时这件事本身的工程冲击力已经足够清晰。

图片

压进一张RTX 5090的过程是对扩散推理链路的逐层削剪。

训练阶段用UE5产出低模与高模的配对数据,引擎先渲染只保留结构、位置与运动轨迹的毛坯画面,模型照着草图补全材质与光影,凭空作画变成照图精修。

推理阶段的模型基于Wan2.2 5B Fun Control改造为V2V结构,生成时除结构画面外还调用空间记忆参考图、衔接首帧与缓存中的近期历史,文本编码器只在Caption变化时重算。

计算量本身通过少步自回归蒸馏压缩到一步或两步去噪,每次仅生成四帧,配合FP8量化、CUDA Graph、KV环形缓存与轻量编解码器,文本编码器、因果DiT与VAE全部常驻单卡,最终单步去噪稳态生成速度83 FPS,实际游戏以60 FPS运行。

图片

显存峰值约18.5 GiB对应的是FP8量化版本,若退回FP16精度,权重占用将显著上升,普通5090难以承载,这是按量化比例推算的工程结论,官方未公布FP16口径数据。

开源姿态是这件产品另一个超出技术指标的信号。

4.0以Apache 2.0协议开放权重与代码,宽松许可允许直接商用,这对小团队原型开发是实质性利好,真正的约束来自两处,仓库内第三方组件与素材保留各自许可,以及生成画面涉及的素材版权问题,直接拿来商业发行游戏仍需过一遍这两道关。

环顾赛道,多数世界模型玩家开放的仍是产品、API或研究演示,把完整系统交到开发者手里自行验证的仍是少数,世界模型的技术路线远未收敛,标准答案出现之前,摊开来接受社区检验本身就是一种务实的加速方式。

480p是生成画面的输出分辨率而非原生渲染精度,画面存在空间一致性漂移的固有难题,镜头大幅转动时物体纹理与细节可能跳变,目前演示均为单人场景,多人联机与跨视角一致性未见官方披露。

它近期的实际价值更可能先落在原型开发与小团队创作上,当创意不再排队等待三维资产生产线,先可玩再迭代的生产方式才算第一次获得可落地的技术路径。

图片
后期滤镜时代结束

DLSS 5代表存量增强路线,扎根成熟的光栅化与光追引擎,AI作为渲染后处理增强层,面向现有大型厂商解决已有游戏如何更好看的问题,商业化路径成熟,且深度绑定Blackwell硬件生态,构成新一代显卡的软件壁垒。

Matrix-Game 4.0

Matrix Game 4.0代表原生生成路线,用引擎做规则底座,用视频模型重构画面生成环节,面向从零创作游戏原型,颠覆的是资产生产管线,画质、稳定性与分辨率仍处于早期阶段,模型本身无硬件绑定,实现层依赖CUDA技术栈,可跨不同厂商显卡部署。

两条路线并非竞争关系,一条在成熟管线上加装AI增强模块,一条用AI重做画面生成并保留引擎作为规则裁判,共同构成游戏AI渲染的并行演进。

过去三年行业习惯了AI站在游戏产业链的边缘位置,辅助写代码,辅助出原画,辅助生成配音。这两周的进展指向的位置更深,AI开始住进渲染管线与世界状态的核心回路。它不会在一夜之间改变玩家手里的游戏,但正在改写游戏如何被做出来这个更古老的问题。

GitHub - SkyworkAI/Matrix-Game: Matrix-Game 4.0: Streaming Neural Rendering  for Playable Games · GitHub

10月16日DLSS 5新模型开始推送,一块RTX 50系显卡即可验证十倍的成色。Matrix Game 4.0的代码今晚已经躺在GitHub上等待第一个fork。技术宣讲的终点从来是复现,这一周游戏图形学把验证权交回了开发者手里。

- END -


本文来源于DOIT传媒,文章内容仅供参考,不构成投资建议。

赞 ()

相关推荐

发表回复

评论列表

点击查看更多

    联系我们

    微信:百易小助手

    邮件:contact@doit.com.cn

    工作时间:周一至周五,9:30-18:30,节假日休息

    微信