10 月 18 日,据科技媒体 TechSpot 报道,索尼近日申请了一项专利,设想让 AI 在 GPU 完成渲染前预测下一帧画面,以减少游戏画面卡顿,同时避免帧生成技术带来的额外延迟。

这项技术针对的是帧生成的固有缺点:显示画面不再需要等两帧完成渲染才能生成插入其间的中间帧,而是直接利用已生成的画面预测下一帧,无需等待两帧即可插值,帮助游戏维持更稳定的帧输出节奏。
索尼还使用了联合训练的编解码器,将渲染完成的画面转换为紧凑的数值化嵌入表示,再让解码器利用这些提示生成预测帧。游戏运行时,该系统与图形渲染管线并行工作——硬件渲染下一帧时,AI 处理上一帧,并把预测结果送入显示缓冲区,因此预测画面有可能在下一帧渲染完成前先行显示。
此外,该系统可利用运动矢量和玩家近期的手柄操作,让角色的操作历史成为下一帧动作预测的根基。训练过程使用连续视频帧:神经网络以随机初始化的权重起步,输入一帧并尝试预测下一帧,再与实际的后续画面比对,计算衡量预测误差的损失值。
不过,这项技术能否真正发挥作用,取决于 AI 能否足够快地生成准确画面,在渲染速度下降时填补帧输出间隙。
原创文章,作者:校草,如若转载,请注明出处:https://www.kejixun.co/article/765073.html