索尼新专利:AI可在GPU渲染完成前预测游戏下一帧,旨在消除插帧延迟

🤖 由 文心大模型 生成的文章摘要

索尼近日申请了一项AI帧预测专利,旨在让AI在GPU完成下一帧渲染之前,就利用已有画面和玩家输入预测出即将出现的画面,从而减少游戏卡顿,同时避免传统帧生成技术带来的额外输入延迟。

该专利的核心思路与现有帧生成技术不同。传统方案(如英伟达DLSS帧生成)通常需要等待两帧真实画面渲染完成,再在两者之间插入合成帧,这不可避免地增加了延迟。索尼的方案则采用“外推”思路:利用最近一帧已完成的画面,结合运动矢量和玩家近期的控制器输入,直接预测下一帧并提前发送至显示缓冲区。专利描述的系统使用联合训练的编码器与解码器,编码器将渲染画面转换为紧凑的嵌入表示,解码器据此生成预测帧。

专利还提及,该系统可结合玩家按键或摇杆操作来提升预测准确性,例如玩家按下跳跃键后,后续几帧的跳跃动画可被模型学习并预判。此外,方案保留了一条非AI的备用路径,通过运动矢量移动像素块来生成合成帧。

不过,报道也指出,该专利并未提供任何性能测试数据,其实际能否在渲染变慢时及时生成足够准确的画面以填补间隙,仍有待验证。预测失误可能导致视觉瑕疵,技术落地难度较高。目前尚不确定该技术是否会应用于未来的PlayStation主机,专利仅为技术方向的探索,不代表必然商用。

「93913原创内容,转载请注明出处」