Decart发布Lucy 2.5:可在30FPS直播中实时编辑的AI视频系统

🤖 由 文心大模型 生成的文章摘要

AI视频技术公司Decart正式发布了其直播AI视频编辑系统——Lucy 2.5。该系统能够在30FPS帧率、1080p分辨率下实时生成影像,实现低延迟直播。其核心突破在于无需使用预先录制的视频,而是根据实时动作与光影变化逐帧生成画面。

核心功能:直播中的即时视觉编辑

Lucy 2.5允许用户在直播过程中,通过文本提示或参考图像,对画面进行即时编辑,包括:

替换角色或服装;

转换背景或整体环境;

移除画面中的特定物体。

编辑指令可从大致方向到细节精确指定,并能对颜色、大小、位置等参数进行精细调整。

技术提升:更自然的交互与一致性

相比前代,Lucy 2.5在多个方面实现了显著改进:

物理交互增强:水、火焰、沙子、粘性液体等元素能更自然地与周围环境实时互动。

氛围转换:支持整体画面风格的变换,例如将普通街景转换为霓虹风格的世界观。

无缝替换:在替换物体时,能依据原始场景的阴影和接触点,使新元素自然融合。

长期一致性:通过引入名为“自锚定”的新技术,系统将已生成的影像作为新的参考点。这确保了即使被摄主体移出屏幕后再次出现,编辑效果仍能保持连贯,有效抑制了以往模型中随时间累积的误差问题。

为实现实时编辑,Decart对推理过程进行了加速优化,结合了低精度量化处理与可减少重复运算的稀疏注意力机制等技术,在提升处理速度的同时维持了生成质量。

「93913原创内容,转载请注明出处」