
Luma,这家由a16z支持的AI视频和3D模型公司,推出了一款全新模型名为Ray3 Modify,用户可以通过提供角色参考图像来修改现有视频,从而保留原始视频的表现。用户还可以提供起始和结束帧,以引导模型生成过渡视频。
公司在周四表示,Ray3 Modify模型解决了在使用AI为创意工作室编辑或生成效果时保留人类表现的问题。初创公司表示,该模型更好地遵循输入视频,使工作室能够使用真人演员进行创意或品牌视频。Luma提到,新模型在转换场景时保留了演员的原始动作、时间、视线和情感表达。
通过Ray3 Modify,用户可以为原始视频提供角色参考进行转换,并将真人演员的外观转换为该角色。这个参考还允许创作者在拍摄过程中保留服装、相似性和身份等信息。
此外,用户还可以提供起始和结束参考帧,使用新的Ray3 Modify模型创建视频。这对于创作者在指导过渡或控制角色动作或行为时保持场景之间的连续性非常有帮助。
“生成性视频模型极具表现力,但也难以控制。今天,我们很高兴推出Ray3 Modify,它将现实世界与AI的表现力相结合,同时赋予创作者完全的控制权。这意味着创意团队可以用相机捕捉表演,然后立即修改它们,使其出现在任何可以想象的地点,改变服装,甚至可以用AI重新拍摄场景,而无需重新进行实地拍摄,”Luma AI的联合创始人兼CEO Amit Jain在声明中说道。
Luma表示,新模型通过公司的Dream Machine平台向用户开放。该公司与Runway和Kling等竞争对手竞争,推出了视频修改功能于2025年6月。
