📢 转载信息
原文作者:Ivan Mehta
获得 a16z 投资的 AI 视频和 3D 模型公司 Luma,发布了一款名为 Ray3 Modify 的新模型,它允许用户通过提供角色参考图像来修改现有素材,同时能保持原始素材的表演效果。用户还可以提供起始帧和结束帧来指导模型生成过渡性的视频内容。
该公司周四表示,Ray3 Modify 模型解决了使用 AI 编辑或生成特效时,在创意工作室场景中保持人类表演一致性的难题。这家初创公司称,该模型能更好地遵循输入素材,使工作室能够将真人演员用于创意或品牌素材制作。Luma 提到,新模型在转换场景的同时,能够保留演员的原有动作、时机、眼神方向和情感表达。
通过 Ray3 Modify,用户可以为原始素材提供一个角色参考进行转换,并将真人演员的外观转换为该角色。这种参考还能让创作者在整个拍摄过程中保留服装、形象和身份等信息。
更重要的是,用户还可以提供起始和结束参考帧来使用新的 Ray3 Modify 模型生成视频。这对于创作者来说非常有用,可以在保持场景连续性的同时,指导过渡、控制角色动作或行为。
Luma AI 联合创始人兼首席执行官 Amit Jain 在一份声明中说:“生成式视频模型具有令人难以置信的表现力,但也很难控制。今天,我们很高兴地推出 Ray3 Modify,它将现实世界与 AI 的表现力相结合,同时将完全的控制权交给创意人员。这意味着创意团队可以先用摄像机捕捉表演,然后立即将其修改到任何想象中的场景中,更换服装,甚至可以利用 AI 回到过去重拍场景,而无需重新进行实景拍摄。”
Luma 表示,用户可以通过该公司的 Dream Machine 平台使用这个新模型。这家与 Runway 和 Kling 等公司竞争的公司,于 2025 年 6 月发布了视频修改功能。
该模型的发布正值该公司在 11 月宣布完成一轮新一轮 9 亿美元的融资之后,该轮融资由沙特阿拉伯公共投资基金旗下的 AI 公司 Humain 领投。现有投资者如 a16z、Amplify Partners 和 Matrix Partners 也参与了本轮投资。这家初创公司还计划与 Humain 合作在沙特阿拉伯建立一个 2GW 的 AI 集群。
🚀 想要体验更好更全面的AI调用?
欢迎使用青云聚合API,约为官网价格的十分之一,支持300+全球最新模型,以及全球各种生图生视频模型,无需翻墙高速稳定,文档丰富,小白也可以简单操作。
评论区