Luma发布Ray3 Modify：AI视频编辑新突破，保留演员表演细节，一键换装、换场景

JQR1

AI视频生成领域迎来关键升级。由a16z投资的3D与AI视频公司Luma AI近日推出全新模型 Ray3Modify，首次实现在保留原始演员表演精髓的前提下，对已有实拍视频进行高保真AI修改——无论是更换角色外观、切换服装、变换场景，还是生成平滑过渡镜头，演员的动作节奏、眼神方向、情感表达均被完整保留。

这一突破直击创意工作室的核心痛点:传统AI视频工具虽能生成惊艳画面，却难以控制细节，导致演员的真实表演在后期处理中丢失。而Ray3Modify通过引入角色参考图（character reference image）和起止关键帧(start/end frames)，实现了“表演不变、表现可变”的精准编辑。

具体而言，用户只需提供一段实拍视频和目标角色的形象参考（如动漫人物、历史角色或品牌虚拟代言人），Ray3Modify即可将演员的外貌无缝转化为新角色，同时忠实保留其原始表演——包括微妙的表情变化、肢体语言和情绪张力。此外，通过设定起始与结束帧，创作者还能指导AI生成可控的过渡镜头，实现角色行走、转身、表情渐变等连贯动作，确保场景间叙事流畅。

“生成式视频极具表现力，但往往难以控制，”Luma AI联合创始人兼CEO Amit Jain表示，“Ray3Modify将真实世界与AI的创造力融合，赋予创作者完全掌控权。现在，团队只需用普通摄像机拍摄一次表演，就能用AI将其置于任何想象中的场景中——换装、换地、甚至‘重拍’，而无需重新搭景或召集演员。”

该模型现已集成至Luma的 Dream Machine 平台，面向专业创作者开放。作为Runway、Kling等公司的有力竞争者，Luma此次更新进一步巩固其在可控生成视频领域的技术优势。

此次发布亦得益于公司强劲的资本支持:2024年11月，Luma刚完成9亿美元巨额融资，由沙特主权财富基金旗下的AI公司Humain领投，a16z、Amplify Partners、Matrix Partners等老股东跟投。据悉，Luma还计划与Humain在沙特合作建设一座2GW规模的AI算力集群，为未来高负载视频生成任务提供基础设施保障。

当AI不再只是“生成内容”，而是“增强表演”，影视、广告、游戏等行业的工作流或将被彻底重构——真实人类的表演力，与AI的想象力，终于在同一帧画面中完美共存。

来源：AIbase