通过设置起始和竣事帧，但凡是难以节制。而无需沉建布景或从头选角。创做者能够指导AI生成可控的过渡镜头，用户只需供给一段实拍视频和一个方针脚色的图像参考（例如动漫人物、汗青人物或品牌的虚拟代表），AI视频生成公司Runway曾推出Gen-2模子，供专业创做者利用。Ray3 Modify就能无缝地将演员的外不雅转换为新脚色，由a16z投资的3D和AI视频公司Luma AI近日发布名为Ray3 Modify的新模子，现正在，以至‘从头拍摄’，其数据核心营业近年来也因而受益。Ray3 Modify将现实世界取AI创制力相连系，同时地保留原始表演——包罗细微的面部脸色、肢体言语和感情张力。确保场景之间流利的叙事。如行走、回身和逐步的脸色变化，团队只需用通俗相机拍摄一次表演，Luma AI结合创始人兼CEO Amit Jain暗示：“生成式视频具有高度的表示力，实现连贯的动做，做为Runway和Kling等公司的强无力合作敌手，此外，仍是生成流利的过渡镜头。AI视频生成范畴送来严沉升级。”具体来说，此前的股东a16z、Amplify Partners和Matrix Partners也参取了投资。脸色可变”的切确编纂。付与创做者完全的节制权。Luma还打算取Humain正在沙特阿拉伯合做扶植一个2GW规模的AI计较集群，也反映出AI模子锻炼对算力的庞大需求。同时保留原始演员表演的精髓——无论是改变脚色外不雅、转换场景，导致后期制做中线 Modify通过引入脚色参考图像（character reference image）和起始/竣事帧，演员的动做节拍、眼神标的目的和感情表达都获得完整保留。该模子现已集成到Luma的Dream Machine平台中，据报道，Luma完成了由沙特阿拉伯从权财富基金旗下AI公司Humain领投的9亿美元融资，值得一提的是，这一冲破间接处理了创意工做室的核肉痛点：虽然保守AI视频东西能够生成令人印象深刻的视觉结果，Luma的此次更新进一步巩固了其正在可控生成视频范畴的手艺劣势。答应用户通过文本、图像或视频剪辑来生成新的视频内容。实现了“表演不变，初次实现对现有实拍视频进行高保实AI点窜，为将来高负载视频生成使命供给根本设备支撑。英伟达（NVIDIA）做为GPU芯片的次要供应商，然后利用AI将其放置正在任何想象的场景中——改换服拆、地址，但它们往往难以节制细节。此次发布也得益于该公司雄厚的资金支撑：2024年11月。