Netflix推出了一款新工具,使创作人员无需重新拍摄即可对场景进行更改。
该公司与索非亚大学合作开发的“视频对象和交互删除”(VOID)技术,可以从场景中删除对象,并重建场景,就好像该对象从未存在过一样。
该工具能够重新构想移除对象后其他所有事物的行为方式。

据该公司称,用户只需点击一个物体即可将其移除。然后,基于视觉语言模型的推理流程会识别场景中哪些其他区域会受到影响,例如可能掉落、碰撞或改变轨迹的物体,并将这些信息编码成一个“四边形掩模”,用于指导扩散模型。

Netflix表示,VOID的第一遍处理会生成一段去除物体及其交互的视频。如果模型检测到物体变形,它会进行第二遍处理,利用从第一遍处理中提取的流扭曲噪声重新运行推理,从而沿着新合成的轨迹稳定物体形状。
有关 VOID 的更多详情请点击此处查看。
本文来自作者投稿,版权归原作者所有。如需转载,请注明出处:https://www.nxrte.com/zixun/65993.html