VideoSwap是由新加坡国立大学的ShowLab和Meta的GenAI团队共同开发的一个项目，旨在通过交互式语义点对应技术，实现视频中用户自定义概念的交换，同时保留背景。与依赖密集对应关系的传统视频编辑方法不同，VideoSwap框架利用语义点对应关系，仅需少量语义点就能对齐主体的运动轨迹并修改其形状，允许用户通过拖拽等交互操作来编辑视频，实现形状变化的视频编辑。
主要功能
-
自定义概念交换：用户可以将视频中的主要主体（如人物、动物或物体）更换为另一个具有不同身份标识且可能形状不同的目标主体，同时保持视频背景不变。这种更换过程是高度定制化的，使得视频内容能够根据用户的具体需求进行个性化调整，同时视频的背景环境保持不变，确保视频内容的连贯性和自然感。