快手也发布了一个通过拖动锚点控制视频物体和镜头运动的项目DragAnything。

与现有的运动控制技术相比,DragAnything 有几个显着的优势:

首先,基于轨迹的操作方式对用户更友好,尤其是在获取其他辅助信号(如遮罩、深度图等)较为繁琐时。用户只需在互动中绘制一条线(即轨迹)即可。

其次,我们的实体识别技术能够处理任何对象,这意味着它可以控制包括背景在内的各种实体的运动。

最后,这种实体识别技术还可以同时对多个对象实现不同的运动控制。

大量实验表明,我们的技术在 FVD、FID 和用户体验研究方面均达到了行业领先水平,特别是在对象运动控制方面,我们的方法比之前的技术(例如 DragNUWA)在人类评估中提高了 26%。

项目地址:https://weijiawu.github.io/draganything_page/
 
 
Back to Top