有了这个算法,跳出「火星哥」的舞步 so easy

产品

08-27 11:34

除了专业舞者、爱好者和「尬舞」者,大部分国人在舞动身体时还是显得拘谨和不自在。不过,现在有了这个叫作「Everybody Dance Now」的新算法,每个人都能跳出现实生活中跳不出的舞步了。

▲ 模仿 Bruno Mars 的舞步

美国加州大学伯克利分校的研究团队前段时间在 arXiV 上发布了新论文,其中指出,他们可用一组算法实现了舞步的复制,用户只需要输入他们想模仿的舞蹈视频和输出视频主角的视频素材即可。

首先,其中一个子算法负责将源舞蹈视频的动作扒下来,并生成一个火柴人似的 3D 动作模型。随后,算法会以火柴人模型和输出视频为素材,生成一帧帧舞步图像。最后,另一个算法还会专门负责处理图像的面部表情。

需要指出的是,现在这个算法还存在不少局限。譬如,要做出质量好的转换,模型需要至少 20 分钟 120 帧的视频。此外,算法现在还没能处理好「随舞飘逸」布料动态,所以输出目标们都得穿上比较贴身的衣服。

▲ 真人模仿舞步片段

而在呈现效果上,我们能看到输出视频还不时出现卡顿、融化,甚至直接不见手脚的情况,但总的来说,算法模仿的效果已经是非常不错了。

▲ 算法生成片段

虽然人工智能算法在和人类「交际」时依旧表现出一副「人工智障」的模样,但不得不说,它们对人类「为所欲为」的能力越来越强。人工智能如今在伪造人脸表情声音以及舞步上都已经获得了不错的成绩。

与此同时,安全问题也成了我们如今遇到这类新技术时心情复杂的原因。以 Deepfakes 制作的报复性色情片曾一度在社交网络上传播,而这套「Everybody Dance Now」算法,也有可能被恶意使用。当算法模仿的动作不再只是舞步,而是一些非法行为,这些视频可能就会成为全新假新闻的开始。

题图来自 iflyer,内文配图均来自论文Youtube 截图

后评论

评论在审核通过后将对所有人可见

正在加载中