四肢不协调?这个AI程序可以帮你秒变舞蹈大师

品牌
腾讯数码
2018年11月13日 20:00

据the verge消息称,加州大学伯克利分校的四位研究人员完成的一个AI程序,可以将一位舞林高手的舞蹈复制到一个瞎蹦乱跳的人身上,哪怕使用者四肢不协调,也能秒变舞蹈大师。

这个程序由许多连续的步骤组成。首先记录目标也就是舞蹈大师的视频,通过一个子程序将舞蹈大师的运动变成棒图,然后找到一个源视频即使用者的视频,和一个由舞蹈大师的动作组成的简笔画。然后,交换发生,神经网络基于源的棒图运动合成目标个体的视频。需要注意的是,要想合成一个这样的视频,使用者需要向程序提供很多长度约为20分钟、每秒120帧的视频,才能获得高质量的传输。

除了复制合成舞蹈动作,这个程序也为稳定面部表情做了准备,程序中有一个子程序可以平滑棒图的运动,因此哪怕舞者过多地晃动,也依旧能在合成时保持稳定。这个子程序是一个完全独立的神经网络,专门用于追踪目标的面部以确保合成视频的真实感。

但是这个系统还存在一定的限制。一是,程序无法准确地模拟各种类型的衣物,因此使用者必须穿紧身衣服。在上图中看到的使用者和源舞者的关节不完全对齐的时刻,就是由于bug导致的视觉异常;二是这个AI程序暂时无法复制复杂动作和特殊位置的动作,如从后向前翻转的手。

值得注意的是,这样的视频曾经需要一整天的时间来制作。但现在,只需要一些源视频和正确的AI软件,它可能会在很长时间之后变成一个应用程序。不过在那之后,我们可能就要怀疑拿着视频说自己会跳舞是不是真的啦。

编辑:青葙子

家电之家©部分网站内容来自网络,如有侵权请联系我们,立即删除!
视频 程序
你该读读这些:一周精选导览
更多内容...

TOP

More