# 看穿你的五分钟和下一秒：AI 动作能帮助人类做到什么？

- 作者：脑极体
- 发布时间：2019-07-08 12:31
- 分类：商业
- 原文：https://www.ifanr.com/1233317

![](https://s3.ifanr.com/wp-content/uploads/2019/07/4.jpeg)

[本文](https://mp.weixin.qq.com/s/WSPJMvLthrQA2pvFrg7rOQ)来自微信公众号脑极体（ID：unity007），作者为我堂堂一熊猫，爱范儿经授权发布。



相信了解电竞的人，一定对「预判」二字非常熟悉。在游戏中，玩家通过丰富的对战经验，对对手的下一步动作进行预估并提前进行反应。在篮球、足球、格斗、拳击等等活动中也是一样，对于高手来说，对手腰侧一动就知道对方要打出左勾拳，便可以提前做出格挡动作。

当然这种能力并不是谁都能拥有，通常都是「高手限定」。只有累积下大量经验加上强大的反应能力才能实现，尤其这种能力偏向于下意识反应和直觉，很难以体系化的方式教授给更多的人。

说到这里，相信很多人都会想到一个问题，我们能否利用AI的力量复制动作预判能力呢？在AI医疗影像阅片、AI拍照等等技术之中，我们已经可以看到AI对于专家能力的捕捉和复制。

其实此前有不少研究者对此进行相关尝试，常见的方法是通过Kinect设备来定点采集人的动作，将动作转化为数据，通过机器学习方法训练模型，通过预测数据进而模拟人的下一步动作。可很快人们就发现，这种设备采集式的动作预测并没有什么作用，因为配搭采集设备会极大的阻碍人类进行动作，从数据采集成本上来说也相对较高。

一直以来，科学家们也都在尝试利用其它方法来实现AI动作预测。

![看穿你的五分钟和下一秒：AI动作能帮助人类做到什么？](https://s3.ifanr.com/wp-content/uploads/2019/07/imported-1233317-1562559189.jpg "看穿你的五分钟和下一秒：AI动作能帮助人类做到什么？")

**例如通过说话声音来实现**

在与他人交谈，尤其是公开演讲时，人们常常会配上手势来丰富表达。那么有没有可能，这些手势动作进行预测呢？在UC Berkeley和MIT的研究中，就通过声音语言来实现了这一点。

研究人员收集了10个人144小时的演讲视频，一方面通过视频智能分析算法识别出图像中演讲者手指和手臂的动作，另一方面通过跨模态转换技术，将演讲者的语言声波变换与动作变换一一对应在一起。如此以来，AI就可以通过声音来对人类的动作进行下一步预测。

![看穿你的五分钟和下一秒：AI动作能帮助人类做到什么？](https://s3.ifanr.com/wp-content/uploads/2019/07/imported-1233317-1562559191.jpg "看穿你的五分钟和下一秒：AI动作能帮助人类做到什么？")

**或是通过RGB图像来预测人体细节姿势**

在发现了硬件动作采集的不靠谱之后，人们慢慢开始尝试使用其他方法，例如东京工业大学今年在IEEE上发布了一篇论文，就实现了在简单背景下（例如比较初级的绿幕）通过2D图像进行动作捕捉和精准预测。

这一方法利用残差网络将人体姿势图像转换成一种2D「位置信息」，再通过LSTM学习时序位置，实现对于位置信息的预测。这种方式虽然对于预测对象所处的背景有所要求，但预测能力非常精准，能够达到预测15帧后，即0.5秒后的动作。

![看穿你的五分钟和下一秒：AI动作能帮助人类做到什么？](https://s3.ifanr.com/wp-content/uploads/2019/07/imported-1233317-1562559192.jpg "看穿你的五分钟和下一秒：AI动作能帮助人类做到什么？")

**甚至直接预言未来五分钟的世界**

有人追求细节动作的预测，但德国波恩大学则是以更粗放的方法，追求更长时间的动作预测。以往借助AI实现的动作预测，通常都属于「单步预测」，例如AI可以预测拍球一个动作，知道球接触到手时要向下压，却没法预测拍球之后的运球、投篮等等动作。

而在波恩大学的研究中，研究者将RNN和CNN结合在一起，对不同动作打上标签，既对动作细节进行预测，又对不同标签出现的序列进行预测。在这种方式之下，AI仅仅通过两个小时的学习，就能够在人类制作沙拉时，对剩下80%的动作进行预测。

### 从「怎么想」到「怎么做」：AI动作预测能解决哪些问题？

伴随着AI动作预测在技术上越来越完备，这一技术的应用场景也被开发的越来越多。目前来说，我们可以为AI动作预测找到以下几种用途。

从基础角度，AI动作预测可以帮助人类更高效的进行体育训练。

在东京工业大学的案例中，用户只需戴上VR眼镜，就能将AI对于人类走路、格斗、搏击甚至踢球时的动作预测能力，以图像的形式投射到眼前人身上。这时再进行动作训练，就可以帮助普通人更加立体化的理解动作运动逻辑。至于在足球这类运动之中，则可以用来进行战术分析。

![看穿你的五分钟和下一秒：AI动作能帮助人类做到什么？](https://s3.ifanr.com/wp-content/uploads/2019/07/imported-1233317-1562559193.jpg "看穿你的五分钟和下一秒：AI动作能帮助人类做到什么？")

从更深一层看，只有掌握了利用AI预测动作的能力，才能通过动作细节识别视频的真假。

我们已经看到过很多案例，通过几张照片和一段录音，就能够伪造出视频。那么有了AI动作预测，岂不是更可以学习人类的动作习惯，伪造出更加逼真的视频？实际上只有当我们研发出AI预测动作的技术之后，才能生成对抗性鉴别器，反向对视频中内容的真假进行鉴定。

最后，只有当AI拥有预测人类动作的能力时，人机协作才会更加高效。

很多时候我们以为AI想要和人类配合的亲密无间，需要了解人类的所思所想，实际上想要达到这一点，AI不需要知道人类「怎么想」，只需要知道人类「怎么做」。德国波恩大学提出的设想，就是让AI能够在预测人类动作之后，进行相关反应来配合人类。例如通过预测人类拌沙拉的动作，帮助人类拌好一份半成品沙拉。尤其是在老人护理、儿童陪伴等等场景之中，这些对象由于种种限制可能没法利用语言与机器人进行交互，这时机器人通过动作预测来实现主动服务就变得十分必要。

人类肉体的步步行动无一不受精神支配，通过大脑运作传递肌电信号，才能调动肌肉运动肢体。对于人类和AI来说，弄清大脑的运作方式都有些困难，但如果从「半路」拦截，直接掌握肉体行动的逻辑，或许也是个不错的解决方案。