微软用 Surface Book 和 Kinect 为 DJ 的音乐演出带来了全新的视觉体验
漆黑的舞台,随着一阵低沉的机器人声响起,一个金字塔状的混音台、耀眼夺目的舞台灯光出现在现场 3、4 万名观众的面前。很快,绚丽的灯光配合强有力的节拍划破了沉寂的夜空。一场狂欢,就此开始。
这是 2006 年,在美国加州印第奥市举行的科切拉音乐节上,Daft Punk 献上的一场无与伦比的表演。因为在此之前,没有人见过类似的现场表演,没有人见过这么多的 LED 灯,更没有人见过如此高质量的视觉效果…
10 年后,在同样的地点的同一个音乐节上,Calvin Harris 站在差不多高的混音台上,数量繁多的 LED 灯被替换成几十束五光十色的激光灯,身后的屏幕被面积更大、显示效果更清晰细腻的 LED 屏幕代替,同样为数万名观众带来难忘的一夜。
说起来,一场完美的音乐演出,除了音乐本身以外,视觉效果也变成了一个不可或缺的部分。于是,像 VJ 这样的新职业也应运而生。简单来说,这种职业其实跟 DJ 的概念很相似,就是将影像、动画等视觉元素作即时的剪辑,让音乐与视觉进行完美的结合,以便达到更好视听效果,带来更好的现场氛围。
现在这门活儿,随着科技的发展也变得更加有趣。这不,最近微软和 DJ Alison Wonderland 合作,利用动作捕捉技术,希望打造一场前所未有的音乐演出。
与其他演唱会不同的是,这一次,所有的视觉效果都来自一台轻巧的笔记本——Surface Book。据介绍,此次演出的硬件模块由两个 Kinect 摄像头,一台 Surface Book 以及两个 Brix PC 组成。当然,其中负责主要运算的,当属这台顶配 Surface Book。而软件部分,则是由著名 VJ 软件 Resolume 负责,整个演出的 VJ 部分由创意工作室 SuperUber 负责。
显然,微软为 Alison Wonderland 打造了一个更加便携、即插即用的 VJ 系统,这样就能让她的舞台表演能够在任意尺寸的场地上进行,无论是诸如 Lollapalooza 的音乐节般的大型演出,亦或者小型的室内派对,都能快速投入使用,而这套 VJ 系统也正是微软《音乐 X 技术》企划的一部分。
当 Wonderland 在舞台上使用动作捕捉技术来控制这些视觉元素时,就像在玩 Kinect 的体感游戏一样,呈现出来的效果也非常震撼。
为了实现动作捕捉,两个 Kinect 摄像头负责追踪动作的景深,并将数据传回 Surface Book,而 Surface book 会把这些数据转化成视觉效果呈现出来。
微软 Brand Studios 的战略合作总监 Amy Soroka 表示:
当 Wonderland 移动的时候,一些效果会被强化。因此,她可以通过在两台 Kinect 摄像头面前移动,来作出一些更加强大或者更加灵动的效果。Kinect 同时也会时刻监测声音,她创造的音乐会导致一些呈现出来的视觉效果发生改变。
Sorokas 还补充道,实际上,一台 Kinect 被用来采集 Wonderland 的身体动作,另外一台则聚焦在她的手上,让她通过手来控制视觉效果。
按照微软官方的说法,此次是 Surface Book 在 VJ 领域的首秀,但 Surface Book 已经凭借其强大的性能,赢得了 VJ 软件 Resolume 开发团队的信赖。
在开发过程中,我们很吃惊。我们原本把 Surface Book 当成……嗯……一个 MIDI 控制器。而一旦我们把软件安装上……它能运行所有东西,竟然也能进行所有的视觉效果处理!
当然,这套设备使用的是 Surface Book 顶配,不仅配备了 intel 酷睿 i7 处理器,还有 16GB 内存、1TB SSD 以及 2GB 显存的 GTX965M。当 Resolume 团队看到这样一台设备能够强力到同时、实时运行控制界面和 Resolume 软件,却没有任何延迟,这让 Resolume 开发团队非常惊讶。
想像一下,你是一名 VJ 在负责一场大型音乐演出,但当你真正站在这个舞台上时,你是不会慌乱的,因为一切都是简单明了,容易操作。
创意工作室的创始人兼 CEO Russ Rive 指出,定制的视觉应用在 Surface Book 上很容易上手,现场的 VJ 只需要进行选择和调整,不必即时跟踪做后期。
现在,微软为 Wonderland 定制的这套 VJ 系统,未来可能被更多的音乐艺术家所使用,Rive 指了指 Kinect,表示利用这套系统可以创建类似 Matrix 的效果或类似 3D 扫描的东西。
一旦你能真正发挥出你的创意,我想它将帮你达到非常酷的视觉效果。
在本周末 Lollapalooza 音乐节期间,这套“Kinect-and-Surface-Book”系统将会展出,如果你正在芝加哥旅游,不妨去亲自体验一下这种视听感受吧!