聋哑人可以用 Kinect 视频聊天啦!
Kinect 是微软近年来最令人怦然心动的产品,获得吉尼斯世界纪录中“有史以来销售最快的设备”称号。人们除了用 Kinect 来玩游戏,还发现了很多其他的用途。比如开发者发现 Kinect 在医疗上的潜力,可用来辅助外科手术。
近日微软亚洲研究院与中科院计算机研究所挖掘了 Kinect 新的用途:识别手语。通过动作捕捉,再加入手语的识别算法,“翻译”出聋哑人的语言。
微软研究人员称,该技术被叫做“3D 轨迹匹配”,Kinect 读出手的动作,然后把动作翻译成字,翻译是分段进行的,即将一段话拆开来翻译。在视频中,该研究成果可分成了两种模式。
(视频来自 Youku)
一种是“翻译模式”,即将手语翻译成文字或者语音;一种是“交流模式”,可将输入的文本通过虚拟人物来转换成手语。两种模式结合,可辅助正常人与聋哑人的视频聊天。
该技术的价值不仅仅在于改善聋哑人的沟通方式,而且更重要的是,再次表明 Kinect 极大的扩展空间。此前,Kinect 可以用来模拟尸检,以及手术前的 3D 影像查看,未来相信 Kinect 会移植到更多应用场景中。