微软使用 Kinect 实时翻译口语和手语

2023-07-28 16:41发布

【中关村在线软件资讯】10月31日消息:近日,微软研究院利用Kinect体感设备英语培训,为无法说同一种语言的人们搭建了一座桥梁——无论他们能否听到。 Kinect 手语翻译器是一个研究原型,可将手口语实时翻译成口语口语英语对话日常用什么app,反之亦然。

据报道,Kinect 将捕捉用户的手势,而机器学习和模式识别程序将有助于理解其含义。 当然英语培训,主要的翻译技术是Bing提供的。

该系统可以捕获两方之间的特定对话,聋人可以向另一个人手语。 视觉信号被实时翻译成书面和口语语言微软使用 Kinect 实时翻译口语和手语,口语被精确地翻译成视觉符号。

虽然这已经是一项了不起的成就口语英语对话日常用什么app,但研究人员仍需要大量工作来完善它。 目前的模式识别仅使用5人,仅添加了300个中国手语单词(总共4000个)。

“识别仍然是该项目中最具挑战性的部分口语英语对话日常用什么app学英语,”Kinect 手语翻译项目的项目经理吴国斌解释道。 在对数据手套和相机进行试验后口语英语对话日常用什么app,Kinect 被证明是合适的选择。

吴说,中国有超过2000万人有听力困难,估计全球有3.6亿人有同样的经历。 因此,当该项目成功走出实验室阶段,必将造福亿万人类。