微软创新日2013 自然用户界面成果分享

基于Kinect的手语翻译系统

世界各地有3.6亿的听力障碍人士，其中来自中国的听力障碍患者人数将近2100万。每一天，他们都面临着大多数人从来无需考虑也难以想象的沟通挑战。我们长期以来致力研发，试图解决这个困扰业界多年的难题：如何开发一种工具，让人“听”得懂手语，帮助听障人士改善生活质量。为此，我们正在与中国科学院计算技术研究所和北京联合大学合作，借助Kinect设备打破沟通障碍。高性价比的Kinect通过同时捕捉色彩和深度图像信息为我们实现目标开辟了新的机遇。这项研发以微软研究院在翻译和自然语言处理、语音和手势识别等自然用户界面领域的广泛研究成果为基础，并更进一步。多式输入数据的应用将突破先前单纯依靠视觉输入或语音数据的局限性。其所应用的技术除 Kinect For Windows外，还包括必应词典、微软翻译、语言建模和3D建模等来自微软亚洲研究院的技术。设想一下，听障人士在健听的观众面前用自己的语言(手语)发表演说，每位观众都能不费吹灰之力听懂他的演说，这让我们看到了让聋哑患者“发声”的新希望。

本文导航

阅读全文

微软创新日2013 自然用户界面成果分享

本文导航

热门标签