数媒竞赛网

1、作品名称

手语者

2、作品分类

智能科技产品设计

3、作品描述

本作品是一款实现聋哑人和普通人手语交互的平台软件。在普通人对聋哑人交流环节，输入是普通人的声音，将声音首先进行文字转换，把转换的文字作为关键词在数据库中查询得到语义对应的动画文件，再以动画形式播放给聋哑人，让聋哑人理解正常人所要表达的意思；在聋哑人对普通人交流环节，输入是摄像头获取的手部动作视频，采用设计的深度网络对手部骨骼点进行检测，对检测的骨骼点继续采用深度网络进行动作识别，最后把识别的动作以文字或语音形式反馈给正常人，让正常人理解聋哑人所要表达的意思。该作品可以实现聋哑人和正常人间简单的无障碍双向交流，以提高AI对残障人士的积极作用。

4、创意来源

聋哑人在正常生活和工作中需要和大量不懂手语的普通人交流，没受过手语教育的普通人也难以和聋哑人交流。如何利用手部骨骼点检测和手势识别等深度理论、音视频获取和处理技术、3DMAX动画和数据库技术，一方面对聋哑人做出的手势进行识别并以语音形式向普通人传达聋哑人想要表达的意思，另一方面把正常人的意思以动画形式显示给聋哑人是本作品拟解决的问题。为了解决这一问题，更好的方便聋哑人的工作和生活，让聋哑人和普通人之间的沟通变得更加顺畅便捷，我们开发了一款 “手语者”交流平台。

5、运行环境（所需操作系统、硬件、软件等）

Linux