从2014年开始,宋纪元和同学利用课余时间和假期投入手语翻译机器人的研发。他们从机械手开始做起,相继研发了数据采集手套和智能手语双向翻译系统,所用的电机、电子元件和模块等,都是从互联网上购买的低成本器件。
宋纪元介绍,他们为手语翻译机器人录入了几百条语音提示,能表述服务领域的常用语句,语音与手语双向翻译每次仅需约两秒。他说:“希望将来手语机器人能在医院、火车站、银行等公共场所得到广泛应用,帮助聋哑人享受无障碍的社会生活。”
宋纪元在检查智能仿生手语翻译机器人的机械手
宋纪元和智能仿生手语翻译机器人在一起(
宋纪元使用激光切割机制作零件
这是用于采集手语动作的智能手套
宋纪元在展示动作识别视觉系统
下一步他希望通过软件配合摄像头,直接将手语动作翻译成语音和文字。 宋纪元在利用3D打印机制作零件
宋纪元(中)和同学在工作
智能仿生手语翻译机器人通过机械手翻译语音“可以”
宋纪元将智能仿生手语翻译机器人搬到检修室准备检修