在过去的两年里，王建源等团队成员几乎每天都准时出现在学院的实验室里。如今，他们已经收集了超过30万的语料库。“经过计算和比较，距离汉语水平考试四级只有100余字的差距。”王建元介绍。
手语是一种具有特定语法和语序的视觉语言。手势、表情和肢体动作可以自由组合，表达不同的意思。在袁天天的设想中，这个系统所呈现的内容不应该是一个由中文组成的句子，而应该遵循输入输出端的手语语序和语境，以及中文的表达方式。逻辑。
天津理工大学计算机学院研究生一年级学生孙悦(音译)将自己在团队中的工作描述为“搭建桥梁”。“就拿‘阳光总是在风雨之后’这句话来说，手语的语序是‘风/雨/结束/阳光’，这显然让人无法理解。”孙悦表示，她和合作伙伴逐渐构建了一套手语识别算法框架模型，“通俗地说，我们为计算机编写了一套‘手语教材’鸿运在线官方下载。”有了这套“教材”，丰富的语料库就有了用武之地，相当于找到了手语。转换成中文规则后，只有“桥”修复后，数据才能正常运行。如今，该模型已经基本能够实现“复杂场景下的实时手语翻译”。
搭建桥梁，并将手语翻译应用于更多场景2019年，袁天天领导的“复杂场景下的实时中文手语翻译系统”入选工业和信息化部新一代人工智能产业创新重点任务揭秘项目，获得国家财政支持，也加快了整个团队的进度。
去年5月，他们将自己的研究成果带到天津举行的第五届世界智能大会会场，并获得好评。“当时，该系统已经覆盖了教育、法律、餐饮、交通等应用场景。在光照良好的环境下，识别率可达95%。”袁天天说，到今天，系统还在升级中，“我们的目标是100万个语料库，基本覆盖社会生活的常见场景。”
