帮助聋哑儿童父母学习手语的新 Kaggle 比赛
2023 年 2 月 23 日

作者:Sam Sepah,机器学习研究项目经理

作为一名从小就从家人那里学习手语的聋人,我认为自己很幸运。在美国,每天有 33 个婴儿出生时就患有永久性听力损失。(kdhe.ks.govdeafchildren.org)大多数聋哑儿童出生于不会手语的听力正常的父母,就像我自己一样。我的父母决心让我具备在任何时间、任何地点、以任何方式有效沟通的能力。由于这种丰富的语言环境,今天我可以实现我的梦想,过上我想要的生活。

但大多数听力正常的父母不会手语,也可能没有学习手语的资源。因此,他们可能无法与聋哑孩子进行交谈,即使是在家庭晚餐桌上。

在没有使用手语的家庭中长大的聋哑儿童有语言剥夺的风险。语言剥夺是指在儿童生命的前几年,没有提供足够的语言(口语或手语)接触,导致语言发展迟缓。语言剥夺在聋哑儿童中很常见,但也会发生在听力正常的儿童身上。它通常会导致在就业、人际关系和实现人生目标的能力方面面临挑战。

那么,我们可以做些什么呢?

您可以加入我们新的 Kaggle 上的孤立手语识别比赛,并训练一个准确的实时手语识别(TensorFlow Lite)模型,从而帮助减少聋哑儿童的语言剥夺风险!

我们计划将获奖模型开源,并将其添加到 PopSign 智能手机游戏应用程序中。PopSign* 是一款智能手机应用程序,让学习美国手语 (ASL) 变得有趣和互动。玩家将 ASL 手语视频与包含英文单词的气泡匹配,以弹出它们。

PopSign 的设计目的是帮助聋哑儿童的父母学习 ASL,但它也向任何想要学习手语词汇的人开放。该应用程序是想要学习手语并帮助孩子发展语言和社交技能的父母的宝贵资源。通过从此次比赛中添加手语识别器,PopSign 玩家将能够签署他们想要射击的气泡类型,让玩家有机会形成手语,而不仅仅是观看其他人打手语的视频。

我们感谢我们的合作伙伴,罗切斯特理工学院国家聋人技术学院佐治亚理工学院聋人专业艺术网络,他们开发了 PopSign 游戏应用程序,创建了数据集,并帮助我们为此次比赛做好准备。您训练的游戏、数据集和模型将帮助我们改善许多家庭的沟通能力!

立即参加比赛,让我们共同为世界各地的聋哑儿童做出改变。

*PopSign 是佐治亚理工学院和罗切斯特理工学院国家聋人技术学院开发的应用程序。该应用程序在 Android 和 iOS 上提供测试版。

下一篇文章
A new Kaggle competition to help parents of deaf children learn sign language

- 作者:Sam Sepah,机器学习研究项目经理 作为一名从小就从家人那里学习手语的聋人,我认为自己很幸运。在美国,每天有 33 个婴儿出生时就患有永久性听力损失。(kdhe.ks.govdeafchildren.org)大多数聋哑儿童出生于不会手语的听力正常的父母,就像我自己一样。我的父母决心让我具备在任何时间、任何地点、以任何方式有效沟通的能力…