Sign

Sign 可在屏幕上显示手语示范动作及手部轨迹，用户只需模仿动作即可进行学习。这款工具无需额外硬件设备，只需通过网络摄像头即可追踪并识别手势。

Signs 平台的核心功能

1. 经过验证的 ASL 符号库：Signs 提供了一个经过验证的 ASL 符号库，学习者可以通过平台上的 3D 头像演示来扩展词汇量。这些 3D 头像能够清晰展示手语动作，帮助用户更好地理解和学习。
2. 实时反馈：通过 AI 工具，Signs 能够分析网络摄像头拍摄的视频，为用户提供关于手语动作的实时反馈。无论是初学者还是熟练用户，都可以通过这一功能提升手语表达的准确性。
3. 构建 ASL 视频数据集：Signs 鼓励用户通过签署特定单词来帮助构建 ASL 视频数据集。英伟达计划将这一数据集扩展到 40 万个视频片段，涵盖 1000 个手语单词。这些数据将由流利的 ASL 用户和专业翻译人员进行验证，以确保每个符号的准确性。
4. 高质量的视觉词典和教学工具“Signs 的目标是创建一个高质量的视觉词典和教学工具，帮助用户更好地学习和使用 ASL。这些工具不仅适用于个人学习，还可以用于专业教学场景。

平台的愿景与目标

支持 ASL 教育

美国聋儿协会执行董事 Cheri Dowling 指出，大多数聋儿的父母是听力正常的人。通过像 Signs 这样易于使用的工具，家庭成员可以尽早开始学习 ASL，从而与孩子建立有效的沟通渠道。Signs 平台上的所有词汇都经过专业 ASL 教师的验证，用户可以对所学内容充满信心。

打破沟通障碍

英伟达计划利用这一数据集进一步开发 AI 应用程序，以打破聋人和听力社区之间的沟通障碍。该数据集作为构建可访问技术的资源向公众开放，包括 AI 代理、数字人应用程序和视频会议工具。此外，Signs 平台还将为整个生态系统中的 ASL 应用程序提供实时、AI 驱动的支持和反馈。

Signs 的未来发展

支持语言细微差别

目前，Signs 主要专注于手部动作和手指位置的识别，但 ASL 还结合了面部表情和头部动作来传达更丰富的含义。未来版本的平台将探索如何跟踪和集成这些非手动信号，以更全面地理解手语。

适应区域差异和俚语

Signs 团队还在研究如何表示不同地区的手语变体和俚语，以丰富其 ASL 数据库。此外，团队正在与罗切斯特理工学院（RIT）的可访问性和包容性研究中心合作，评估并进一步改善 Signs 平台对聋人和听力障碍用户的用户体验。