Компания Nvidia представила инновационную платформу на основе искусственного интеллекта, предназначенную для обучения американскому языку жестов(ASL). Этот проект призван сократить разрыв в общении между людьми с нарушениями слуха и слышащими.
Оглавление
Платформа Signs: база данных для обучения и разработки
Платформа Signs создает проверенную базу данных для тех, кто изучает ASL, а также для разработчиков приложений, использующих этот язык. Интересно, что американский язык жестов занимает третье место по распространенности в США, однако инструментов на основе ASL значительно меньше, чем тех, что используют английский или испанский языки.
Nvidia совместно с Американским обществом для глухих детей и креативным агентством Hello Monday разработала интерактивную веб-платформу, которая поддерживает изучение ASL и создание доступных приложений с использованием ИИ.
Как работает платформа?
- Библиотека жестов: Пользователи могут изучать жесты с помощью 3D-аватара, который демонстрирует правильное выполнение.
- Обратная связь в реальном времени: ИИ-инструмент анализирует видео с веб-камеры и дает рекомендации по улучшению жестов.
- Открытый вклад: Любой пользователь, независимо от уровня навыков, может записать себя, чтобы пополнить базу данных видеозаписей ASL.
Цели проекта
Nvidia планирует расширить базу данных до 400 000 видеоклипов, представляющих 1 000 жестов. Каждый жест проверяется носителями ASL и переводчиками, чтобы обеспечить точность. Это создает качественный визуальный словарь и учебное пособие.
Преимущества для семей
Чери Доулинг, исполнительный директор Американского общества для глухих детей, отметила:
«Большинство глухих детей рождаются у слышащих родителей. Такие инструменты, как Signs, позволяют семьям начать изучение ASL с раннего возраста, что помогает наладить общение с детьми уже в 6-8 месяцев. Пользователи могут быть уверены в точности жестов, так как все материалы проверены профессиональными преподавателями ASL».
Будущее платформы
Nvidia планирует использовать собранные данные для разработки приложений, которые помогут преодолеть барьеры в общении между глухими и слышащими людьми. База данных станет общедоступной и может быть использована для создания технологий, таких как:
- ИИ-агенты
- Приложения с цифровыми аватарами
- Инструменты для видеоконференций
Расширение функционала
Проверь свои знания в наших бесплатных тестах по ИИ! Пройди тест и узнай, насколько хорошо ты разбираешься в технологиях искусственного интеллекта!
В настоящее время платформа сосредоточена на движениях рук и пальцев, но ASL также включает мимику и движения головы. Команда Signs изучает возможность интеграции этих элементов в будущих версиях. Кроме того, рассматриваются региональные различия и сленг, чтобы обогатить базу данных.
Как принять участие
Платформа Signs уже доступна для использования на сайте signs-ai.com. Пользователи могут начать обучение или внести свой вклад, записав жесты.
Мероприятия и поддержка
Участники конференции Nvidia GTC, которая пройдет с 17 по 21 марта в Сан-Хосе, смогут опробовать платформу вживую.
Майкл Бун, менеджер по продуктам Trustworthy AI в Nvidia, подчеркнул:
«Миллионы глухих людей по всему миру сталкиваются с трудностями в общении. Платформа Signs создана, чтобы сократить этот разрыв и собрать данные для будущих технологий доступности».
Заключение
Платформа Signs — это шаг к более инклюзивному обществу. Она не только помогает изучать ASL, но и способствует развитию технологий, которые делают общение между людьми более доступным и эффективным.
