Проекты студентов:
Распознавание русской жестовой речи
Проект распознавание русской жестовой речи.
Проект разрабатывался совместно с командой SBER AI.
Несмотря на прогресс в технологиях, многие группы людей с нарушением слухового и речевого аппарата остаются в стороне.
Внедрение системы распознавания РЖЯ может реально изменить жизни многих людей, помогая преодолевать препятствия в общении, обучении и трудоустройстве.
Лучшими методами для распознавания жестового языка являются нейронные сети на основе сверточных подходов (CNN) и трансформеров (Vision Transformers), такие как I3D-ResNet, VideoSWIN и VIT для задач видео, которые принимают на вход последовательность кадров и сопоставляют им класс.
При реализации проекта рассматривался открытый датасет русского жестового языка. На нем обучить модель вырезания фона с видео. Целью проекта было Встроить модель распознования жестов в пайплайн распознавания русской жестовой речи совместно с командой SBER AI.
Тематическое моделирование мультиязычных корпусов текстов
презентация - https://docs.google.com/presentation/d/1eanctbTSkH-EPfX04Rx05-M3q6H4Ih3SWJfO69ZcNi4/edit?usp=sharing
защита проекта - https://vk.com/video-180542733_456239049
Проект реализован студентами магистратуры по заказу компании Naumen
