Как нейросеть помогает заниматься йогой с инструктором дистанционно

Российско-белорусский стартап Zenia Yoga разработал программу для дистанционного занятия йогой на основе компьютерного зрения и искусственного интеллекта

Задача

Сделать занятия йогой дома не менее эффективными и безопасными для пользователя и удобными для инструктора, чем в студии.

Предпосылки и мотивация

Zenia Yoga — проект российских разработчиков Алексея Курова, Дениса Соколова и Дмитрия Заусаева, специалистов в области искусственного интеллекта, глубокого обучения и компьютерного зрения. Они давно работали над алгоритмами распознавания движений человека для проектных задач и обратили внимание на растущий рынок домашнего фитнеса. Так появилась идея разработать приложение для йоги на основе ИИ, которое сделает тренировки более интерактивными и безопасными за счет компьютерного зрения. Приложение запустили в декабре 2019 года.

В первой половине 2020 года более 70% инструкторов по йоге перешли в онлайн. При этом не существовало ни одной платформы, где инструкторы могли бы полностью организовать свой бизнес и удобно взаимодействовать с клиентами в удаленном режиме. Пользователям домашние тренировки тоже нравились меньше: не хватало интерактивности и обратной связи от тренера, который помог бы исправить ошибки и поддержать мотивацию.

Решение

Использовать возможности нейросетей для создания первой платформы для йоги на базе ИИ. Применить компьютерное зрение и ИТ-решения для разработки инструментов в помощь инструкторам и пользователям, которые сделают занятия дома удобнее, эффективнее и безопаснее.

Так выглядит занятие в приложении для пользователя. В кадре — инструктор, справа — проверка позы ученика с помощью ИИ

Реализация

С самого начала работы над проектом разработчики консультировались с опытными инструкторами йоги и в деталях разбирали, из чего складывается правильная техника выполнения асан. Консультантов искали по рекомендациям, помогли и ранние инвесторы проекта. Сейчас машинное зрение Zenia Yoga распознает 16 суставов — это основные точки изменения положения тела в пространстве. Приложение сравнивает позы ученика и учителя и сообщает об ошибках с помощью цветового индикатора: его видит как пользователь, так и инструктор, если занятие проходит в режиме live, а не в записи. По рекомендации инструкторов добавили еще один важный параметр: распознавание кривизны спины. Темп тренировки в записи научились подстраивать под человека: пока приложение не увидит, что асана выполнена, инструктор на видео не перейдет к следующей позе.

Самым сложным было составить правильный датасет. Для обучения нейросети требовалось найти много изображений людей в конкретной позе. Позы из йоги — асаны — почти не встречаются в обычной жизни. Поэтому, кстати, большинство существующих систем распознавания с асанами работают плохо. Непросто было и настроить работу прототипа при разной освещенности. Сейчас Zenia Yoga корректно работает с самым разным освещением в комнате.

Отдельное внимание уделили тренировкам в режиме прямого эфира. В Zenia Yoga изучили, как проходят такие уроки, и поняли, что заниматься в Zoom не очень удобно: преподавателю нужно одновременно показывать правильную технику и следить за ошибками учеников на экране, а участникам некомфортно показывать всем свою домашнюю обстановку. Специально для этой задачи в приложении разработали режим Live Mode: это прямые эфиры с инструкторами, где алгоритм Zenia Yoga помогает учителю и ученику вовремя заметить ошибки. В ходе урока ученик видит на экране круг-индикатор, который меняет цвет с зеленого на желтый, если поза неверна. Если занятие проходит в группе, система покажет текущий рейтинг среди всех участников: он меняется в зависимости от успешного выполнения асан. Инструктору Zenia помогает направить внимание в нужную сторону, подсвечивая зеленым («правильно») или желтым («ошибка») окошки с каждым участником. Тем, кто не хочет показывать себя и домашнюю обстановку в кадре, доступен режим анонимности: в нем инструктору видны только линии тела на черном фоне.

Результат

Первую версию Zenia Yoga запустили в декабре 2019 года: тогда в приложении было около 40 асан для людей начального и среднего уровня подготовки. Уроки сделали англоязычными, чтобы ими могло воспользоваться как можно больше людей по всему миру.

Сейчас Zenia Yoga распознает 120 асан и дает по ним обратную связь: в ходе занятия об ошибках сообщает индикатор на экране, а после завершения урока можно почитать детальные рекомендации по улучшению позы. В приложении более 100 видеоуроков с инструкторами со всего мира: из США, Канады, Великобритании, Испании, Индии, Южной Кореи, Гонконга, Австралии и других стран. Инструкторам Zenia Yoga предоставляет все инструменты ведения бизнеса: работа с расписанием, прием платежей, удобные способы коммуникации с клиентами, инструменты для продвижения. Во время живых уроков алгоритмы распознавания движения помогают улучшить взаимодействие инструкторов и учеников и сделать тренировку эффективнее. Zenia Yoga похожа на комбинацию Zoom и Shopify, но для йоги и фитнеса.

Скачивания приложения в четвертом квартале 2020 года выросли на 30%. Стоимость подписки сейчас начинается от 799 руб. в месяц. Набор инструкторов на платформу в январе 2021 года пришлось временно приостановить из-за большого наплыва желающих.

Планы и перспективы

В ближайшие месяцы Zenia Yoga продолжит развивать платформу для инструкторов. Планируют добавить как минимум два языка — вероятно, это будут испанский и немецкий. Подключат определение положения стоп и ладоней, чтобы еще точнее оценивать позу. К йоге планируют добавить и другие виды физической активности, чтобы любой пользователь мог найти тренировку на свой вкус. В феврале 2021 года стартап привлек $300 тыс. инвестиций от российской модели Натальи Водяновой

Подписывайтесь также на Telegram-канал РБК Трендов и будьте в курсе актуальных тенденций и прогнозов о будущем технологий, эко-номики, образования и инноваций.