Все проекты

ИИ-платформа здоровья и благополучияИИРаботает

Wellnix

ИИ-платформа здоровья, сочетающая анализ движения, оценку питания в реальном времени и прогнозное благополучие.

Снимок интерфейса Wellnix

Результат

Осанка оценивается по видео с телефона

Задача

Тренироваться дома значит, что никто не скажет о неправильной технике, пока что-нибудь не заболит.

Что я построил

Построен движок компьютерного зрения, оценивающий осанку и движение по обычному видео с телефона, в паре с учётом питания, чтобы оба сигнала складывались в одну картину.

Результат

Обратная связь по технике без тренера в комнате и рекомендации, опирающиеся на движение и питание вместе, а не по отдельности.

Как это работает

  1. 01

    Пользователь снимает движение на обычную камеру телефона, без носимых устройств и без датчика глубины.

  2. 02

    Оценка позы извлекает положения суставов по кадрам, а движение сверяется с той формой, которую упражнение должно иметь.

  3. 03

    Обратная связь возвращается конкретной поправкой, а не баллом, потому что цифра никому не говорит, что менять.

  4. 04

    Записи о питании идут в тот же профиль, поэтому рекомендации учитывают движение и потребление вместе.

Слой ИИ

Оценка позы по кадрам видео, затем оценка извлечённого скелета по правилам относительно критериев техники каждого упражнения. Оценка сознательно не модель: правила техники известны, объяснимы и их проще поправить, когда тренер с ними не согласен.

Инженерный слой

Съёмка на клиенте, анализ на сервере, выборка кадров ради экономии и модель данных, держащая движение и питание в одном профиле, а не в двух приложениях.

Ключевые технические решения

Детерминированная оценка поверх обученной модели.

Оценка позы это та часть, которую может сделать только модель. Определить, ушло ли колено за носок, это арифметика, и вычисление её в коде делает каждое суждение объяснимым для пользователя.

Построено на

Computer VisionReactPythonAI Health

Связанное