Машинное обучение и искусственные нейронные сети по-прежнему популярны. Для мобильных приложений самый простой вариант — использовать ML Kit — это опыт машинного обучения мобильного SDK для приложений Android и iOS.

Обзор ML Kit показывает, что в каком-то направлении приложения уже придумали, а в другом нет.

Пришло время придумать приложение для тренда Pose Detection:

  1. В магазине нет похожих приложений.
  2. Много вариантов использования.
  3. Интересно разрабатывать и отлаживать)

Первая идея — сделать игру!

Начнем с простого взаимодействия с падающими предметами.

ML Kit возвращает нам список точек на скелете.

Нам нужно отслеживать пересечение положений точек скелета с положением падающего объекта.

Трудности:

  1. Зеркальное отражение — в реальности вы двигаетесь вправо, а на экране — влево.
  2. Масштабирование — для хорошего fps нужно отправить в анализатор кадр 640х480, при этом у вас размер экрана может быть другим.

Инновация в распознавании позы — меню без кнопки!

Все события в приложении могут быть вызваны определенными позами или жестами.

Например, запуск и перезапуск игры инициализируется поднятием рук вверх на три секунды.

При добавлении темы получаем игру — Перчатки чемпиона — AR

Каково ваше мнение о трендах определения позы?

Какие похожие приложения есть в магазине?