Mediapipe: Как реализовать распознавание жестов в реальном времени в модуле отслеживания нескольких рук

Question

Как мы можем изменить код mediapipe, чтобы получить распознавание жестов в реальном времени для базового набора жестов. Я запустил apk для отслеживания нескольких рук, но он не смог распознать базовые жесты, как было обещано в https://ai.googleblog.com/2019/08/on-device-real-time-hand-tracking-with.html.

Answer 1

Пока я вижу два пути:

1. Используйте предварительно обученную модель в калькуляторе.
2. Обучите модель, используя 21 ориентир, собирая точки для каждого жеста и нормализуя значения x, y, z ориентиров.