Российские учёные научили роботов понимать жесты без импортных решений

Учёные Донского государственного технического университета совместно с коллегами из МГТУ «Станкин» в апреле 2026 года представили отечественное программное обеспечение, которое с помощью обычной камеры и датчика глубины распознаёт десять жестовых команд и передаёт их на контроллер робота-манипулятора.

Разработка выполнена при поддержке Российского научного фонда и программы «Приоритет 2030».

Как работает система

Система объединяет данные обычной камеры (фиксирует картинку) и датчика глубины (измеряет расстояние до объектов), компенсируя недостатки друг друга при плохом освещении или потере глубины.

На основе полученных данных создаётся дескриптор — вектор признаков, описывающий движение оператора. 

Программа обучена на 10 жестовых командах, которые затем поступают на контроллер, где за каждой командой закреплено определённое действие манипулятора.

Где можно применять

Разработка позволяет автоматизировать погрузку, сборочные операции, окраску, лазерную обработку, маркировку и другие совместные операции человека и робота.

Как отметили в Минобрнауки, теперь отечественные промышленные манипуляторы смогут распознавать команды оператора так же, как зарубежные аналоги, но без использования импортных решений.

Подписаться: