Российские учёные создали программное обеспечение, которое позволяет управлять промышленным роботом с помощью жестов. Разработка выполнена специалистами Донского государственного технического университета (ДГТУ) совместно с коллегами из МГТУ «Станкин» в рамках гранта Российского научного фонда. Теперь отечественные манипуляторы смогут распознавать команды оператора так же, как зарубежные аналоги, но без использования импортных решений. Об этом сообщили в пресс-службе Минобрнауки РФ, пишет ТАСС.
Система объединяет данные обычной камеры и датчика глубины. Первая фиксирует картинку, второй измеряет расстояние до объектов. Вместе они компенсируют недостатки друг друга: например, при плохом освещении или потере глубины. Это обеспечивает более точное и надёжное распознавание действий. На основе полученных данных исследователи разработали дескриптор — вектор признаков, который достаточно полно описывает движение оператора.
В основе разработки лежат алгоритмы компьютерного зрения и нейросетевые технологии. Программа получает данные с датчиков, распознаёт жестовые команды (система обучена на десяти жестах), а затем передаёт сигналы на контроллер робота, где заранее прописано, какому жесту соответствует то или иное действие манипулятора. Такой бесконтактный интерфейс позволяет автоматизировать погрузку, сборочные операции, окраску, лазерную обработку, маркировку и другие совместные операции человека и робота.
Проект поддержан программой «Приоритет 2030» Минобрнауки РФ и грантом Российского научного фонда. Разработка особенно актуальна в условиях импортозамещения: она даёт российским предприятиям возможность использовать современные методы управления роботами без оглядки на западные технологии. Кроме того, жестовое управление снижает риск для оператора — ему не нужно находиться в опасной зоне, достаточно просто подавать команды с безопасного расстояния. А значит, производительность и безопасность на производствах могут вырасти одновременно.
