• Добавить в закладки
  • Facebook
  • Twitter
  • Telegram
  • VK
  • Печать
  • Email
  • Скопировать ссылку
13 августа
МТУСИ
101

В МТУСИ разработали алгоритм для роботов-манипуляторов, который позволяет точно захватывать предметы

4.3

В современной робототехнике существует проблема сортировки объектов, хаотично расположенных в рабочей зоне манипулятора. Один предмет может полностью или частично закрывать другой, и тогда роботу будет сложно захватить нужный из них, не затронув другие или не повредив захватное устройство. В МТУСИ предложили алгоритм, основанный на нейронной сети и RGB-D сенсоре, позволяющий определить объект захвата с применением промышленного манипулятора.

Робот-манипулятор / © Siaopan, en.wikipedia.org

Для решения проблемы захвата объектов применяются интеллектуальные алгоритмы, основанные на компьютерном зрении, которые могли бы определять положение и ориентацию таких предметов. Первый этап при решении этой проблемы — поиск нужных объектов в видеопотоке.

Никита Белов, старший преподаватель кафедры ИСУиА МТУСИ, предложил алгоритм, основанный на нейронной сети и RGB-D сенсоре, позволяющий определить предмет захвата в технологическом процессе сортировки объектов с применением промышленного манипулятора.

«В ходе эксперимента использовался робот-манипулятор KUKA KR4 R600. Для достижения высокой точности определения объектов применялись нейросетевой алгоритм YOLOv8 и камера Intel RealSense D415i, которая использовалась для определения расстояния до объекта по вертикальной оси. Далее производится выделения контуров распознанных объектов на черно-белых изображениях с помощью метода FindContours. Одним из важнейших этапов работы алгоритма стал расчет индекса Жаккара, который позволил выявить перекрывающиеся ограничивающие рамки распознанных объектов. В результате получился массив данных, который включал все пересекающиеся объекты и отклонения их отношений периметра к площади от эталонных значений», — пояснил Никита Белов.

Выяснилось, что при определении объекта только по расстоянию по оси Z, которое вычисляется с помощью RGB-D сенсора Intel RealSense D415i, есть вероятность неправильного выбора из-за перекрытия объектов. Для решения этой проблемы учитывалось взаимное перекрытие предметов. В случае нахождения пересечения выбирается объект, соотношение периметра к площади которого имеет наименьшее отклонение от эталонного значения.

Созданный алгоритм показал отличные результаты в точности и выборе наилучшего объекта захвата при сортировке в условиях хаотичного расположения объектов в накопителе и частичного или полного их перекрытия для захвата роботом-манипулятором без повреждения фланца манипулятора или захватного устройства.

Полученные результаты демонстрируют, что интеграция нейронных технологий в робототехнику открывает новые перспективы для автоматизации процессов, обеспечивая более высокую эффективность и качество работы производственных систем.

Дальнейшие исследования в этом направлении позволят открыть новые возможности для робототехники и автоматизации, делая эти технологии еще более совершенными и надежными.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl + Enter.
Московский технический университет связи и информатики (МТУСИ) — ведущее отраслевое техническое высшее учебное заведение Центральной России по подготовке кадров для IT и телеком-индустрии, подведомственное Министерству цифрового развития, связи и массовых коммуникаций РФ. Основан в 1921 году на базе Московского электротехнического института народной связи им. В.Н. Подбельского. Ежегодно МТУСИ выпускает востребованных специалистов в области связи, информационных технологий, квантовых коммуникаций, робототехники, информационной безопасности и цифровой экономики. В состав университета входят 5 факультетов, 34 кафедры, 2 филиала (Волго-Вятский и Северо-Кавказский), Колледж телекоммуникаций, Музей электросвязи, Квантовый центр, Центр робототехники, Лаборатория AR/VR, Центры заочного обучения бакалавров и магистров, Центр индивидуального обучения.
Подписывайтесь на нас в Telegram, Яндекс.Новостях и VK
Предстоящие мероприятия
Вчера, 14:59
Игорь Байдов

Геофизики из Китая впервые с помощью наземного радара наблюдали в режиме реального времени за образованием экваториальных плазменных пузырей, которые достаточно сложно обнаружить профильными приборами. Наблюдения проходили на расстоянии почти 10 тысяч километров.

Сегодня, 09:08
Алиса Гаджиева

С помощью мультиспектрального сканирования американские медиевисты выяснили, как именно пражский врач XVII века пытался расшифровать загадочную рукопись.

Вчера, 07:03
Любовь

Первую в истории цветную карту Красной планеты с высокой степенью детализации и реалистичностью отображаемых цветов разработали с помощью данных, полученных в рамках миссии «Тяньвэнь-1», стартовавшей в 2020 году. В ее состав вошли орбитальный аппарат, марсоход и несколько камер высокого и среднего разрешения для детальной съемки поверхности Марса. 

Вчера, 14:59
Игорь Байдов

Геофизики из Китая впервые с помощью наземного радара наблюдали в режиме реального времени за образованием экваториальных плазменных пузырей, которые достаточно сложно обнаружить профильными приборами. Наблюдения проходили на расстоянии почти 10 тысяч километров.

4 сентября
Алиса Гаджиева

На юге Шотландии расположена деревня, издавна связанная с легендой о Мерлине — великом волшебнике, наставнике короля Артура. Ранее эта история, как и многие другие части артуровского цикла, не имела никаких археологических подтверждений — только крайне запутанные упоминания в древних манускриптах. Теперь ситуация изменилась.

Сегодня, 09:08
Алиса Гаджиева

С помощью мультиспектрального сканирования американские медиевисты выяснили, как именно пражский врач XVII века пытался расшифровать загадочную рукопись.

2 сентября
Татьяна

Месторождения самородного золота приурочены главным образом к кварцевым жилам. Считается, что оно осаждается из горячих магматических растворов, внедряющихся по трещинам в горных породах. Однако образование крупных скоплений золота представляет собой минералогическую загадку. Австралийские ученые предположили, что дело — в пьезоэлектрических свойствах кварца, которые под действием частых землетрясений способствуют образованию больших скоплений драгоценного металла.

4 сентября
Алиса Гаджиева

На юге Шотландии расположена деревня, издавна связанная с легендой о Мерлине — великом волшебнике, наставнике короля Артура. Ранее эта история, как и многие другие части артуровского цикла, не имела никаких археологических подтверждений — только крайне запутанные упоминания в древних манускриптах. Теперь ситуация изменилась.

15 августа
Росатом

Предприятия Научного дивизиона госкорпорации «Росатом» и группа строительных компаний «Реформа» заключили договор о сотрудничестве и впервые применили для демонтажа высотных металлических конструкций — кранов-перегружателей — мобильный лазерный комплекс. МЛК, разработанный в стенах одного из институтов «Росатома», не имеет аналогов в стране.

[miniorange_social_login]

Комментарии

Написать комментарий
Подтвердить?
Подтвердить?
Причина отклонения
Подтвердить?
Не получилось опубликовать!

Вы попытались написать запрещенную фразу или вас забанили за частые нарушения.

Понятно
Жалоба отправлена

Мы обязательно проверим комментарий и
при необходимости примем меры.

Спасибо
Аккаунт заблокирован!

Из-за нарушений правил сайта на ваш аккаунт были наложены ограничения. Если это ошибка, напишите нам.

Понятно
Что-то пошло не так!

Наши фильтры обнаружили в ваших действиях признаки накрутки. Отдохните немного и вернитесь к нам позже.

Понятно
Лучшие материалы
Войти
Регистрируясь, вы соглашаетесь с правилами использования сайта и даете согласие на обработку персональных данных.
Ваша заявка получена

Мы скоро изучим заявку и свяжемся с Вами по указанной почте в случае положительного исхода. Спасибо за интерес к проекту.

Понятно
Ваше сообщение получено

Мы скоро прочитаем его и свяжемся с Вами по указанной почте. Спасибо за интерес к проекту.

Понятно