В Новосибирском государственном техническом университете НЭТИ разработали прототип системы контроля качества сборки заказов на основе нейросетей и технического зрения, сообщает пресс-служба вуза. Разработка позволяет автоматически проверять комплектность заказа из крепёжных элементов – болтов, шайб, гаек и других деталей. Проект выполнен по заказу индустриального партнёра – компании КЭПС.
На небольших предприятиях сборка и проверка заказов обычно выполняется оператором вручную. При больших объёмах человек быстро устаёт, из-за чего возникают ошибки: лишние или недостающие детали в упаковке. Новая система решает эту проблему с помощью нейросетей и компьютерного зрения.
Разработка работает так: оператор нажимает кнопку, и веб-камера фотографирует все детали на рабочей поверхности. Изображение обрабатывает нейросетевая модель, которая распознаёт каждый предмет, определяя его тип – болт, гайка, гровер, шайба и другие (всего 8 классов). Затем программа сравнивает полученный список с эталоном, указанным в заказе, и выводит результат: всё ли совпадает.
Сложность была в том, что универсального алгоритма для крепежа не существует: металлические детали бликуют, разные типы могут быть похожи по размеру и форме. Большинство существующих нейросетей обучены искать брак, а не сравнивать комплектность. Как пояснила выпускница НГТУ НЭТИ Диана Демина, модель присваивает каждому объекту метку одного из 8 классов, группирует их по типам и сравнивает с эталонным списком.
На данный момент разработано программное обеспечение, готовое к опытной эксплуатации, и собран прототип системы на основе веб-камеры и кольцевой лампы. В планах – заменить веб-камеру на профессиональное оборудование, чтобы снизить погрешность измерения размеров с текущего 1 мм до более точных значений. Также учёные намерены полностью автоматизировать процесс, исключив участие оператора.
Фото: магнифик