Как проверить комплектность изделия по фото с ИИ: ограниченный прототип

Реальный пример: BMW AIQX

BMW Group описывает AIQX как платформу для визуального и акустического контроля, определения вариантов и проверки комплектности. Один из примеров — обнаружение отсутствующего знака аварийной остановки с использованием камер автомобиля на линии. Публикация BMW Group.

Это промышленная система с привязкой к процессу. Прототип в универсальном чате ниже не равнозначен AIQX и не наследует её возможности. Из кейса полезно перенести принцип: результат зависит от правильной модификации и связи снимка с изделием.

Шаг 1. Выберите одну проверяемую операцию

Определите границу: например, проверить содержимое открытого лотка перед закрытием коробки. Не объединяйте наличие деталей, качество материала, правильность затяжки и скрытый монтаж в одну оценку «годно».

Уточните, что должно быть видно. Если деталь всегда закрыта кожухом, обычная внешняя фотография не сможет надёжно подтвердить её наличие. Потребуются другой этап съёмки, датчик или документированный технологический контроль.

Владелец процесса заранее определяет, кто принимает спорный результат и что происходит с изделием. Для первого пилота модель только помогает оператору, не разрешая выпуск автоматически.

Шаг 2. Создайте эталон для каждой модификации

У эталона должны быть код комплекта, версия, список деталей, количество и разрешённые варианты. Фотография похожего набора без перечня недостаточна.

Учебный комплект K-01 содержит одну пластину, два винта, четыре шайбы и одну этикетку. Это вымышленный набор. Для каждого компонента задайте место или допустимую область в лотке; мелкий крепёж должен быть различим.

Если у K-02 другая длина винтов или число шайб, храните его отдельной версией. Система должна получить код из подтверждённого задания, а не угадать нужный комплект по похожей фотографии.

Шаг 3. Сделайте съёмку повторяемой

Зафиксируйте камеру, расстояние, фон, освещение и положение лотка. Избегайте бликов и перекрытий. Добавьте в процесс проверку резкости и границ кадра: обрезанная часть лотка делает вывод неполным.

Снимок связывается с ID заказа или изделия и временем. Нельзя проверять вчерашнее изображение для сегодняшней коробки. Если код читается с этикетки, отдельно проверьте ошибки распознавания кода.

Снимите обычные сложные случаи: сдвинутый винт, частично закрытая шайба, отражение, тень и другой фон. Одинаковые студийные фотографии не покажут реальную устойчивость.

Шаг 4. Попросите перечислить видимые компоненты

Проверь учебный комплект K-01 по приложенному изображению.
Эталон: пластина 1, винты 2, шайбы 4, этикетка 1.
Для каждого типа укажи видимое количество, область изображения
и статус: соответствует / отличается / не удаётся проверить.
Не считай скрытые компоненты увиденными.
Если кадр обрезан, размыт или детали перекрыты, отметь ограничение.
Не делай вывод о материале, затяжке и скрытом монтаже.

Для системы с программным интерфейсом полезна фиксированная структура ответа. Но наличие JSON само по себе не повышает точность распознавания: содержимое всё равно проверяют по снимку.

Шаг 5. Разберите учебный результат

Пусть видны одна пластина, два винта, три шайбы и этикетка. Четвёртая шайба может отсутствовать, а может лежать под пластиной. Без дополнительного ракурса причина не установлена.

Попросите оператора разложить крепёж без перекрытия и повторить снимок. Не заменяйте сомнение утверждением «одна шайба точно потеряна», если её место закрыто.

Оригинальная схема вымышленного комплекта. Это иллюстрация задачи, не результат тестирования распознавателя.

Шаг 6. Проверьте ошибки на серии примеров

Подготовьте набор с известным ответом: правильные комплекты, недостающая деталь, лишний предмет, другая модификация, нечёткий снимок. Проверяющий ответ человек не должен подгонять под вывод модели.

В учебном примере из 20 комплектов десять неполные и десять правильные. Модель отметила девять неполных, пропустила один и ошибочно остановила два правильных. Чувствительность к неполным — 90%; среди 11 тревог верных девять, или около 81,8%; общая доля верных решений — 85%.

Эти числа вымышленные и объясняют разные метрики. Они не являются качеством какой-либо модели. Для процесса важна цена пропуска и цена лишней остановки; одна общая «точность» скрывает различие.

Шаг 7. Встройте результат в работу оператора

Показывайте снимок, эталон, найденные компоненты и причину остановки. Ответ «проверьте комплект» без детали и места мало помогает. Для неопределённого кадра нужен понятный шаг: переснять, раскрыть лоток или проверить вручную.

Сохраняйте подтверждение оператора и итог. Отдельно учитывайте проблемы фотографии и ошибки распознавания. Иначе модель может выглядеть плохой из-за тёмной камеры, а камера — исправной из-за того, что оператор всё пересчитывает сам.

Перед расширением пилота проверьте новые смены, партии и условия. Изменение упаковки или поставщика детали требует повторной оценки, даже если артикул изделия остался тем же.

Как оценить пользу

Измеряйте время до подтверждённой проверки, пропущенные неполные комплекты, лишние остановки и очередь ручных разборов. Сравнивайте с текущей инструкцией оператора на сопоставимых изделиях.

Для окончательного автоматического допуска нужны существенно более строгие требования к системе и процессу. Этот материал показывает безопасную границу первого прикладного прототипа.

Частые вопросы