Comments 21
Было бы интересно больше почитать про практическое применение полученного решения. В кабине же сидит оператор, и видит примерно то же, что и камера. Что именно дают бизнесу детекции траков и собственного ковша?
Был недавно студенческий чемпионат Case-in с этой тематикой. Как-то связана ваша работа с ним?
Очень интересная тема (ниша — потрясающая), спасибо за материал. На данный момент не особо представляю, как работает ML. Заинтересовал этот момент:
после этого выбрали 300 000 кадров, которые были размечены нашей командой вручную
Огромный же объём данных, как на практике происходит такая обработка?
После прочтения статьи захотелось на экскурсию в карьер)
То есть потенциально такие решения смогут как минимум продублировать, а как максимум - взять на себя функциональность датчиков телеметрии очень многих элементов техники. Вы считали экономику? Насколько снизится стоимость обслуживания одного производственного процесса?
Пока что не считали, но да, при замещении старой системы будем считать вместе с заказчиком.
У всех разный набор датчиков, где-то вообще мы будем внедрять полностью диспетчеризацию с нуля - в таком случае, простота обслуживания бортового оборудования идёт просто как очевидное преимущество при будущем обслуживании системы.
Очень интересная статья! Такая сложная тема и так легко подана, спасибо!
Интересная статья, спасибо!
Для такой простой модели 300k аннотаций - явный перебор. Приходилось обучать модели для строительства с 10+ классами, результаты с ~100k аннотаций в гораздо более разнообразных условиях были устойчивее. Пришлось разработать собстенную систему фильтрации аннтотаций для улучшения качества датасета, но оно того стоило.
Еще момент - о каких именно "временных представлениях видеопотка" идет речь если вы используете YOLO? Может это не самое удачное демо видео, но на нем не видно ничего кроме баундинг боксов, хотя упоминались подсчеты циклов погрузки и так далее.
а что с самосвалами? там используете показания датчиков?
В норильском никеле уже 2019 года используется машинное зрение на руднике Северный. Из оборудования камера,слабенький комп от Advantech Trek-733 и интеловская флэшка ускоритель нейросетей и камера. Система распознает циклы: погрузка.перевозка.разгрузка и отдельно разгрузка в самосвал. Так что все уже давно сделано и работает на минимальных ресурсах :)
Машинное зрение для контроля горнодобывающей техники