Производство работ в дополненной реальности при сборке Воздушного судна
Производственный центр в г. Комсомольске-на-Амуре филиала ПАО «Яковлев» — «Региональные самолёты» (ПЦ «Яковлев») реализует проект по применению технологий и устройств дополненной реальности (AR очки).
В основе решения готовая промышленная программная платформа «ИКСАР», на базе которой создается конечное решение.
AR очки и отечественное программное обеспечение «ИКСАР» применяются для получения сотрудниками необходимой информации при сборке электро-соединителя воздушного судна (ВС). При работе по карте заделки технологического паспорта AR очки отображают на дисплее зону электро-соединителя с клеммами, типоразмером контакта, цветностью провода, сечением провода, незадействованными клеммами и другой информацией о жгутах, номерах технологических паспортов и т. д.
Такой подход позволяет сотруднику вместо постоянного изучения бумажного документа с последовательностью технологических операций по заделке сразу получать необходимую информацию на экране AR очков прямо перед глазами и вставлять провод в нужную клемму.
Управление всеми действиями на AR очках осуществляется голосовыми командами. Активное шумоподавление на микрофонах помогает устройству слушать только команды пользователя и не замечать окружающий шум или речь других людей.
Для дополнительного удобства при произвольном выборе жгута разработан интеллектуальный оптимизированный голосовой ввод номера бирки с целью минимизации времени поиска нужных значений и снижения вероятности ошибки при распознавании буквенно-цифровых голосовых команд.
Реализованное решение включает серверную и мобильную часть. На серверной части реализован расширенный интерфейс для создания и настройки различных типов соединителей и всех операций технологических паспортов, включая подготовку к заделке, а также функционал планирования заданий по заделке и контроля их выполнения, включая подключение согласующих в лице производственного мастера и контролера БТК в процессе выполнения работ по технологическому паспорту.
Расширенный интерфейс работы по всем операциям технологического паспорта включает возможность создания на устройстве подробных инструкций выполнения работ по карте заделке, включая поддержку различных типов ЭС, а также выполнение фото и видео фиксации факта выполнения и выявленных дефектов или брака.
Платформа ИКСАР позволяет осуществлять видеоконференцсвязь от сотрудника в AR очках к удаленному эксперту или группе экспертов, а также в обратную сторону — от Удаленных экспертов к Исполнителю на AR очках. Удаленный эксперт в режиме реального времени от первого лица видит проблему, с которой столкнулся пользователь и может оперативно проконсультировать, как решить проблему, включая возможность в дополненной реальности поверх живого видеопотока обвести определенные физические элементы видеопотока.
В проекте реализована поддержка работы всех функций мобильной части не только на AR очках, но и на традиционных планшетах и смартфонах, что дополнительно расширяет возможности применения решения.
Система формирует цифровой след действий пользователя в AR очках, создавая возможность формировать в различных ракурсах необходимые отчеты по выполненным работам.
Совокупность выполненных действий в системе позволяет в будущем отказаться от бумажного технологического паспорта, существенно повысить производительность труда сотрудника, а также снизить вероятность ошибки.