CC BY
27
https://doi.org/10.38013/2542-0542-2022-1-82-92 УДК 623.765.4
Повышение эффективности автоматизации проектирования документации контроля, диагностики и ремонта сменных элементов радиоэлектронной аппаратуры
А. А. Козлов, А. Ф. Страхов
Акционерное общество «ГПТП «Гоанит», Москва, Российская Федерация
Статья посвящена повышению эффективности войскового ремонта образцов вооружения и военной техники (ВВТ) противовоздушной обороны (ПВО), в частности войскового ремонта конструктивных сменных элементов (КСЭ) радиоэлектронной аппаратуры (РЭА) с применением интерактивной электронной ремонтной документации (ИЭРД). Ремонт КСЭ РА составляет значительную часть в общей трудоемкости работ по войсковому ремонту образцов ВВТ.
Ключевые слова: автоматизированная система контроля и диагностики, интерактивная электронная ремонтная документация, повышение эффективности формирования ИЭРД, сверточные нейронные сети, автоматизация проектирования
Для цитирования: Козлов А. А., Страхов А. Ф. Повышение эффективности автоматизации проектирования документации контроля, диагностики и ремонта сменных элементов радиоэлектронной аппаратуры // Вестник Концерна ВКО «Алмаз - Антей». 2022. № 1. С. 82-92. https://doi.org/10.38013/2542-0542-2022-1-82-92
For citation: Kozlov А. А., Strakhov А. F. Increasing the efficiency of computer-aided design of documentation for testing, diagnostics and repair of replaceable elements of radio electronic equipment // Vestnik Koncerna VKO "Almaz - Antey". 2022. No. 1. P. 82-92. https://doi.org/10.38013/2542-0542-2022-1-82-92
Поступила 13.10.2021 Отрецензирована 27.10.2021 Одобрена 07.12.2021 Опубликована 18.03.2022
о
см ^
— Введение
а Современные образцы вооружения и военнной ^ техники (ВВТ) противовоздушной обороны Д (ПВО) представляют собой сложные техни-5 ческие системы, рассчитанные на длительные сроки эксплуатации. В связи со сложностью о образцы ВВТ ПВО обладают конечной на™ дежностью. Поэтому для обеспечения требуе-о. мых уровней технической готовности образцов ^ ВВТ ПВО в течение заданных сроков эксплуатации проводятся работы по их техническому | обслуживанию и войсковому ремонту. $ Высокие значения тактико-технических ш характеристик (ТТХ) современных ВВТ ПВО обеспечиваются входящей в их состав радио-^ электронной аппаратурой (РЭА), построен-
й ной по многоуровневому конструктивному
2 _
СО -
- © Козлов А. А., Страхов А. Ф., 2022
принципу. Нижний уровень структуры РЭА составляют конструктивные сменные элементы (КСЭ), представляющие собой печатные платы с установленными на них электрорадиоэлементами (ЭРЭ) в виде интегральных схем разной степени интеграции. В одном КСЭ может быть до 100 и более ЭРЭ, соединенных функциональными электрическими связями. Основную сложность при войсковом ремонте КСЭ составляют обнаружение, локализация места нахождения на плате и идентификация типа неисправного ЭРЭ - с последующим демонтажем и заменой на исправный ЭРЭ. Указанный процесс диагностики неисправностей достаточно сложный даже для одного типа КСЭ РЭА. В составе каждого типа ВВТ применяют несколько сотен типов КСЭ РЭА.
Для обеспечения требуемой производительности войскового ремонта КСЭ РЭА
разработаны и применяются автоматизированные системы контроля и диагностики (АСКД).
АСКД работают на основе интерактивной электронной ремонтной документации (ИЭРД) [6] КСЭ, разрабатываемой под каждый тип КСЭ. Основу ИЭРД КСЭ составляет контрольно-диагностическое программное обеспечение. При этом основную трудоемкость составляет разработка диагностического программного обеспечения. Этот процесс частично автоматизирован, однако значительная часть выполняется квалифицированным разработчиком вручную. Поэтому актуальной задачей является поиск решений по повышению производительности процессов автоматизации проектирования ИЭРД КСЭ.
С этой целью были проведены исследования по применению сверточных нейронных сетей для задач автоматизации проектирования ИЭРД КСЭ. Результаты первого этапа исследований изложены в данной статье.
Современное состояние вопроса
В связи со схемной сложностью КСЭ для контроля их работоспособности требуется формирование большого количества комбинаций тестовых сигналов, также требуется измерение соответствующих комбинаций сигналов откликов. Для обеспечения требуемой производительности и достоверности оценки состояния КСЭ контроль их работоспособности и диагностику неисправностей осуществляют с применением специализированных многоканальных многопараметровых автоматизированных измерительных систем (АИС), получивших наименование «Автоматизированная система контроля и диагностики» [1-4].
Известен ряд установок отечественного и зарубежного производства, используемых для контроля работоспособности и диагностики неисправностей составных частей радиоэлектронной аппаратуры.
Примером является система S790 фирмы Diagnosys Systems Ltd, однако непосредственное использование данных установок при проведении войскового ремонта (ВР) образцов ВВТ ПВО, находящихся на вооружении ВС РФ, неприемлемо по следующим причинам:
а) высокая стоимость, в несколько раз превосходящая фактическую стоимость отечественных АСКД [5];
б) отсутствие подобной аппаратуры в перечне разрешенных к применению в интересах Минобороны РФ;
в) сильная зависимость от поставщика (возможность эмбарго).
Отечественным примером является система контроля логических блоков автоматизированная АСК-ЛБ-КМ производства АО «Ижевский мотозавод «Аксион-холдинг». Система предназначена для функционального и параметрического контроля, диагностики неисправностей изделий, выполненных с использованием цифровых узлов и элементов дискретной автоматики. Однако АСК-ЛБ-КМ имеет ряд существенных недостатков:
а) система не является инвариантной ко всем видам блоков РЭА; для контроля диагностики всего спектра ремонтопригодных блоков РЭА (цифровые, аналоговые источники вторичного питания) потребуется доработка по составу контрольно-измерительных приборов, что является экономически невыгодным;
б) так как система АСК-ЛБ-КМ реализована на операционной системе MS-DOS, дальнейшие модернизации не являются возможными, следовательно, система не является адаптивной к появляющимся разновидностям блоков РЭА, особенно это касается блоков РЭА с микропроцессорами.
Вследствие этого в АО «ГПТП «Гранит» были разработаны автоматизированные системы контроля и диагностики (АСКД), которые адаптивны для широкой номенклатуры ремонтопригодных типов КСЭ РЭА.
Реализация процедур контроля работоспособности и диагностики неисправностей КСЭ с применением АСКД основана на применении ИЭРД. Комплекты ИЭРД на конкретные типы КСЭ РЭА разрабатываются на предприятии АО «ГПТП «Гранит» высококвалифицированными специалистами. _
Типовая конструкторская документация 2 на КСЭ РЭА с точки зрения ремонта недоста- Й точно информативна. При ремонте КСЭ поиск а. местоположения неисправного ЭРЭ требует & достаточно высокой квалификации оператора, Е.
о
который должен уметь читать и разбираться как в электронной принципиальной схеме, так и в сборочном чертеже.
Основу ИЭРД составляет конструкторская документация и фотографии печатной платы КСЭ РЭА, на которых разработчиком ИЭРД размечаются все компоненты и контрольные точки для быстрого поиска и навигации, что в первую очередь снижает требуемую квалификацию ремонтного персонала и сокращает время ремонта.
В общем случае процедура диагностики неисправностей при ремонте КСЭ заключается в следующем. По каждой неисправной электрической цепи схемы КСЭ в контрольных точках (КТ) в направлении от выхода ко входу проверяются параметры сигналов на соответствие эталонным значениям. Это осуществляется путем установки щупа различных измерительных приборов (осциллограф, мультиметр, логический анализатор) в проверяемую контрольную точку (КТ) печатной платы. Проверяемая КТ автоматически отображается на фотографии КСЭ РЭА и на принципиальной электрической схеме, выделяется жирной рамкой синего цвета (рис. 1).
Для удобной и рациональной работы оператору необходима наглядная информация о местоположении и наименовании каждого элемента объекта диагностики. Таким образом,
фотографию КСЭ РЭА необходимо размечать вплоть до контактов каждого ЭРЭ.
Этапы формирования ИЭРД отображены на рисунке 2.
Ряд процедур проектирования ИЭРД СЭ в настоящее время автоматизирован [7]. Однако некоторые специфические процедуры, связанные с подготовкой и преобразованием исходных данных для ИЭРД СЭ, в настоящее время выполняются вручную.
В ходе ввода исходных данных ИЭРД при разметке компонентов на фотографии на КСЭ высококвалифицированному инженеру предстоит длительная монотонная работа, продолжительность которой может занимать от 5 до 14 рабочих дней.
Например, в среднем типовой объект диагностики содержит от 50 до 200 ЭРЭ и контакты краевых разъемов. Разметка каждого ЭРЭ включает в себя выделение корпуса и выводов (ножек) этого элемента. Количество ножек самого распространенного вида элементов (микросхем) составляет 14 и более.
Таким образом, можно подсчитать, что в среднем инженеру предстоит вручную разметить 50-200 (радиокомпонентов) х 14-30 (выводов элемента) + 1 (корпус элемента) + 46-144 (выводы краевого разъема) = 796-6344 объектов.
о
ы т
а
н р
ф я н о
ы
т
о о т
сч ю
СЭ
ю
(О (П
Интерактивная принципиальная электрическая схема проверяемого КСЭ
Интерактивная фотография проверяемого КСЭ
Текущий элемент 012"'--^ Активная тоуа: Р12.6
выбранная контрольная точка выбранный элемент
Рис. 1. Отображение выбранной контрольной точки
©
г \
Ввод исходных данных
V /
> г
Г N
Создание алгоритма
тестирования
/
> г
Г \
Создание тестовых
последовательностей
/
> г
\
Создание эталонных
баз данных
/
Фотографирование ТСЭ
Фото
Создание компонентов
ПЭ3
Разметка компонентов на фотографии
СБ
Ввод связей и зависимостей
Э3
[ Конец 1
Рис. 2. Этапы формирования ИЭРД ПЭЗ - перечень элементов; СБ - сборочный чертеж; ЭЗ - элекстрическая схема принципиальная
Необходимо учитывать человеческий фактор. С увеличением количества радиоэлектронных элементов, требующих разметки, растет вероятность ошибки. Следовательно, даже опытный инженер с увеличением сложности диагностируемого объекта может допустить ошибку в разметке.
Таким образом, возникает необходимость разработки эффективных методов автоматизации проектирования ИЭРД. Известные методы автоматизации проектирования ИЭРД КСЭ не обеспечивают решения данной задачи.
В результате проведенного аналитического поиска были выявлены предпосылки использования для этих целей элементов искусственного интеллекта, в частности сверточных нейронных сетей. Для оценки возможности такого решения были проведены теоретические и экспериментальные исследования.
Предлагаемые решения и результаты их исследований
Для решения схожих задач [8-10] использовались классические методы компьютерного
зрения и сегментация текстур на основе трейс преобразования. С появлением необходимых вычислительных ресурсов появилась возможность реализовать методы автоматической разметки объектов, используя элементы искусственного интеллекта. В данной статье рассматривается метод детекции ЭРЭ печатной платы с помощью методов глубокого обучения, а именно - с использованием сверточных нейронных сетей. При помощи модификации распространенного алгоритма детекции объектов на базе нейронных сетей становится возможным автоматизировать процесс разметки объекта диагностики, предоставив этап разметки алгоритму детекции, тем самым повысив эффективность и сократив время разработки ИЭРД.
Таким образом, вся монотонная работа будет выполнена детектором. Следовательно, получается значительно сократить сроки диагностики и ремонта КСЭ РЭА и минимизиро- 2 вать человеческий фактор на этапе разметки. £ Этап разметки сменных элементов и их состав- о. ляющих становится относительно быстрой Ф процедурой. Е.
сч сч о сч
>s
ш
т н
< I
м
а м
с
<
О ^
m
а
н р
ш ^
н о
к и н т
о ш
m
сч ■cf ю о
сч ■cf ю сч
W W
Сверточная нейронная сеть — специальная архитектура искусственных нейронных сетей, предложенная Яном Лекуном и нацеленная на эффективное распознавание образов. Данной архитектуре удается гораздо точнее распознавать объекты на изображениях, так как, в отличие от многослойного перцептро-на, учитывается двухмерная топология изображения. При этом сверточные сети устойчивы к небольшим смещениям, изменениям масштаба и поворотам объектов на входных изображениях [11].
Для реализации алгоритма детекции КСЭ РЭА использовался один из известных подходов к решению данной задачи - transfer learning.
Нейронные сети, применяемые для классификации, как правило, содержат N выходных нейронов в последнем слое, где N - это количество классов. В нашей задаче количество классов отличается от того, которое было в исходной обучающей выборке. В таком случае необходимо полностью заменить последний
слой и вставить новый, соответствующий классам детектируемых объектов.
Алгоритм реализован в программной среде Matlab2020. Создание обучающей выборки осуществлялось с помощью библиотеки Image Learning, создание, отладка архитектуры нейронной сети были выполнены с использованием библиотеки Deep Learning Toolbox.
Для реализации алгоритма необходима достаточная по объему и качеству обучающая выборка. Проводилась данная процедура по следующему алгоритму, представленному на рисунке 3.
Создание обучающей выборки осуществлялось с помощью Сканер Syntarex Master A3 (рис. 4).
В результате в состав обучающей выборки вошли фотографии 176 объектов диагностики с разрешением 6000*4000, или 6830 элементов типа «микросхема» (рис. 5).
В таблице 1 приведены типы распознаваемых объектов: выделено три основных кластера сменных радиоэлектронных элементов -микросхем:
• микросхемы, имеющие 14 или 16 выводов, серебряного цвета (микросхемы серии 530ЛА, 533ЛН и т. д.);
• микросхемы, имеющие 14 или 16 выводов, темно-зеленого цвета (микросхемы серии Б19К и т. д.);
микросхемы, имеющие более 16 выводов (микросхемы серии 133КП1 и т. д.).
Итоговое количество элементов каждого класса показано на рисунках 6 и 7.
Рис. 3. Алгоритм процедуры создания выборки и затем обучения
Рис. 4. Пример рабочего места для формирования обучающей выборки
Рис. 5. Обучающая выборка
Таблица 1
Типы распознаваемых объектов
Тип 1. Микросхемы, имеющие 14 или 16 выводов серебряного цвета
Тип 2. Микросхемы, имеющие 14 или 16 выводов темно-зеленого цвета
Тип 3. Микросхемы, имеющие более 16 выводов
Для реализации детекции радиоэлектронных элементов предварительно были выбраны следующие варианты решения [12-17]:
1. SSD.
2. Fast RCNN.
3. Faster RCNN.
4. YoloV2.
5. Yo1oV3.
Результаты оценивались с помощью метрики КАссигасу - доля правильных ответов алгоритма:
Клссигасу = ТР / (ТР + FP), где ТР - количество верно определенных объектов, FP - количество неверно определенных объектов.
(О 5 CL О
сч сч о сч
>s
ш
т н
< I
п
а м
с
<
О m
а
н р
ш ^
н о
^
к и н т
о ф
m
сч ^
ю о
сч ^
ю сч
(Л (Л
5000
4000
3000
2000
1000
Тип №1
Тип №2
Тип №3
Рис. 6. Количество элементов каждого типа обучающей выборки
В итоге, наивысший показатель точности на тестовой выборке обеспечил детектор Faster RCNN. В 79 % случаев детектор определил положение и вид элемента верно.
Отдельно стоит отметить, что важнейшую роль в формировании обучающей выборки составило освещение. Для уменьшения
100
80
60
40
20
I I ПРЧ
0
Faster RCNN YoloV3 YoloV2 Fast RCNN SSD Рис. 7. Точность детекторов
влияния внешней окружающей среды КСЭ РЭА покрыты лаком, что создает шумы в изображении - блики. Пример бликов представлен на рисунке 8.
Так как варьирование таких параметров, как контрастность, яркость, выдержка, резкость, тон, насыщенность, разрешение, недостаточно нивелирует влияние внешней окружающей среды, были рассмотрены и проанализированы следующие варианты схем освещения КСЭ РЭА (рис. 9, 10).
Для тестирования схем освещения выбраны 35 отличающихся принципиально по виду КСЭ РЭА, что составило 20 % от итоговой выборки. В результате тестирования на получившихся данных алгоритм эффективнее при работе на данными, созданными
Рис. 8. Пример неудачных и удачных снимков
Рис. 9. Световая схема № 1 (лайткуб)
0
Рис. 10. Световая схема № 2 (рефлекторы)
с помощью световой схемы № 1. Точность работы детектора при разных вариациях света представлена на рисунке 11.
100
80
60
40
20
И и ■ шя
п щ
tttttttt
ж « « «
ж « « «
а н О
л л К К
Ея Й
<D И
О О
о т
cö К
Р^ а
§
С
Л л К К
5 й
« и 8 о
6 з
о ^
§
с
о с
£
К к
£ 3
о и с о
^ а §
с
Рис. 11. Точность детектор Faster RCNN в зависимости от освещения
На рисунке 12 приведены примеры различных параметров освещения при КСЭ.
я
CL О
Рис. 12. Пример не оптимально и оптимально подобранных параметров освещения
0
Результатом работы детектора Faster RCNN является изображение с идентифицированным положением и типом искомого объекта, что представлено на рисунках 13, 14.
Итоговая точность работы алгоритма для каждого класса сменного радиоэлектронного элемента показана на рисунке 15.
В итоге после применения данного алгоритма оператору необходимо произвести оценку качества работы детектора и при необходимости скорректировать до необходимого результата, чем является полностью размеченный КСЭ РЭА.
Заключение
Проведенные исследования подтвердили потенциальную эффективность применения элементов искусственного интеллекта для сокращения трудоемкости проектирования интерактивной электронной ремонтной документации по контролю и диагностике КСЭ РЭА с применением АСКД.
Дальнейшие исследования данного вопроса будут продолжены, следующий этап - это обучение нейронной сети распознаванию выводов микросхем и возможности адаптивного подбора оптимальных параметров освещения.
сч сч о сч
Рис. 13. Результат детекции компонентов
ш
т н
< I
м
а м
Ц <
О ы m
а
н р
ш J н о
ы
к
т
о ш m
сч
ю о
сч
ю сч
W W
Рис. 14. Результаты детекции компонентов, где числа в рамках соответствуют вероятности
принадлежности к типу
Тип №1 Тип №2 Тип №3 Тип №1 Тип №2 Тип №3
Рис. 15. Точность на валидационной выборке до/после подбора оптимальных параметров освещения
Реализация данного подхода сократит трудоемкость формирования исходных данных, что в настоящее время составляет не менее 20 % от общей трудоемкости разработки ИЭРД.
Список литературы
1. Комаров М. В., Страхов А. Ф. Автоматизация контроля работоспособности и диагностики неисправностей сменных элементов РЭА из состава образцов ВВТ ПВО // Вопросы радиоэлектроники. 2018. № 6. С. 44-48.
2. Страхов А. Ф. Многопараметровые объекты и многопараметровые измерения // Измерительная техника. 2004. № 12. С. 11-14.
3. Страхов А. Ф. Многопараметровые измерительные системы // Измерительная техника. 2005. № 4. С. 3-7.
4. Патент № 2220435 Российская Федерация, Страхов А. Ф., Криволапов В. Л., Комаров М. В., Грушкин С. В., Гутенев Ю. Ю., Суслов В. С. Автоматизированная система контроля и диагностики, 2015.
5. Автоматизированная система контроля и диагностики АСКД. Руководство по эксплуатации ШИБФ.468229.084 РЭ.
6. Патент № 2014127912 Российская Федерация, Страхов А. Ф., Молчакова С. С. Интерактивная электронная документация сложных технических систем, 2016
7. Патент № 2716555 Российская Федерация, Страхов А. Ф., Дюков А. А. Автоматизированная система проектирования интерактивной электронной ремонтной документации, 2020.
8. Садыков С. С. Терехин А. В. Экспериментальное исследование системы автоматического распознавания на парах изображений проекций реальных трехмерных объектов // Труды международного симпозиума «Надежность и качество». 2015. Т. 1. С. 273-276. URL: https://cyberleninka. ru/article/n/eksperimentalnoe-issledovanie-siste-my-avtomaticheskogo-raspoznavaniya-na-parah-izo-brazheniy-proektsiy-realnyh-trehmernyh-obektov/ viewer (дата обращения: 20.09.2021).
9. Федотов Н. Г., Голдуева Д. А., Мошаки-на М. А. Сегментация текстур на основе трейс-преобразования // Труды международного симпозиума «Надежность и качество», 2015, Т. 1, С. 276-278
10. Садыков С.С. Терехин А.В. Экспериментальное исследование системы автоматического распознавания на парах изображений проекций реальных трехмерных объектов // Труды международного симпозиума «Надежность и качество». 2015. Т. 1. С. 273-276
11. LeCun Y. et al. Gradient-based learning applied to document recognition // Proceedings of IEEE. 1998. Е. 86 № 11. С. 2278-2324
12. Петров Д. М. Разработка модели для выявления и локализации объектов на изображениях, основанной на адаптации однокад-рового детектора объектов // Международный журнал гуманитарных и естественных наук. _ 2021. № 5-1. URL: https://cyberleninka.ru/ | article/n/razrabotka-modeli-dlya-vyyavleniya- те i-lokalizatsii-obektov-na-izobrazheniyah- £ osnovannoy-na-adaptatsii-odnokadrovogo-detektora (дата обращения: 20.09.2021). —
13. Чорбаа Н. А., Ле Ань Ту, Толстой И. М. Сравнительный анализ методов детектирования объектов на радиолокационных изображениях при помощи нейронных сетей // Научный результат. Информационные технологии. 2020. № 4. URL: https://cyberleninka.ru/article/n/sravnitelnyy-analiz-metodov-detektirovaniya-obektov-na-radi ol okatsi onnyh-izobrazheniyah-pri -pomoschi -neyronnyh-setey (дата обращения: 20.09.2021).
14. Redmon J., Farhadi A. Yolov3: An Incremental Improvement //arXiv preprint arXiv: 1804.02767. 2018.
15. Girshick R. Fast R-CNN // Proceedings of IEEE International Conference on Computer Vision (ICCV). 2015. C. 1440-1448
16. Meivel S. et al. Real time data analysis of face mask detection and social distance measurement using Matlab // Materials Today: Proceedings. 2021.
17. Барвинский Д.А., Минеева Т.А. Применение метода градиентного спуска в решении задач оптимизации // Тенденции развития науки и образования. 2021. №74-2. С. 61-66.
Об авторах
Козлов Александр Антонович - начальник сектора СКБ «Меридиан» АО «ГПТП «Гранит», Москва, Российская Федерация.
Область научных интересов: измерения в радиоэлектронике, разработка АСКД, информационно-измерительные и информационные системы, автоматизированные информационные технологии, военная метрология.
Страхов Алексей Федорович - доктор технических наук, профессор, главный научный сотрудник АО «ГПТП «Гранит», Москва, Российская Федерация, заслуженный изобретатель России.
Область научных интересов: техническое обеспечение эксплуатации ВВТ ВКО, информационно-измерительные и информационные системы, автоматизированные информационные технологии, военная метрология.
^ Increasing the efficiency of computer-aided design of documentation for testing, 8 diagnostics and repair of replaceable elements of radio electronic equipment
J Kozlov А. А., Strakhov А. F.
J JSC Head Centre Granit, Moscow, Russian Federation
<D I-
The article is devoted to increasing the efficiency of field repair of samples of weapons and military equipment
i (WME) of air defence (AD), in particular - field repair of structural replaceable elements (SRE) of radio electronic | equipment (REE) using interactive electronic repair manuals (IERM). Repair of REE SRE makes up a significant 5 part of the total labour intensity of field repair of WME samples.
p Keywords: automated monitoring and diagnostics, system interactive electronic repair documentation, improving the efficiency of th< design automation
m the efficiency of the formation of interactive electronic repair documentation, convolutional neural networks,
р
о
Information about the authors
| Kozlov Aleksandr Antonovich - Head of Sector, Special Design Bureau Meridian (JSC Head Centre Granit, Moscow).
v Science research interests: measurements in radio electronics, development of automated monitoring and diagnostics CO
systems, military metrology.
CM ■Clio
Strakhov Aleksey Fedorovich - Leading Research Scientist, JSC Head Centre Granit, Doctor of Engineering Sciences,
5 Professor, Honoured Inventor of Russia.
z Science research interests: technical support of operation of aerospace defence weapons and military equipment, information
CO
w and measurement systems, information systems, computer-aided information technologies, military metrology.
