Научная статья на тему 'РАСПОЗНАВАНИЕ РАДИОЛОКАЦИОННЫХ ИЗОБРАЖЕНИЙ, ПОЛУЧЕННЫХ В МИЛЛИМЕТРОВОМ ДИАПАЗОНЕ, С ИСПОЛЬЗОВАНИЕМ НЕЙРОННЫХ СЕТЕЙ'

РАСПОЗНАВАНИЕ РАДИОЛОКАЦИОННЫХ ИЗОБРАЖЕНИЙ, ПОЛУЧЕННЫХ В МИЛЛИМЕТРОВОМ ДИАПАЗОНЕ, С ИСПОЛЬЗОВАНИЕМ НЕЙРОННЫХ СЕТЕЙ Текст научной статьи по специальности «Компьютерные и информационные науки»

CC BY
126
31
i Надоели баннеры? Вы всегда можете отключить рекламу.
Ключевые слова
РАДИОИЗОБРАЖЕНИЕ / РАСПОЗНАВАНИЕ / НЕЙРОННЫЕ СЕТИ / СКРЫТЫЕ ПРЕДМЕТЫ

Аннотация научной статьи по компьютерным и информационным наукам, автор научной работы — Дудихин В.В., Иванов А.С., Межуев И.Ю., Шоков А.В., Якупов И.Ю.

В статье описан экспериментальный программно-аппаратный комплекс скрытого досмотра, использующий радиолокационный сигнал миллиметрового диапазона. Комплекс содержит модуль распознавания, использующий глубокую сверточную нейронную сеть в качестве классификатора.Применяемые при разработке данного программно-аппаратного комплекса методы глубокого обучения нейронных сетей (deep learning), в частности технологии переноса модели обучения (transfer learning), позволяют произвести адаптацию полученных ранее моделей распознавания для решения новых поставленных задач.Программно-аппаратный комплекс потенциально способен предоставить возможность производить скрытый досмотр людей и классификацию носимых ими предметов без остановки людского потока, что позволит существенно повысить скорость досмотра по сравнению с общепринятыми методиками.Данная система может быть адаптирована для распознавания разных наборов объектов, представляющих интерес для различных заказчиков.Научная новизна работы состоит в разработке методологии классификации радиоизображений миллиметрового диапазона на основе переноса модели обучения в глубоких нейронных сетях.Применение технологии глубокого машинного обучения позволяет решить проблему с качеством распознавания, которая в течение длительного времени ограничивала практическое применение подобных систем.

i Надоели баннеры? Вы всегда можете отключить рекламу.
iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.
i Надоели баннеры? Вы всегда можете отключить рекламу.

MILLIMETRE-WAVE RADAR IMAGE RECOGNITION USING NEURAL NETWORKS

The article describes an experimental software and hardware system for invisible security screening, using a millimetre-wave radar signal and a recognition module that employs a deep convolutional neural network as a classifier.The software and hardware system was developed using the methods of deep learning of neural networks, in particular, the transfer learning technology, which make it possible to adapt the previous recognition models to solving new tasks.The hardware and software system can potentially enable invisible security screening of people and classification of carried objects without impeding the flow of people. In comparison with the traditional methods, this solution allows to significantly increase the security screening rate.This system can be adapted to recognize various sets of objects of interest depending on particular customer’s requirements in various fields of application.The scientific novelty of the work consists in the development of methods for classifying millimetre-wave images based on the transfer of a learning model in deep neural networks.The deep machine learning technology allows to solve the problem of the quality of recognition, which was limiting the application of such systems for a long time.

Текст научной работы на тему «РАСПОЗНАВАНИЕ РАДИОЛОКАЦИОННЫХ ИЗОБРАЖЕНИЙ, ПОЛУЧЕННЫХ В МИЛЛИМЕТРОВОМ ДИАПАЗОНЕ, С ИСПОЛЬЗОВАНИЕМ НЕЙРОННЫХ СЕТЕЙ»

<

1

со та

2

О ü СО

ш

https://doi.org/10.38013/2542-0542-2022-3-48-58 УДК: 004(93'12+415.25)

Распознавание радиолокационных изображений, полученных в миллиметровом диапазоне, с использованием нейронных сетей

В. В. Дудихин, А. С. Иванов, И. Ю. Межуев, А. В. Шоков, И. Ю. Якупов

НТЦ-Т, Акционерное общество «НПК «НИИДАР», Москва, Российская Федерация

В статье описан экспериментальный программно-аппаратный комплекс скрытого досмотра, использующий радиолокационный сигнал миллиметрового диапазона. Комплекс содержит модуль распознавания, использующий глубокую сверточную нейронную сеть в качестве классификатора. Применяемые при разработке данного программно-аппаратного комплекса методы глубокого обучения нейронных сетей (deep learning), в частности технологии переноса модели обучения (transfer learning), позволяют произвести адаптацию полученных ранее моделей распознавания для решения новых поставленных задач.

Программно-аппаратный комплекс потенциально способен предоставить возможность производить скрытый досмотр людей и классификацию носимых ими предметов без остановки людского потока, что позволит существенно повысить скорость досмотра по сравнению с общепринятыми методиками. Данная система может быть адаптирована для распознавания разных наборов объектов, представляющих интерес для различных заказчиков.

Научная новизна работы состоит в разработке методологии классификации радиоизображений миллиметрового диапазона на основе переноса модели обучения в глубоких нейронных сетях. Применение технологии глубокого машинного обучения позволяет решить проблему с качеством распознавания, которая в течение длительного времени ограничивала практическое применение подобных систем.

Ключевые слова: радиоизображение, распознавание, нейронные сети, скрытые предметы

Для цитирования: Дудихин В. В., Иванов А. С., Межуев И. Ю., Шоков А. В., Якупов И. Ю. Распознавание радиолокационных изображений, полученных в миллиметровом диапазоне, с использованием нейронных ^ сетей // Вестник Концерна ВКО «Алмаз - Антей». 2022. № 3. С. 48-58. https://doi.org/10.38013/2542-0542-о 2022-3-48-58

см

^ For citation: Dudikhin V. V., IvanovA. S., Mezhuev I. Yu., ShokovA. V., Yakupov I. Yu. Millimetre-wave radar

fi image recognition using neural networks // Vestnik Koncerna VKO "Almaz - Antey". 2022. No. 3. P. 48-58.

J https://doi.org/10.38013/2542-0542-2022-3-48-58

Поступила 10.02.2022 Отрецензирована 23.02.2022 Одобрена 30.04.2022 Опубликована 24.06.2022

а- Введение значимые объекты от людей, обладающих по-

I

Вопросы радиолокационного распознавания тенциально опасными предметами.

I скрытых предметов, в том числе и под оде- Одним из основных недостатков си-

£ ждой человека, в настоящее время вызывают стем досмотра скрытых предметов милли-

т большой интерес [1, 2]. Решение этой задачи метрового диапазона является низкая чет-

§ позволит обезопасить различные социально кость изображений предметов. Это связано

9 как с малой глубиной резкости вследствие

3 узкой досмотровой зоны систем [1, 3], так

г и с низким пространственным разрешением

ю © Дудихин В. В., Иванов А. С., Межуев И. Ю., г ., V.

=1 Шоков А. В., Якупов И. Ю., 2022 данного диапазона длин волн [4]. В данной

работе предлагаются возможные пути решения данных проблем. Во-первых, для увеличения зоны досмотра в описываемой системе предусмотрена автоматическая система нацеливания и фокусировки, которая позволяет подстраивать зону досмотра под текущее положение предмета досмотра. Во-вторых, используются нейросетевые методы распознавания образов, что позволяет решать задачу идентификации опасных предметов.

Однако у систем досмотра данного класса остается ряд недостатков. Так, система не может обнаружить предметы, находящиеся внутри тела человека, а также предметы, скрытые за металлическими предметами, в том числе на одежде человека, или за сильно мокрой одеждой. Влажная одежда также является фактором, уменьшающим вероятность обнаружения и распознавания предмета под ней.

Распознавание таких предметов позволит скрытно производить досмотр без остановки людей, что может существенно повысить его скорость. Кроме того, это дает возможность снизить роль человеческого фактора, характерного для традиционных методик мониторинга с использованием металлодетектора.

Задача радиолокационного распознавания наблюдаемых объектов с использованием нейронной сети в общем случае сводится к задаче классификации - определению вероятностей принадлежности объектов к тому или иному классу.

Целью данной работы является разработка методов получения радиоизображений с использованием радиолокационного сигнала миллиметрового диапазона и методов классификации радиоизображений объектов сложной формы на основе нейронных сетей.

Описание установки

В ходе проведенных экспериментальных работ был создан экспериментальный программно-аппаратный комплекс, в состав которого входят приемные и передающие устройства, а также набор программных модулей, выполняющих задачи предварительной обработки изображений, распознавания с использованием предварительно обученной нейронной сети,

управления аппаратной частью и реализации пользовательского интерфейса.

На рисунке 1 изображена функциональная схема экспериментального программно-аппаратного комплекса скрытого досмотра. Передающая часть имеет 5 излучателей, генерирующих микроволны длиной 3 мм. Они установлены на специальные стойки, обозначенные на схеме цифрами 1, 2 и 3, внутри которых можно изменять положение излучателей для более равномерного распределения излучения на объекте досмотра.

Приемная часть содержит матрицу, установленную на позиционере. Радиоизображение на матрице фокусируется с помощью специальной фторопластовой линзы. Позиционер позволяет получить достаточно четкое радиоизображение вне зависимости от расстояния между матрицей и объектом досмотра.

Для повышения качества радиоизображений используется программная реализация функции шумоподавления. После подавления шумов сигнал, соответствующий полученному радиоизображению, поступает на вход нейронной сети, которая решает задачу классификации. Отображение результатов распознавания обеспечивается разработанным в рамках данного исследования программным интерфейсным модулем.

Выбор параметров излучения для создания экспериментальной установки обусловлен рядом факторов.

• Использование диапазона миллиметровых волн уменьшает общие габаритные размеры радиосистемы, так как для них требуются значительно меньшие размеры антенн.

• Волны такого диапазона, в отличие от оптического и инфракрасного излучения, имеют более высокую проникающую способность в большинство неметаллических объек- —

л

тов. Использование инфракрасного излучения I

не позволяет достичь достаточного уровня ин- 8

тенсивности отраженного сигнала после про- $2

ч

хождения через одежду. та

• Радиоволны относятся к неионизиру- те

ющему излучению. В частности, миллимет- |

о

ровые волны почти полностью задерживаются

*

кожей и не причиняют вреда внутренним ор- ¡й ганам человека [5]. ^

см см о см

О!

< I

со

0 ^

СО те

1

о.

I

о

0 <и со

см ■ч-ю о

1

см ■ч-ю см

со

Система базового освещения зоны №2

Система вторичного диффузного излучения

Рис. 1. Функциональная схема

• На радиоизображениях, получаемых в данном диапазоне волн, одежда на человеке обычно не визуализируется и становится невидимой, однако контуры тела человека отчетливо оттеняются, а находящиеся при нем предметы (монеты, пуговицы, ручки, ключи и др.) видны достаточно четко. Таким образом, становится возможным обнаружить скрытое под одеждой оружие, взрывчатые или наркотические вещества или другие запрещенные предметы, так как они мгновенно визуализируются [6].

Передающими элементами системы являются точечные источники непрерывного излучения с длиной волны 3 мм. Общая мощность излучателей - 400 мВт. Ширина спектра излучателей - не менее 50 МГц. Пространственное расположение источников обеспечивает равномерный подсвет объекта досмотра. В связи с малым временем когерентности источников (< 20 нс) и большим временем накопления приемной матрицы (~ 50 мс) интерференционные искажения в принятом сигнале значительно ниже уровня шумов.

Таким образом, расположение приемников влияет на качество принятого сигнала только в рамках геометрической оптики.

В качестве приемного элемента в настоящее время используется матрица, произведенная компанией TeraSense. Она состоит из детекторов, созданных на основе высокомобильной гетероструктуры GaAs. Оптический сенсор матрицы произведен из единой полупроводниковой пластины. Данная матрица обладает высокой однородностью и повторяемостью параметров каждого детектора, так как разница в чувствительности между ее пикселями составляет менее 20%. Используемая матрица имеет разрешение 64х64 пикселя. Размер пикселя-детектора составляет 1,5 мм. Каждый детектор в матрице имеет чувствительность при комнатной температуре (25 °С) до 50 кВ/Вт со схемой вывода данных и имеет шумовой эквивалент в 1 нВт/-^Гц в частотном диапазоне от 10 ГГц до 1 ТГц. Механизм детекции матрицы основан на возбуждении осцилляций плазмы в двумерной системе электронов с последующим исправлением, которое производится на специальных дефектах системы электронов [7].

Система управления

В рамках данного проекта разработан алгоритм позиционирования приемной матрицы. Для получения изображения объекта

на матрице используется специальная фторопластовая линза. Для получения сфокусированного на матрице изображения необходимо установить матрицу на определенном расстоянии от линзы. Расстояние определяется формулой тонкой линзы

1 / f + 1 / d = 1 / F,

где d - расстояние от линзы до объекта, f -искомое расстояние от линзы до матрицы, F - фокусное расстояние линзы, в данном случае равное 40 см. В экспериментальной установке для этой цели использовался позиционер, принцип работы которого основан на дельта-механизме. Для получения данных о расстоянии до объекта исследования применяется лидар со специальным ПО для выбора его поля зрения.

В качестве интерфейса обмена данными с аппаратной частью системы управления установки применяется широко распространенный интерфейс USB. Для обмена данными с лидаром используется специальная программная библиотека, реализованная на языке программирования (ЯП) Python. Схема определения расстояние от линзы до объекта представлена на рисунке 2.

Исходными данными, получаемыми от лидара (2), служат набор координат точек объектов (5) в собственной полярной системе координат. Из полученных данных отбираются

d

4

Рис. 2. Схема определения расстояние от линзы до объекта. 1 - приемное устройство с линзой, 2 - лидар, 3 - главная ось приемного устройства, 4 - область зоны досмотра, 5 - исходные точки, полученные с лидара, 6 - точка с усредненными координатами, d - расстояние от линзы до объекта

та

X Ф

ч

та Q.

та

о

о.

£

V

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

ц

3

2

точки в заданной области, соответствующей зоне досмотра (4), координаты которых усредняются. Путем проецирования усредненной точки (6) на предварительно откалиброванную ось (3) приемного устройства (1) определяется дальность до цели.

Взаимодействие с позиционером реализовано с использованием G-code [8]. Изменение положения матрицы по дальности происходит на основе данных о положении объекта досмотра, полученных с лидара. Помимо этого, матрица перемещается позиционером параллельно плоскости линзы таким образом, чтобы радиоизображение объекта находилось в центре кадра.

Система сбора и обработки данных

Подключение приемной матрицы к компьютеру также происходит посредством СОМ-порта. Для получения данных используется

w

— Рис. 3. Примеры радиоизображений и

библиотека для ЯП Python. Программный модуль, использующий данную библиотеку, позволяет асинхронно получать кадры и реализо-вывать их многопоточную обработку. Примеры радиоизображений представлены на рисунке 3.

Зашумленность радиоизображений, поступающих непосредственно с матрицы, снижает качество распознавания объектов классифицирующей нейронной сетью. Для решения этой проблемы применяется система шумоподавления на основе отделения сигналов по минимальному уровню и удаления базовой шумовой засветки, которая всегда присутствует и не зависит от положения источников подсвета.

Для определения изображений, которые не содержат объектов, используется фильтрация по пороговому значению общей суммы всех пикселей матрицы. Подобные изображения не передаются в нейронную сеть для обработки, что позволяет увеличить точность

г

фотографий пистолета (а, б) и ножа (в, г)

классификации, а также повысить быстродействие комплекса.

К результатам классификации, выдаваемым нейронной сетью, применяется усреднение, что позволяет улучшить стабильность классификации нечетких изображений. Также возможна точная настройка параметров усреднения. Искомый результат в этом случае вычисляется на основе вероятностей принадлежности объекта к тому или иному классу или как наиболее часто встречаемый в n предыдущих кадрах.

Применение нейронных сетей

В литературе описаны примеры использования нейронных сетей для распознавания радиоизображений [9, 10]. Особенность данной работы заключается в том, что для распознавания объектов на радиоизображениях применялись методы глубокого обучения с переносом моделей предварительно обученных нейронных сетей (transfer learning).

В ходе исследований были рассмотрены различные варианты построения нейронных сетей, потенциально пригодных для решения поставленных задач. В результате проведенного анализа были выбраны, обучены и опробованы на тестовых изображениях три различных варианта архитектуры классификатора, выполненных с использованием технологии transfer learning на основе предварительно обученных нейронных сетей MobileNet, ResNet и Inception. Полученные структуры позволяют определить вероятности принадлежности радиоизображения к тому или иному классу потенциально опасного объекта.

Для реализации архитектур нейронных сетей применялась библиотека Keras, хорошо зарекомендовавшая себя для работы с глубоким обучением нейронных сетей, написанная на ЯП Python и способная работать совместно с такими популярными программными библиотеками, как TensorFlow и Theano.

Основной алгоритм создания применяемых в работе нейросетей основывался на принципе глубокого обучения (deep learning) [11]. Для его реализации была создана база радиоизображений реальных объектов, обнаружение которых являлось целью данного проекта.

Радиоизбражения для данной базы фиксировались экспериментальной установкой под различными ракурсами.

Для увеличения размера набора данных, использующихся для обучения нейронной сети, использовался метод аугментации, позволяющий синтезировать дополнительные изображения. В нашем случае он состоял:

• во вращении реального объекта в пределах 40°;

• его перемещение по двум осям в пределах 0,1 от размера изображения;

• вращении с растяжением в пределах 40°;

• приближении объекта в пределах 0,1 от размера изображения;

• отражении объекта по двум осям;

• перемешивании выборки.

Для трансформации радиоизображений использован созданный программный модуль, что позволило увеличить размер базы радиоизображений до 8019. Тем самым была достигнута достаточная сбалансированность выборки данных (размеры классов примерно равны), что позволило избежать эффекта смещения оценки.

Для реализации технологии машинного обучения из общей базы радиоизображений были сформированы три набора данных: обучающий, валидационный и тестовый. Исходные 8019 радиоизображений были поделены следующим образом: 70 % (5613 изображений) на обучающую выборку и по 15 % (1203 изображения) на валидационную и тестовую.

В ходе выполнения работ данного проекта созданы и протестированы 4 модели классификаторов. Первая модель выполнена на основе предварительно обученной свер-точной нейронной сети MobileNetV2, она ре- — шает лишь задачу бинарной классификации. I Архитектура модели реализует выделение при- g знаков (feature extraction) предварительно обу- ° ченной нейросетью и использует обучаемый j? персептрон на выходе, что сходится к одному те нейрону в выходном слое с сигмоидальной | функцией активации.

Остальные три модели решают за- g дачу классификации с тремя классами. Их il

см см о см

< i

со те

г |

о ^

ой

Ф

О

о

V

ой

см ■clin =?

см ■clin см

(П (П

архитектуры содержат классификаторы на базе более массивных (с большим количеством нейронов) персептронов, которые на выходе имеют три нейрона с функцией активации softmax. Они также реализованы на основе различных предобученных сверточных нейронных сетей, входящих в состав библиотеки Keras.

Сравнительный анализ классификаторов

Рассматриваемые нейронные сети обладали следующими характеристиками:

• MobileNetV2, 3045955 параметров всего, более быстрая, менее точная (представляется предпочтительной при решении задачи в реальном времени при условии обеспечения требуемого качества);

• ResNet152V2, 59512835 параметров всего, менее быстрая, более точная (представляется вариантом, обеспечивающим наибольшую точность);

• InceptionV3, 22983971 параметр всего, достаточно быстрая и точная (представляется компромиссным решением).

Для проведения тестирования моделей были созданы пять различных тестов, отражающие различные возможные режимы эксплуатации классификаторов.

100

о4

80

60

II

пi я

Щ

н

а 40

£ §

fr 20 Щ

См

МоЫ1еКе1У2 Ке8ЫеИ52У2 1псерйопУ3

Рис. 4. Результаты тестирования нейронных сетей

--тест 1;--тест 2;--тест 3;

--тест 4;--тест 5

Тест 1. Имеет 1203 изображения из тестовой выборки, прошедшие через генератор случайных искажений, аналогичный тому, что использовался при обучении и валида-ции.

Тест 2. Представляет собой выборку из 33 изображений 3 классов с худшим качеством и/или неудачным ракурсом, без случайных искажений.

Тест 3. Включает 1203 изображения из тестовой выборки без случайных искажений.

Тест 4. Представляет собой 1203 изображения из тестовой выборки, прошедших через генератор случайных искажений с менее агрессивными параметрами, чем те, что использовались при обучении и валидации:

• вращение в пределах 20°;

• перемещение по двум осям в пределах 0,05 от размера изображения;

• вращение с растяжением в пределах 20°;

• приближение в пределах 0,05 от размера изображения;

• отражение по двум осям.

Тест 5. Имеет 1203 изображения из тестовой выборки, прошедшие через генератор случайных искажений с более агрессивными параметрами, чем те, что использовались при обучении и валидации:

• вращение в пределах 80°;

• перемещение по двум осям в пределах 0,1 от размера изображения;

• вращение с растяжением в пределах 80°;

• приближение в пределах 0,1 от размера изображения;

• отражение по двум осям.

Результаты тестирования трех моделей

на пяти тестах сведены в таблице 1 и продемонстрированы на рисунке 4.

После окончания теоретического этапа, заключавшегося в построении, обучении

Таблица 1

Результаты тестирования, метрика accuracy, %

Тест 1 Тест 2 Тест 3 Тест 4 Тест 5

MobileNetV2 97,6725 66,6667 95,3450 98,2544 75,3117

ResNet152V2 98,4206 63,6364 96,1762 98,9194 79,7174

InceptionV3 98,7531 51,5152 93,1837 99,2519 76,3032

0

и тестировании различных вариантов нейро-сетей в статическом режиме на заранее полученных радиоизображениях, был проведен ряд экспериментальных работ по апробации разработанных моделей на реальном оборудовании при работе в режиме реального времени.

На рисунках 5 и 6 показаны примеры работы экспериментальной установки в бинар-

ном режиме (опасно/неопасно). Контрольные объекты во время имитационных экспериментов скрытно размещались на манекене. Было проведено шесть серий экспериментов по 40 измерений в каждом. В зависимости от ракурса, на котором было получено радиоизображение, система распознавания давала правильный ответ о степени опасности скрытого объекта с точностью от 0,75 до 0,9.

Рис. 5. Распознавание скрытого опасного предмета

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

Рис. 6. Распознавание скрытого неопасного предмета

(О *

S X

X ф

S

ч

CG Q.

cd *

s

X

о а

Ё ф

<5

см см о см

< I

со те

s

о со

о.

ф

о

о ф

со

см ■ci-io

с?

см ■ci-io см

(П (П

Заключение

Комплекс проведенных исследований подтвердил принципиальную возможность и целесообразность использования нейросетевых классификаторов для распознавания радиоизображений потенциально опасных объектов скрытого ношения.

Сделан вывод о необходимость увеличения разрешения приемной матрицы, так как возможности используемого в настоящий момент разрешения 64х64 пикселя находятся на границе допустимого.

Разработанный программный комплекс, использующий нейросети, обладает свойством масштабируемости. Уже имеющееся программное обеспечение при увеличении разрешения приемной матрицы может быть достаточно легко адаптировано для распознавания значительно большего количества классов объектов.

Это обстоятельство обусловлено тем, что в разработанных классификаторах используются структуры, предварительно обученные на большем объеме размеченных данных базы изображений ImageNet, содержащей 14 миллионов изображений, разбитых на 22 тысячи классов.

Для распознавания большего числа объектов необходимо большое количество качественных радиоизображений для обучения уже имеющихся нейронных сетей. Технология позволяет дообучить систему распознавания под набор объектов, интересующих заказчика.

Количество матриц, необходимое для распознавания радиоизображений объектов определяется требованиями к точности распознавания. Причем, точность зависит от качества набора данных, использующихся для обучения. Вопрос предсказания точности распознавания в настоящее время находится в процессе изучения.

Список литературы

1. Солдатов Д. П., Гладун В. В., Павлов Р. А., Пирогов Ю. А., Тищенко Д. А. Обнаружение потенциально опасных предметов с помощью системы пассивного радиовидения миллиметрового диапазона. Ученые записки физического факультета Московского университета,

Московский государственный университет имени М. В. Ломоносова, 2012. № 1. - С. 67-72.

2. Сердюцкая Д. А., Максимова А. А. Моделирование процессов обнаружения оружия на теле человека при его импульсном облучении, Моделирование оптимизация и информационные технологии: Воронежский институт высоких технологий. № 3 (14), 2016.

3. Гладун В. В., Котов А. В., Криворучко В. И. Система ближнего пассивного радиовидения 3-мм диапазона // Журнал радиоэлектроники. 2010, №7.

4. H. Zhong, J. Xu, X. Xie, T. Yuan, R. Reightler, E. Madaras, and X.-Ch. Zhang, Nondestructive defect identification with terahertz time-of-flight tomography, IEEE Sensors Journal, vol. 5, no. 2, pp. 203-208 (2005).

5. Hitchcock, R. Timothy. Radio-frequency and Microwave Radiation. - American Industrial Hygiene Assn., 2004. - P. 1-3.

6. Sheen, D. M., McMakin, L. & Hall, T. E. 2001 Three-dimensional millimeter-wave imaging for concealed weapon detection. IEEE Trans. Microwave Theory Techn. 49, P. 1581-1592.

7. Terahertz imaging cameras. TeraSense Group, Inc. URL: https://terasense.com/products/sub-thz-im-aging-cameras/ (дата обращения: 21.03.2022).

8. Oberg, Erik; Jones, Franklin D.; Horton, Holbrook L.; Ryffel, Henry H. (1996), Green, Robert E.; McCauley, Christopher J. (eds.), Machinery's Handbook (25th ed.), New York: Industrial Press, - P. 1284-1287

9. Разевиг В.В., Ивашов С.И., Бугаева А.С., Нейросетевой метод восстановления радиоголограмм, успехи современной радиоэлектроники, Том: 74. № 12, 2020, - C. 5-16.

10. Назаров А. В., Благодыренко Е. В. Алгоритм идентификации радиоизображений, представленных многомерными групповыми точечными объектами, с использованием карты Кохонена - современные проблемы создания и эксплуатации вооружения, военной и специальной техники, III Всероссийская научно-практическая конференция. Военно-космическая академия имени А. Ф. Можайского. Санкт-Петербург, 2016.

11. Николенко С., Архангельская Е., Кадурин А. Глубокое обучение. Погружение в мир нейронных сетей, Питер, 2020 г.

Об авторах

Дудихин Виктор Владимирович - кандидат технических наук, начальник лаборатории АО «НПК «НИИДАР», Москва, Российская Федерация.

Область научных интересов: информационные системы и технологии, системы искусственного интеллекта, нейронные сети, методы аналитической обработки информации, OSINT-конкурентная и бизнес-разведка, методы аналитической обработки информации (Data mining и Text mining).

Иванов Александр Сергеевич - инженер АО «НПК «НИИДАР», Москва, Российская Федерация. Область научных интересов: машинное обучение, компьютерное зрение.

Межуев Игорь Юрьевич - кандидат технических наук, начальник отдела АО «НПК «НИИДАР», Москва, Российская Федерация.

Область научных интересов: проектирование линеек программных продуктов, разработка адаптируемого программного обеспечения, разработка систем управления научным экспериментом.

Шоков Александр Владимирович - инженер АО «НПК «НИИДАР», Москва, Российская Федерация. Область научных интересов: машинное обучение, компьютерное зрение.

Якупов Игорь Юрьевич - начальник лаборатории АО «НПК «НИИДАР», Москва, Российская Федерация. Область научных интересов: радиовидение, разработка программного обеспечения управления, автоматизация систем научного исследования.

Millimetre-wave radar image recognition using neural networks

Dudikhin V. V., Ivanov A. S., Mezhuev I. Yu., Shokov A. V., Yakupov I. Yu.

STC-T, NPK "NIIDAR" JSC, Moscow, Russian Federation

The article describes an experimental software and hardware system for invisible security screening, using a millimetre-wave radar signal and a recognition module that employs a deep convolutional neural network as a classifier.

The software and hardware system was developed using the methods of deep learning of neural networks, in particular, the transfer learning technology, which make it possible to adapt the previous recognition models to solving new tasks.

The hardware and software system can potentially enable invisible security screening of people and classification of carried objects without impeding the flow of people. In comparison with the traditional methods, this solution allows to significantly increase the security screening rate.

This system can be adapted to recognize various sets of objects of interest depending on particular customer's requirements in various fields of application.

The scientific novelty of the work consists in the development of methods for classifying millimetre-wave images based on the transfer of a learning model in deep neural networks.

The deep machine learning technology allows to solve the problem of the quality of recognition, which was limiting the application of such systems for a long time.

Keywords: radar image, recognition, neural networks, concealed objects

CM CM

о

CM

Information about the authors

Dudikhin Viktor Vladimirovich - Candidate of Engineering Sciences, Head of Laboratory, NPK "NIIDAR" JSC, Moscow, Russian Federation.

Science research interests: information systems and technologies, artificial intelligence systems, neural networks, methods of analytical data processing, business and competitive intelligence (Open Source Intelligence, OSINT), data mining and text mining.

Ivanov Aleksandr Sergeyevich - Engineer, NPK "NIIDAR" JSC, Moscow, Russian Federation. Science research interests: machine learning, computer vision.

¡5 Mezhuev Igor Yurievich - Candidate of Engineering Sciences, Head of Department, NPK "NIIDAR" JSC, Moscow,

o Russian Federation. i-

^ Science research interests: software product lines design, development of adaptive software, development of scientific

' experiment control systems.

Shokov Aleksandr Vladimirovich - Engineer, NPK "NIIDAR" JSC, Moscow, Russian Federation.

0 Science research interests: machine learning, computer vision. CO

x Yakupov Igor Yurievich - Head of Laboratory, NPK "NIIDAR" JSC, Moscow, Russian Federation.

« Science research interests: radio-wave imaging, control software development, research systems automation.

1

0 ^

s

1 I-

o

V CO

CM ■Clio 9

CM ■Clio

CM Z

w w

i Надоели баннеры? Вы всегда можете отключить рекламу.