CC BY
0
Формирование контрастных полихроматических изображений заданных объектов на основе многооконной акустооптической фильтрации
В.В. Шипко 12, В.Э. Пожар2, А.С. Мачихин 2, М.О. Шарикова2, О.А. Кананыхин2, Ю.В. Писаревский 3, И.Б. Сергеев 3
1 Военный учебно-научный центр Военно-воздушных сил «Военно-воздушная академия им. проф. Н.Е. Жуковского и Ю.А. Гагарина», 394064, Россия, г. Воронеж, ул. Старых Большевиков, д. 54а;
2 Научно-технологический центр уникального приборостроения РАН, 117342, Россия, г. Москва, ул. Бутлерова, д. 15;
3 НИЦ Курчатовский Институт, 119333, Россия, г. Москва, Ленинский проспект, д. 59
Аннотация
В статье представлен метод акустооптической мультиспектральной регистрации изображений, основанный на выборе наиболее информативных спектральных каналов и формировании многооконной функции пропускания акустооптического фильтра. Разработанный алгоритм позволяет выбрать сочетания спектральных каналов, которые обеспечивают высокий контраст для заданной совокупности объектов и фонов с известными спектрами. Метод апробирован экспериментально на примере контрастной визуализации 20 разных, но близких по цветовому тону пар объект-фон. Результаты эксперимента демонстрируют эффективность предложенного метода и алгоритма.
Ключевые слова: спектральная визуализация, гиперакустооптическое взаимодействие, многооконная фильтрация.
Цитирование: Шипко, В.В. Формирование контрастных полихроматических изображений заданных объектов на основе многооконной акустооптической фильтрации / В.В. Шипко, В.Э. Пожар, А. С. Мачихин, М.О. Шарикова, О.А. Кананыхин, Ю.В. Писаревский, И.Б. Сергеев // Компьютерная оптика. - 2024. - Т. 48, № 2. - С. 231-241. - DOI: I0.18287/2412-6179-C0-I320.
Citation: Shipko VV, Pozhar VE, Machikhin AS, Sharikova MO, Kananykhin OA, Pisarevsky YV, Sergeev IB. Formation of contrasting polychromatic object images based on multi-window acousto-optical filtering. Computer Optics 2024; 48(2): 231-241. DOI: 10.18287/2412-6179-C0-1320.
Введение
Развитие средств дистанционного зондирования характеризуется в настоящее время активным внедрением технологий гиперспектральной съемки. Современные гиперспектральные приборы позволяют получать изображения в сотнях узких полос ультрафиолетового, видимого и ближнего инфракрасного диапазонов спектра [1, 2] и могут устанавливаться как на спутниковые и самолетные платформы, так и на малогабаритные беспилотные летательные аппараты. Результаты гиперспектральной съемки используются для решения задач обнаружения объектов, в том числе малоразмерных, их идентификации и классификации, определения их состояния и т.п.
Стоит отметить, что при большом числе регистрируемых спектральных каналов гиперспектрального изображения необходимо иметь достаточные вычислительные ресурсы для оперативной автоматической бортовой обработки данных либо высокоскоростную линию передачи информации на наземные пункты обработки. Поэтому анализ в реальном масштабе времени гиперспектральных изображений с высоким пространственным и спектральным разрешением в настоящий момент представляется затруднительным. При этом наиболее ценная для различных прикладных задач информация сосредоточена, как правило, в
нескольких спектральных каналах [3 - 5], что дает возможность радикального сокращения массива регистрируемых гиперспектральных данных. Предварительный выбор наиболее информативных спектральных каналов позволяет снизить требования к вычислительным ресурсам и времени анализа, что особенно актуально при размещении гиперспектральной аппаратуры на малогабаритных беспилотных летательных аппаратах.
Одной из важных задач оперативного мониторинга является контрастная визуализация искомых объектов с целью их эффективного обнаружения и распознавания. Перспективными спектральными элементами для этого являются перестраиваемые аку-стооптические (АО) фильтры [6, 7], основанные на дифракции света на ультразвуковых волнах. Создаваемая акустической волной объемная решетка способна осуществлять селективную дифракцию света, что позволяет создавать на этой основе узкополосные фильтры, перестраиваемые по спектру путем изменения частоты ультразвука. Спектрометры на основе АО-фильтров могут использоваться для экспресс-анализа объектов во внелабораторных условиях. С учетом того, что такие спектрометры могут перестраиваться на любую длину волны без сканирования за одно и то же малое время, для них разрабатываются специальные методы анализа, основанные на измере-
нии спектров лишь на нескольких длинах волн, наиболее полно связанных с оптическими свойствами детектируемых объектов. Такой подход может быть назван выборочной спектральной регистрацией [8], основная идея которого описана в [9] и проанализирована в [10]. В [11] рассмотрена задача мониторинга с использованием многоканальных АО-фильтров и описана возможность контрастирования мультиспек-тральных снимков для целей мгновенного обнаружения объекта с известным спектром. Однако предложенный подход подразумевал управление всеми спектральными каналами АО-спектрометра, что технически сложно реализуемо. Поэтому более реальной является исходная постановка задачи [8] - оптимальный выбор небольшого числа каналов, достаточных для контрастного разделения искомых объектов и фона.
В [12] представлен и экспериментально апробирован метод выборочной спектральной регистрации изображений с использованием программно перестраиваемых АО-фильтров, а также обсуждались подходы получения изображения в одном или в трех спектральных каналах, которым соответствует максимальный контраст их спектральных характеристик, с построением полутонового или цветосинтезирован-ного изображения. В обоих случаях регистрируемые изображения могут формироваться в режиме видеопотока и подвергаться автоматическому анализу в реальном времени.
При необходимости обнаружить несколько объектов с разными спектральными характеристиками на некотором многообразии изменяющихся фонов такой подход, предполагающий для разных пар объект -фон выбор различных спектральных каналов, требует непрерывного быстрого спектрального переключения, что может быть затруднено или неприемлемо по критерию быстродействия и иным причинам. Для таких случаев было предложено использование многооконного режима АО-фильтрации, реализуемого путем многочастотного возбуждения ультразвука в АО-ячейке [12, 13]. Метода выбора общего набора длин волн для нескольких разных объектов до сих пор предложено не было. Поэтому актуальной остается разработка алгоритма выбора оптимальной совокупности спектральных каналов для решения задачи эффективного различения заданного множества объектов и фонов с известными спектральными признаками посредством мониторинга при помощи многооконного АО-фильтра и монохромного матричного фотоприемника.
В настоящей работе описан метод формирования мультиспектральных (полихроматических) изображений, предложены принципы выбора наиболее информативной комбинации спектральных каналов и алгоритм их выбора, приведены результаты эксперимента и численных исследований на примере пяти объектов с близкими спектральными характеристиками.
1. Техническая реализация
Обобщенный принцип работы системы, реализующей режим мультиспектральной регистрации изображений, представлен на рис. 1. Объектив 1 формирует световой пучок с интенсивностью излучения I (X), несущий изображение исследуемой сцены, представляющей собой объекты, расположенные на некотором фоне. Элементом, выделяющим требуемые спектральные компоненты, является двойной АО-фильтр 2, состоящий из двух идентичных и развёрнутых на 180° АО-ячеек 3 и 5, обеспечивающих фильтрацию света в широкоугольной геометрии [14]. АО-ячейки идентичны и развёрнуты на 180°, что обеспечивает компенсацию большинства пространственно-спектральных искажений и повышение спектральной селективности [15]. В работе использована схема [16] построения двойного АО-фильтра, в которой поляризационное разделение компонент входящего и выходящего светового пучка, необходимое для спектральной фильтрации, осуществляется на косой грани соответствующих АО-ячеек 3 и 5, а промежуточную селекцию дифрагированного в ячейке 3 излучения выполняет поляризатор 4. На выходе АО-фильтра прошедшее (отфильтрованное) излучение, имеющее спектр ^ (X), состоящий из нескольких спектральных компонент, фокусируется объективом 6 на матричном фотоприемнике 7, где и формируется мультиспектральное изображение.
6 7
\1А*)(
1(Л)
13
10 11 12
ДАН
Л Л\ X} X ^ ^ Я
Рис. 1. Схема системы мультиспектральной регистрации на основе многооконного АО-фильтра
Выделяемый дискретный спектр определяется совокупностью ультразвуковых частот, подаваемых на АО-ячейки, в которых формируются объемные фазовые дифракционные решетки с требуемыми пространственными периодами. Высокое качество формируемых акустических пучков (отсутствие нелинейных искажений, отраженных волн в рабочей области и т. п.) обеспечивает отсутствие паразитных изображений. Функцию формирования акустического поля выполняет блок управления 8, в котором по командам контроллера 12 формируются требуемые частотные сигналы высокочастотного (ВЧ) генератора 11, которые проходят через усилитель 10, разветвляются в ВЧ-сплиттере 9 и направляются на АО-ячейки 3 и 5. Изображения с фотоприемной матрицы 7 поступают
в компьютер 13, где обрабатываются и анализируются с помощью специализированного программного обеспечения, которое, в частности, позволяет определить наиболее информативные длины волн для выбранных классов объектов и фонов в соответствии с представленным ниже алгоритмом.
2. Принципы выбора наиболее информативной комбинации спектральных каналов
На фотоприемнике формируется изображение L (x, y), где x, y - индексы строк и столбцов изображения. Будем считать, что оно содержит объекты (a) и фоны (b) из ограниченного списка веществ с известными спектрами Ia(x,y), Ib(x,y), где a = 1,...,A, b = 1,., B. Это и дальнейшие введенные предположения обсуждаются в заключении. Будем также для простоты считать каждый объект спектрально однородным и однородно освещенным, т. е. Ia (x, y) = Ia при x,yea, Ib(x,y) = Ib при x,yeb. Спектральный прибор способен формировать изображение на отдельных длинах волн Ia = Ia (Xn) (n = 1,., N - номер спектрального канала) или на их совокупности (в многоволновом режиме).
Решение задачи выбора наиболее информативной (оптимальной) комбинации требует введения некоторого критерия качества различения. За параметр, дающий возможность различить два граничащих между собой элемента изображения на отдельной длине волны X, примем величину различия их сигналов
ALab = \La -Lb|.
(1)
Сигнал, регистрируемый на каждой длине волны, определяется интенсивностью входного светового потока I (X), функцией пропускания прибора Т (X, Хп) при настройке его на длину волны Хп и чувствительностью фотоприемника % (X)
L(Xn) = Ji (X)T (X, Xn MX) dX.
(2)
Если считать для простоты чувствительность фотоприемника постоянной (%„ = const ), коэффициенты передачи каналов одинаковыми и максимальными, а полосы пропускания достаточно узкими по сравнению с масштабом спектральной неоднородности, то есть T (X, Xn) ~ 5 (X - Xn), то сигнал пропорционален величине спектральной плотности энергетической яркости (СПЭЯ): L (Xn) ~I(Xn). В этом приближении различие двух элементов сцены на определенной длине волны будет характеризоваться разностью их СПЭЯ:
L = ILan -Lbn| ~ |la (Xn)-Ib (Xn)|.
(3)
При многооконном методе, использующем АО-фильтры с несколькими (В) спектральными окнами, парциальные световые потоки складываются так, что регистрируется сигнал
Lc( d) = £i (X * )T (X ^ MX *),
(4)
где суммирование идет по длинам волн ХйсеХп (с = 1,..., СВ, й = 1,...,В), соответствующим конкретной выбранной комбинации с ={йс} из общего числа сочетаний
C = CD =
^D — ^N —
N!
D!(N -D)!
Поэтому в предположении х„ = const различие двух элементов сцены на выбранной комбинации длин волн будет описываться разностью их суммарной яркости на выбранных длинах волн, которая характеризует контраст пары объект - фон
D) = 1 L"c( D ) — Lb
D)
(5)
Перебор всех сочетаний, включая те, где число возбуждаемых в АО-фильтре каналов меньше максимально достижимого В < Втах, позволяет выбрать оптимальную комбинацию с, обеспечивающую максимальную различимость заданной пары объект - фон.
В такой постановке задача выбора оптимальной совокупности рабочих длин волн для обнаружения конкретного вида объектов на конкретном фоне решается тривиально. В реальности, как правило, необходимо обнаруживать множество объектов {а} на некоторой совокупности различных фонов {Ь}, что существенно усложняет задачу. В общем случае число рабочих каналов может быть меньше, чем число встречающихся объектов и фонов В <А+В. В этом случае решение может быть либо в быстром переключении прибора по совокупности наиболее информативных каналов, либо в выборе небольшого числа каналов, оптимальных именно для этой конкретной задачи. Ниже рассмотрен второй подход, который предполагает, что регистрирующая система непрерывно работает в многооконном режиме. Таким образом, спектрометр с АО-фильтром должен непрерывно работать на выбранной комбинации длин волн с и при этом быть способен различать несколько типов объектов на разных фонах. В таком случае параметр, характеризующий степень различия, должен включать в себя все комбинации пар объект - фон. В итоге в качестве максимизируемого параметра можно принять нормированный средний контраст
McD ="
1
ABD2k
ъ
ю
Ъ (La (D) Lc(D)
(6)
где осуществлена нормировка на общее число суммируемых комбинаций объект - фон (А*В), число спектральных каналов (В) и разрядность представления величин СПЭЯ (0 < Ь < 2к-1), а также введены весовые коэффициенты юаЬ, позволяющие учесть значимость распознавания каждой пары объект - фон.
dc =1
При таком определении контраст может варьироваться от 0 (идентичные спектральные образы) до 1 (яркий белый объект на черном фоне).
3. Выбор оптимальной комбинации спектральных каналов
Для выбора наиболее информативной комбинации спектральных каналов в многооконном режиме работы АО-фильтра необходима априорная информация о спектральных характеристиках искомых объектов и фонов, на которых они наблюдаются. В этом качестве могут быть использованы спектры излучения, приходящего от объектов и фонов, выражаемые в единицах СПЭЯ. Чтобы разработать алгоритм, будем считать для определенности условия освещения детерминированными и стационарными.
Алгоритм выбора наиболее информативных спектральных каналов для гиперспектрометров на основе АО-фильтров в режиме многооконной регистрации А объектов на В фонах состоит из следующих шагов.
Шаг 1. Определение множества объектов и фонов с известными спектрами{Ь"п} и {%п} и введение весовых коэффициентов, характеризующих степень значимости распознавания каждой пары объект - фон и влияющих на выбор спектральных точек.
Шаг 2. Задание числа рабочих окон Б в пределах максимального числа одновременно возбуждаемых ультразвуковых волн в АО-ячейке Б < Бтах.
Шаг 3. Вычисление для всех комбинаций длин волн c = 1,..., СБ различий их сигналов =| %асБ - %Б | для каждой пары объект - фон и расчет средневзвешенной по всем парам величины контраста яркости ALcБ.
Шаг 4. Повторение шага 3 с другим числом рабочих каналов в пределах 1 < Б < Бтах.
Шаг 5. Определение оптимального числа Б и комбинации C спектральных каналов
{с, Б) = а^ тах [ АК^ ].
(7)
Шаг 6. Вычисление с использованием перестроечной характеристики АО-фильтра управляющих частот / =/(Ха), соответствующих найденной оптимальной комбинации спектральных каналов C, которые необходимо подать на вход фильтра для формирования требуемой многооконной функции пропускания.
4. Экспериментальные исследования
Для иллюстрации метода были проведены экспериментальные исследования с установкой на основе АО-видеоспектрометра (рис. 2).
В ее состав входят осветитель 2 в виде галогеновой лампы, обеспечивающей освещенность тестового участка на уровне примерно 11000 лк, предметный столик 1, на котором размещаются фоновое покрытие и объект, и спектральная регистрирующая система 3, содержащая монохромную видеокамеру и много-
оконный АО-фильтр, перестраиваемый в диапазоне 450 - 850 нм, а также компьютер 4 со специализированным программным обеспечением.
Рис. 2. Внешний вид эскпериментальной установки: 1 - предметный столик, 2 - галогеновая лампа, 3 - АО-гиперспектрометр, 4 - компьютер
Форма функции пропускания Т (X) используемого АО-фильтра может иметь существенно разный вид в зависимости от расстояния между спектральными каналами (рис. 3). Если интервал существенно превышает ширину окна пропускания АО-фильтра, функция пропускания содержит ряд отдельных окон, а при сближении на расстояние, сравнимое с полосой пропускания АО-фильтра 8Х, отдельные окна сливаются в единую полосу. Последний режим не используется в рассматриваемой задаче. Представленные на рис. 3 кривые были измерены с помощью дифракционного спектрометра высокого спектрального разрешения.
Вместе с изменением характеристик спектральной селективности многоканального АО-фильтра может меняться и соотношение коэффициентов пропускания в максимуме каждого канала. Это может происходить не только вследствие взаимовлияния каналов при их сближении, но и за счет регулировки мощности Р возбуждаемых на соответствующей частоте /а =/(Х0) ультразвуковых волн Та ~ Р (/а).
Для тестирования предложенного метода была сформулирована модельная задача различения между собой пяти разных типов объектов естественного (листва) и искусственного (бумага, ткань, пластик, металл) происхождения. Образцы были вырезаны из массива основного материала в виде четырехугольника площадью около 4 см2 (рис. 4). Как видно, все образцы имеют разные оттенки зеленого цвета, а их спектры яркости %ап довольно близки, но не идентичны. Это дает возможность для определения комбинации спектральных каналов, позволяющей получить полихроматические изображения, контрастно разделяющие все
эти объекты друг относительно друга. При этом для обнаружения не имеет принципиального значения, отображается ли объект светлее или темнее фона, важна лишь абсолютная величина контраста.
Г(Л)
о 0.6 0.4 0.2 0
11 нм
450 500 550
в;
600 650 700 Л, нм
750 800 850
Рис. 3. Форма функции пропускания T(X) многооконного
(Dmax = 4) АО-фильтра c эквидистантными по акустической частоте окнами при: а) Af= 10 МГц; б) Af = 1 МГц; в) Af = 0,5 МГц. Ширина окна АО-фильтра Sf= 0,5 МГц
В эксперименте каждый из пяти образцов располагался на фоне четырех других материалов, что позволило получить 20 изображений разных пар объект-фон. Изображения регистрировались тремя различными способами для дальнейшего сравнения.
1. В многоволновом (полихроматическом) режиме АО-регистрации на одинаковых для всех пар длинах волн, выбранных по разработанному алгоритму. При этом все весовые коэффициенты roab = const, что соответствует равной значимости всех сочетаний объект - фон.
2. В монохромном (одноволновом) режиме АО-регистрации на наиболее информативной для данной пары объект - фон длине волны, выбираемой в соответствии с выражением [11]
(n )ab = arg max \_ALanb ].
(8)
3. В панхроматическом режиме путем усреднения изображений по всем N точкам рабочего спектрального диапазона Хп = 450 - 850 нм
Tab = Tab
Pan n ^ '
(9)
•".•О :
_1
иишнй
о|
f гШ
Рис. 4. Тестовые объекты: КОВ-изображения (а) и спектры (б), полученные при рабочем освещении: 1 - бумага, 2 - лист растения, 3 - металл, 4 - пластик, 5 - ткань
В ходе поиска оптимального сочетания спектральных каналов для многооконного режима АО-фильтрации находились сочетания для разного числа каналов: от одного до четырех (рис. 5). В соответствии с выражением (7) наиболее информативной комбинацией будет четырехканальное сочетание на длинах волнХс- = 510, 515, 530, 535 нм, обеспечивающее максимальный средний контраст всех пар объект - фон (ДЬ.В = 0,374).
Сформированные различными способами изображения каждой пары объект-фон представлены в табл. 1 - 5. Из них видно, что выбранная четырехвол-новая комбинация обеспечивает более яркое и контрастное изображение пар объект - фон, чем панхроматическое, построенное по всем длинам волн рабочего диапазона АО-гиперспектрометра. Разумеется, это изображение уступает наиболее контрастному изображению на одной длине волны. Из пяти выбранных материалов лучше других в четырехволно-вом режиме регистрации выделяются листья и металл, а бумага, пластик и ткань имеют относительно больше сходства. При необходимости можно повысить их различимость путем введения соответствующих весовых коэффициентов.
в) С г) _
Рис. 5. Выбор комбинации длин волн Хс, обеспечивающей наибольший средний контраст ALc Б, при разном числе
спектральных окон Б и соответствующем числе сочетаний Св: а) Б = 1, С1 = 47, Х1 = 515 нм, АТ-С 1 = 0,341; б) Б = 2,
С2 = 1081, Х1 = 515 нм, Х2 = 530 нм, АТ£Л = 0,327; в) Б = 3, Сз = 16215, Х1 = 515 нм, Х2 = 530 нм, Хз = 510 нм, АТу = 0,352 ,
г) Б = 4; С4 = 178365; Х1 = 515 нм; Х2 = 530 нм; Х3 = 510 нм; Х4 = 535 нм; АТ£а = 0,374
Табл. 1. Изображения 1-го объекта на фоне остальных для разных способов формирования
Способ получения изображений
1) полихроматическое
2) оптимальное монохроматическое
3) панхроматическое
Численные значения величины контраста для разных режимов регистрации приведены на рис. 6, где номера кривых соответствуют следующим величинам относительного контраста: 1 - АГа* ; 2 - А%а42; 3 -А%ЬЪ; 4 - А%а44; 5 - АТрп ; 6 - АТП'. Самые высокие
значения контраста, очевидно, достигаются в монохроматическом (одноволновом) режиме (кривая 6 на рис. 6) на оптимальной длине волны (8). Для каждой пары объект - фон эта длина волны ((П) индивидуальна, а потому для быстроменяющихся нестацио-
нарных условий измерения режим с переключениями ненадежен. Одноволновый режим с регистрацией на одной и той же длине волны Х1 = 515 нм (кривая 1 на рис. 6), хотя и уступает по контрасту режиму с переключением, но для многих пар объект - фон совсем незначительно (см, например, листва на фоне бумаги и др. - рис. 6б). В то же время для некоторых пар (например, пластик на бумаге - рис. 6а) контраст мо-Табл. 2. Изображения 2-го объекта на фоне
Способ получения изображений
жет даже немного уступать панхроматическому изображению (кривая 5 на рис. 6). В целом панхроматическое изображение, получающееся в результате сканирования и усреднения по всему спектральному диапазону, дает самый низкий контраст, так как информативные точки входят на равных с малоинформативными, что с учетом сходной окраски образцов ведет к минимальным цветовым отличиям. остальных для разных способов формирования
Табл. 3. Изображения 3-го объекта на фоне остальных для разных способов формирования
Способ получения изображений
1) полихроматическое
2) оптимальное монохроматическое
3) панхроматическое
Табл. 4. Изображения 4-го объекта на фоне остальных для разных способов формирования
Способ получения изображений
1) полихроматическое
2) оптимальное монохроматическое
3) панхроматическое
Табл. 5. Изображения 5-го объекта на фоне остальных для разных способов формирования
Способ получения изображений
1) полихроматическое
2) оптимальное монохроматическое
3) панхроматическое
Величина контраста при многооконных (многоволновых) режимах регистрации, представленных кривыми 2 - 4 (рис. 6) и соответствующих двум, трем и четырем длинам волн, выбранным по разработанному алгоритму и приведенным в подписи к рис. 5б -г, ведет себя предсказуемым образом. В целом, с ро-
стом числа рабочих длин волн величина контраста растет, так что четырехволновый режим наиболее эффективен (рис. 6а, в, д). В то же время встречаются комбинации, для которых такой режим уступает трех-, двух- и даже одноволновому режимам (см. пару пластик - листва - рис. 6г).
1 ~ \ * 1 1
С • * • . •" ■/к- е-е 1 -
Е>Н 2
Д-Д 3
О-О -Х-Х 4 5
.....-х--... 1 ------- 6м 1
АЬ"
0.8
0.6
0.4
1 1 е-е 1 1
Е>Н 2
- Д-Д з -
о-о 4
-х-х 5
б
-А
1 | |
г) Ь ' д) Ъ
Рис. 6. Величины контраста пар объект - фон (аЬ), рассчитанных для разных методов формирования спектральных изображений: одно-, двух-, трех-, и четырехволнового (кривые 1 - 4), панхроматического (кривая 5) и оптимального монохроматического (кривая 6): а) а = 1; б) а = 2; в) а = 3; г) а = 4; д) а = 5
Еще раз отметим, что эти многоволновые режимы не подразумевают переключения АО-фильтра в ходе регистрации, а потому пригодны для распознавания по спектру в режиме быстрых изменений сцены или движения рабочей платформы.
Заключение
Таким образом, результаты тестирования предложенного метода мультиспектральной регистрации объектов с использованием АО-системы, реализующей многооконный режим фильтрации, подтверждают возможность получения контрастных изображений совокупности разнотипных объектов на разнородных фонах. Также стоит отметить, что сформированные полихроматические изображения во многих случаях почти не уступают по контрасту изображениям, полученным путем монохромной спектральной регистрации, выполняемой для каждой пары объект - фон на отдельной оптимальной длине волны. Основным свойством этого метода является фиксация набора рабочих длин волн, который обеспечивает достаточно высокий контраст для всего множества объектов и фонов, что позволяет вести наблюдения без спектральной перестройки, то есть в непрерывном режиме. При этом возможно быстрое переключение на другие сочетания длин волн, обеспечивающие более высокий контраст для конкретных объектов и фонов. Для этого в разработанном алгоритме выбора оптимального сочетания длин волн (6) предусмотрено использование весовых коэффициентов юаЬ, которые в зависимости от поставленной задачи повышают значимость распознавания конкретных объектов на конкретном фоне. В соответствии с назначением регистрирующей мультиспектральной системы могут быть заранее сформированы рабочие наборы длин волн для разных задач, которые используются в подходящих
условиях. Аналогичным образом может решаться проблема изменения условий освещения сцены: для ряда типичных спектров подсветки на основе разработанного алгоритма могут быть сформированы наборы оптимальных рабочих длин волн и переключение может осуществляться по определенному закону (например, по времени суток), по независимо получаемым данным (например, метеоусловия), по информации, получаемой в ходе экспресс-анализа регистрируемой мультиспек-тральной информации. В общем случае регистрируемые изображения могут формироваться в режиме видеопотока и подвергаться автоматической обработке в режиме реального времени.
Еще одной опцией оптимального управления многооконным АО-видеоспектрометром является возможность варьировать коэффициент пропускания АО-фильтра на разных длинах волн, то есть создавать профилированную по амплитуде комбинацию спектральных окон. Это позволит дополнительно оптимизировать контраст, что особенно важно для условий освещения с сильным перепадом спектральной яркости.
Дальнейшие исследования планируется направить на проверку устойчивости выбираемых рабочих длин волн к вариациям спектра и яркости освещения, а также на методы адаптации регистрирующей АО-спектральной видеосистемы к изменяющимся условиям.
Благодарности
Работа выполнена при поддержке Российского научного фонда (проект 19-19-00606-П). Кристаллы, использованные при изготовлении акустооптического видеоспектрометра, подготовлены в рамках Государственного задания НИЦ Курчатовского Института.
References
[1] Vinogradov AN, Egorov VV, Kalinin AP, Rodionov AI, Rodionov ID. Line of aviation ultraviolet, visible and near-infrared hyperspectrometers [In Russian]. Opt J 2016; 88(4): 54-62.
[2] Epikhin VM, Kiyachenko YF, Mazur MM, Mazur LI, Paltcev LL, Suddenok YA, Shorin VN. Optical imaging spectrometers of the visible and near-infrared ranges [In Russian]. Physical bases of instrumentation 2013; 4(9): 116-125.
[3] Borzov SM, Potaturkin OI. Selection of the informative feature system for crops classification using hyperspectral data. Optoelectronics, Instrumentation and Data Processing 2020; 56(4): 431-439. DOI: 10.3103/S8756699020040032.
[4] Maltsev GN, Kozinov IA. Optimization of the number of spectral channels in the problems of processing and analysis of hyperspectral remote sensing data of the world ocean [In Russian]. Fundamental and Applied Hydrophysics 2015; 8(4): 92-100.
[5] Schowengerdt RA. Remote sensing. Models and methods of image processing [In Russian]. Moscow: Technosphere; 2010.
[6] Molchanov VY, Kitaev YI, Kolesnikov AI, etc. Theory and practice of modern acousto-optics [In Russian]. Moscow: MISIS; 2015. ISBN 978-5-87623-483-4.
[7] Balakshiy VI, Parygin VN, Chirkov LE. Physical foundations of acousto-optics [In Russian]. Moscow: Radio and communications; 1985.
[8] Kozinov IA, Maltsev GN. Development and processing of hyperspectral images in optical-electronic remote sensing systems. Opt Spectrosc 2016; 121(6): 934-946 DOI: 10.1134/S0030400X16120158.
[9] Pozhar VE, Pustovoit VI. On the optimal algorithm for spectral chemical analysis using acousto-optical spectrometers [In Russian]. Electromagnetic Waves and Electronic Systems 1997; 2(4): 26-30.
[10] Mazur MM, Pustovoit VI, Suddenok YA, Shorin VN. Acousto-optic monochromator with controlled width of the instrumental function [In Russian]. Physical bases of instrumentation 2018; 2(28): 20-37. DOI: 10.25210/jfop-1802-020037.
[11] Pozhar VE, Velikovsky DY. Spectral recognition of objects using multi-window acousto-optical filters. Opt Spectrosc 2020; 128(7): 1041-1047. DOI: 10.21883/0S.2020.07.49578.107-20.
[12] Shipko VV, Samoilin EA, Pozhar VE, Machikhin AS. Formation of contrast images of specified objects by acousto-optic hyperspectrometer by selective spectral registration. Opt Spectrosc 2022; 10: 1343. DOI: 10.21883/OS.2022.10.53633.3873-22.
[13] Gupta N, Suhre D. Notch filtering using a multiple passband AOTF in the SWIR region. Applied Optics 2016; 55(28): 7855-7860. DOI: 10.1364/AO.55.007855.
[14] Bogomolov DV, Voloshinov VB. Analysis of quality of images obtained by acousto-optic filtering. Proc SPIE 2004; 5828: 105-116. DOI: 10.1117/12.612763.
[15] Mazur MM, Suddenok YA, Shorin VN. Double acousto-optic monochromator of images with tunable width of the transmission function. Technical physics letters 2015; 40(2): 167-169. DOI: 10.1134/S1063785014020254.
[16] Mazur MM, Mazur LI, Pustovoit VI, Suddenok YA, Shorin VN. High-transmission two-crystal acousto-optic monochromator. Technical Physics 2017; 62(9): 14071410. DOI: 10.1134/S1063784217090183.
Сведения об авторах
Шипко Владимир Вацлавович, 1986 года рождения, в 2008 году окончил Военно-воздушную инженерную академию им. проф. Н.Е. Жуковского (г. Москва). Кандидат технических наук, докторант Военного учебно-научного центра Военно-воздушных сил «Военно-воздушная академия им. проф. Н.Е. Жуковского и Ю.А. Гагарина» (г. Воронеж), старший научный сотрудник НТЦ УП РАН. Область научных интересов: дистанционное зондирование, видеоспектрометрия, обработка изображений, акустооптическая спектрометрия. E-mail: shipko.v@bk.ru
Пожар Витольд Эдуардович, 1958 года рождения, выпускник МФТИ 1981 г. Д.ф.-м.н. Руководитель отдела акустооптических информационных систем НТЦ УП РАН, профессор МГТУ им. Н.Э. Баумана и НИЯУ «МИФИ». Область научных интересов: акустооптика, спектрометрия, дифференциальная, модуляционная, адаптивная спектроскопия, гиперспектрометрия, дистанционное зондирование, спектральное приборостроение. E-mail: vitold@ntcup.ru
Мачихин Александр Сергеевич, 1984 года рождения. Окончил МГТУ им. Н.Э. Баумана. Д.т.н. Заведующий лабораторией акустооптической спектроскопии НТЦ УП РАН. Область научных интересов: видеоспектрометрия, обработка изображений, биофотоника, акустооптическая спектроскопия, оптико-электронное приборостроение. E-mail: machikhin@ntcup.ru
Шарикова Милана Олеговна, 1997 года рождения. Окончила МГТУ им. Н.Э. Баумана в 2021 году. Аспирант и младший научный сотрудник лаборатории акустооптической спектроскопии НТЦ УП РАН. Область научных интересов: акустооптика, видеоспектрометрия, оптическое приборостроение. E-mail: sharikova.mo@ntcup.ru
Кананыхин Олег Алексеевич, 1998 года рождения. Окончил МГТУ им. Н.Э. Баумана. Работает инженером-исследователем в лаборатории акустооптической спектроскопии НТЦ УП РАН. Область научных интересов: акстооптика, оптико-электронное приборостроение, компьютерная оптика.
E-mail: kananykhin. oa@ntcup. ru
Писаревский Юрий Владимирович, 1940 года рождения. Окончил МЭИ в 1963 г. Д.ф.-м.н. Главный научный сотрудник лаборатории ростовых технологий, синтеза и выращивания кристаллов НИЦ Курчатовского Института. Область научных интересов: диэлектрические, упруго-фотоупругие и пьезоэлектрические свойства материалов, а также изучение процессов кристаллизации неорганических материалов и белков. E-mail: yupisarev@yandex.ru
Сергеев Илья Борисович, 1962 года рождения. Окончил МИФИ. Ведущий инжен НИЦ Курчатовского Института. Область научных интересов: кристаллография, дефектоскопия, неразрушающий контроль. E-mail:
ili_co@mail.ru
ГРНТИ: 29.31.29
Поступила в редакцию 19 апреля 2023 г. Окончательный вариант - 14 августа 2023 г.
Formation of contrasting polychromatic object images based on multi-window acousto-optical filtering
V.V. Shipko 12, V.E. Pozhar2, A.S. Machikhin2, M.O. Sharikova2, O.A. Kananykhin 2 Y.V. Pisarevsky 3,1.B. Sergeev 3 1 Military Educational and Scientific Center of the Air Force "Air Force Academy named after prof. N.E. Zhukovsky and Yu.A. Gagarin", 394064, Voronezh, Russia, st. Old Bolsheviks 54a;
2 Scientific and Technological Center of Unique Instrumentation RAS, 117342, Moscow, Russia, Butlerova st. 15;
3NRC Kurchatov Institute, 119333, Moscow, Russia, Leninsky av. 59
Abstract
The article presents a technique for acousto-optical multispectral imaging based on choosing the most informative spectral channels and the formation of a multi-window transmission function of an acousto-optical tunable filter. The developed algorithm allows one to select combinations of spectral channels that provide high contrast for a given set of objects and backgrounds with known spectra. The method is tested on the contrast visualization of 20 different object-background pairs with a similar color tone. The results of the experiment demonstrate the effectiveness of the proposed method and algorithm.
Keywords: multi-spectral imaging, contrast enhancement, visualization, acousto-optical tunable filter, multi-window filtration.
Citation: Shipko VV, Pozhar VE, Machikhin AS, Sharikova MO, Kananykhin OA, Pisarevsky YV, Sergeev IB. Formation of contrasting polychromatic object images based on multi-window acousto-optical filtering. Computer Optics 2024; 48(2): 231-241. DOI: 10.18287/2412-6179-CO-1320.
Acknowledgements: This work was financially supported by the Russian Science Foundation under project 19-19-00606-n. The crystals used in the manufacture of an acousto-optical video spectrometer were prepared within the framework of the State Assignment of the NRC Kurchatov Institute.
Authors' information
Vladimir Vatslavovich Shipko (b. 1986), graduated from the Air Force Engineering Academy named after prof. N.E. Zhukovsky (Moscow) in 2008. Candidate of Technical Sciences, doctoral student of the Military Training and Scientific Center of the Air Force "Air Force Academy named after prof. N.E. Zhukovsky and Yu.A. Gagarin" (Voronezh), senior researcher at the Scientific and Technological Center of Unique Instrumentation of the Russian Academy of Sciences. Research interests: remote sensing, video spectrometry, image processing, acousto-optical spectrometry. E-mail: shipko.v@bk.ru
Vitold Eduardovich Pozhar (b. 1958) graduated from the Moscow Institute of Physics and Technology in 1981, head of Acousto-Optical Information Systems department in Scientific and Technological Center of Unique Instrumentation of the Russian Academy of Sciences, professor of BMSTU and NRNU «MEPhI». Research interests: acousto-optics, spectrometry, differential, modulation, adaptive spectroscopy, hyperspectral imaging, remote sensing, spectral instrumentation. E-mail: vitold@ntcup.ru
Alexander Sergeevich Machikhin (b. 1984), studied in Bauman Moscow State Technical University. Doctor of Technical Sciences. Works as a head of Acousto-Optic Spectroscopy Lab in Scientific and Technological Center of Unique Instrumentation of the Russian Academy of Sciences. Research interests: hyperspectral imaging, image processing, biophotonics, acousto-optic spectroscopy. E-mail: machikhin@ntcup.ru
Milana Olegovna Sharikova (b. 1997), graduated from Bauman Moscow State Technical University in 2021. Postgraduate student and junior researcher of Acousto-Optical Spectroscopy laboratory in Scientific and Technological Center of Unique Instrumentation of the Russian Academy of Sciences. Research interests: acousto-optics, hyperspectral imaging, optical instrumentation. E-mail: sharikova.mo@ntcup.ru
Oleg Alekseevich Kananykhin (b. 1998), studied in Bauman Moscow State Technical University. Works as a research engineer at Acousto-Optic Spectroscopy Lab in Scientific and Technological Center of Unique Instrumentation
of the Russian Academy of Sciences. Research interests: acousto-optics, optoelectronic instrumentation, computer optics. E-mail: kananykhin. oa@ntcup.ru
Yuri Vladimirovich Pisarevsky (b. 1940), graduated from National Research University "Moscow Power Engineering Institute" in 1963. Doctor of Physical and Mathematical Sciences. Chief Researcher of the Laboratory of Growth Technologies, Synthesis and Growth of Crystals of the NRC Kurchatov Institute. Research interests: dielectric, elastic-photoelastic and piezoelectric properties of materials, the study of crystallization processes of inorganic materials and proteins. E-mail: yupisarev@yandex.ru
Ilya Borisovich Sergeev (b. 1962), studied in Moscow Engineering Physics Institute. Leading engineer of the NRC Kurchatov Institute. Research interests: crystallography, flaw detection, non-destructive testing. E-mail: ili_co@mail.ru
Received April 19, 2023. The final version - August 14, 2023.
