Научная статья на тему 'ОПТИМИЗАЦИЯ ТЕХНОЛОГИЧЕСКОЙ КАРТЫ ДОПУСТИМЫХ СИСТЕМОТЕХНИЧЕСКИХ РЕШЕНИЙ ЗАДАЧИ ВИДЕОАНАЛИТИКИ АКВАКУЛЬТУРЫ'

ОПТИМИЗАЦИЯ ТЕХНОЛОГИЧЕСКОЙ КАРТЫ ДОПУСТИМЫХ СИСТЕМОТЕХНИЧЕСКИХ РЕШЕНИЙ ЗАДАЧИ ВИДЕОАНАЛИТИКИ АКВАКУЛЬТУРЫ Текст научной статьи по специальности «Медицинские технологии»

CC BY
0
0
i Надоели баннеры? Вы всегда можете отключить рекламу.
Ключевые слова
системный анализ / многокритериальное оценивание / техническое зрение / видеоаналитика / технологии искусственного интеллекта / робототехника / искусственные нейронные сети / systems analysis / multi-criteria assessment / technical vision / video analytics / artificial intelligence technologies / robotics / artificial neural networks

Аннотация научной статьи по медицинским технологиям, автор научной работы — Ронжин Андрей Леонидович, Ле Ван Нгиа, Шувалов Никита

Системно рассмотрена задача видеоаналитики гидробионтов в рыбоводных индустриальных комплексах. Предложена концептуальная модель задачи видеоаналитики, предложена соответствующая математическая формулировка задачи с поиском подмножества допустимых вариантов технологической карты, которая сводится к поиску вариантов, удовлетворяющих функциональным критериям. Окончательное решение о структуре и функциях программно-аппаратного обеспечения видеоаналитики принимается с учетом стоимостных затрат всего жизненного цикла оборудования. Подчеркивается важность автоматизации и интеллектуализации технологических процессов сельского хозяйства, наиболее актуальных современных задач, которым посвящены исследования передовых отечественных коллективов. Обсуждаются первичные данные для разработки и внедрения системы видеоаналитики при решении задачи подсчета рыбы, ее массы при пересадках, отгрузке, приеме в цех переработки, полученные в рамках сотрудничества с компанией «Остров», специализирующейся на выращивании форели и уделяющей серьезное внимание внедрению современных технологий автоматизации и искусственного интеллекта в технологические процессы индустриальной аквакультуры. Проведены натурные эксперименты и собраны корпуса изображений рыб в прозрачной узкой трубе, направляемой потоком воды, и на воздухе при движении на конвейере. Дальнейшие исследования будут направлены на разработку модельно-алгоритмического и программного обеспечения, необходимого для апробации предложенных математических моделей и оптимизации вариантов технологической карты функционирования системы видеоаналитики.

i Надоели баннеры? Вы всегда можете отключить рекламу.

Похожие темы научных работ по медицинским технологиям , автор научной работы — Ронжин Андрей Леонидович, Ле Ван Нгиа, Шувалов Никита

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.
i Надоели баннеры? Вы всегда можете отключить рекламу.

OPTIMIZATION OF TECHNOLOGICAL MAP OF ACCEPTABLE SYSTEM ENGINEERING SOLUTIONS FOR AQUACULTURE VIDEO ANALYTICS

The paper considers the problem of video analytics of aquatic organisms in fish farming industrial complexes. It proposes a conceptual model of the video analytics problem, and a corresponding mathematical formulation of the problem with the search for a subset of acceptable options for the technological map, which boils down to the search for options that satisfy functional criteria. The final decision on the structure and functions of video analytics hardware and software takes into account the cost of the entire life cycle of the equipment. The study emphasizes the importance of automation and intellectualization of technological processes in agriculture, the most pressing modern problems, which are the main focus of the research of advanced teams. The paper discusses primary data for the development and implementation of a video analytics system when solving the problem of counting fish and their mass during transplantation, shipment, and reception into the processing shop. The data were obtained in the framework of cooperation with the Ostrov company, specializing in trout cultivation and paying serious attention to the implementation of modern means of automatization and artificial intelligence in technological processes of industrial aquaculture. Fullscale experiments were carried out and images of fishes were collected in a transparent narrow pipe directed by a stream of water, and in air while moving on a conveyor belt. Further research will be aimed at developing model-algorithmic and software necessary for testing the proposed mathematical models and optimizing options for the techno-logical map of video analytics system.

Текст научной работы на тему «ОПТИМИЗАЦИЯ ТЕХНОЛОГИЧЕСКОЙ КАРТЫ ДОПУСТИМЫХ СИСТЕМОТЕХНИЧЕСКИХ РЕШЕНИЙ ЗАДАЧИ ВИДЕОАНАЛИТИКИ АКВАКУЛЬТУРЫ»

УДК 639.3

DOI: 10.14529/mmph240205

ОПТИМИЗАЦИЯ ТЕХНОЛОГИЧЕСКОЙ КАРТЫ ДОПУСТИМЫХ СИСТЕМОТЕХНИЧЕСКИХ РЕШЕНИЙ ЗАДАЧИ ВИДЕОАНАЛИТИКИ АКВАКУЛЬТУРЫ

А.Л. Ронжин, В.Н. Ле, Н. Шувалов

Санкт-Петербургский Федеральный исследовательский центр Российской академии наук, г. Санкт-Петербург, Российская Федерация E-mail: ronzhin@iias.spb.su

Аннотация. Системно рассмотрена задача видеоаналитики гидробио-нтов в рыбоводных индустриальных комплексах. Предложена концептуальная модель задачи видеоаналитики, предложена соответствующая математическая формулировка задачи с поиском подмножества допустимых вариантов технологической карты, которая сводится к поиску вариантов, удовлетворяющих функциональным критериям. Окончательное решение о структуре и функциях программно-аппаратного обеспечения видеоаналитики принимается с учетом стоимостных затрат всего жизненного цикла оборудования. Подчеркивается важность автоматизации и интеллектуализации технологических процессов сельского хозяйства, наиболее актуальных современных задач, которым посвящены исследования передовых отечественных коллективов. Обсуждаются первичные данные для разработки и внедрения системы видеоаналитики при решении задачи подсчета рыбы, ее массы при пересадках, отгрузке, приеме в цех переработки, полученные в рамках сотрудничества с компанией «Остров», специализирующейся на выращивании форели и уделяющей серьезное внимание внедрению современных технологий автоматизации и искусственного интеллекта в технологические процессы индустриальной аквакультуры. Проведены натурные эксперименты и собраны корпуса изображений рыб в прозрачной узкой трубе, направляемой потоком воды, и на воздухе при движении на конвейере. Дальнейшие исследования будут направлены на разработку модельно-алгоритмического и программного обеспечения, необходимого для апробации предложенных математических моделей и оптимизации вариантов технологической карты функционирования системы видеоаналитики.

Ключевые слова: системный анализ; многокритериальное оценивание; техническое зрение; видеоаналитика; технологии искусственного интеллекта; робототехника; искусственные нейронные сети.

1. Постановка задачи

Целью данного исследования являлась формализация технологического процесса - видеомониторинга гидробионтов в рыбоводных индустриальных комплексах - на основе анализа специфики и ограничений водной среды, применимых сенсорных устройств, характера задачи, объема водных емкостей, числа содержащихся гидробионтов и других факторов, влияющих на точность, скорость и стоимость получения результатов видеоаналитики. Современные работы в области высокотехнологичной аквакультуры, водных биологических ресурсов фокусируются на цифровой трансформации производства путем формализации экспертных междисциплинарных знаний по ихтиологии, экологии, робототехнике и машинному обучению, другим технологиям искусственного интеллекта и разработке фундаментальных и технологических основ высокопродуктивного и экологически чистого рыбоводства, прогнозирования и проактивного управления полного жизненного цикла производства аквакультуры [1-6].

Видеоаналитика считается наиболее перспективным инструментом для решения задач мониторинга, прогнозирования и проактивного управления технологическими процессами индустриальной аквакультуры, так как обладает рядом достоинств [7-10]. Во-первых, бесконтактность съема данных о гидробионтах и среде. Это обеспечивает неинвазивность, не вносит возмущающих факторов в жизненные процессы рыб. Также устраняются риски внесения патогенов, что не исключено при обследовании объектов аквакультуры ветеринарами. Во-вторых, изображения и

Ронжин А.Л., Ле В.Н., Оптимизация технологической карты допустимых

Шувалов Н. системотехнических решений задачи видеоаналитики аквакультуры

видеоряд дают наиболее полную визуальную информацию о кожном покрове, одиночном и групповом поведении рыб. В-третьих, накапливаемые первичные данные, размеченные корпуса и аналитическая информация для корректировки алгоритмов управления техническим оборудованием производства аквакультуры являются отдельным ценным ресурсом, в том числе позволяющим уточнять и имеющиеся теоретические знания в области ихтиологии.

Последующая структура статьи сформирована следующим образом. Далее описана концептуальная модель предметной области исследования, обсуждаются наиболее актуальные задачи аквакультуры, решаемые на основе видеоаналитики, проанализированы основные ограничения и требуемые ресурсы. Рассмотрены особенности разработки технологической карты для задачи расчета биомассы рыб, приведены предварительные результаты экспериментальной проверки системы видеоаналитики на рыбоводном предприятии.

Наиболее актуальными задачами в аквакультуре, потенциально решаемыми на основе видеоаналитики, выделяют следующие: подсчет числа рыб, распознавание типов рыб, оценивание биомассы, идентификация каждой особи, выявление аномального поведения, распознавание заболевших, диагностика заболеваний [11-14].

На рис. 1 представлена концептуальная модель предметной области видеоаналитики аква-культуры с введенными основными сущностями. Процесс выбора параметров технологической карты начинается с определения типа задачи Wk, ее входных WkInP и выходных WkOutP данных, а также конкретных свойств оборудования для регистрации входных данных

°1прЕд, АеС1прЕд, SPdInpEq, CstInpEq }

^ОШР = {РПСОШЩ, ас '^ОигЕ^^^^ОигЕ^^"3 OutEq >

WbP = {FnckInpEq > AcckInpEq, SprfnpEq, CstInpEq} И своЙств °б°руц°вания для Их обработкИ И ф°рмир°-ванИЯ выхоДных данных: WOutp = {FncOutEq, AcCOutEq, SpdOutEq, CstOutEq} , обРазУюЩИх матРИЦУ

Wp .

Затем производится аналИЗ требованИй, характерных для задачИ Wk: Rk pt — место и время; RkVEq - оборудование видеосъемки; RkSenEq - дополнительное сенсорное оборудование; RkCNAEq -вычислительное, сетевое, силовое оборудование; W Tim - расписание видеосъемки; Rk wp - множество необходимых специалистов. Также учитываются основные ограничения предметной области и накладываемые технические и технологические требования к оборудованию и процессу видеосъемки: LkW - факторы водной среды, LkFB - поведение рыб, LkUC - условия эксплуатации,

Lk т k « т k

WV - характеристики водного резервуара, L WC - характеристики погодных условий, L cc - характеристики климатических условий.

Основными ограничениями, характерными для всех задач, являются факторы водной среды (мутность, низкая освещенность), поведение рыб (относительно высокая скорость, инстинкты), условия эксплуатации (повышенная влажность, механические воздействия) и другие.

При описании требований к решению задач следует уточнять место и время видеосъемки (наименование технологического процесса, место видеосъемки, время видеосьемки, длительность видеосъемки, ракурс видеосъемки) оборудование видеосъемки (спектральный диапазон регистрируемых частот, частота кадров, дополнительное освещение и др.), вычислительное и сетевое оборудование (характеристики вычислительного модуля для подключения видеокамеры и записи данных, управления осветительным оборудованием и характеристики маршрутизатора для передачи видеоданных в облачное хранилище (WiFi, GSM)), вычислительный сервер для обработки видеоданных, а также необходимый обсуживающий персонал (ветеринар-ихтиолог, инженер-системотехник, инженер-технолог, инженер по машинному обучению и компьютерному зрению и др.).

Математическую формулировку задачи поиска подмножества допустимых вариантов технологической карты можно записать в следующем виде. Обозначим множество вариантов технологической карты:

TM = {TMlEq ,TMVhs ,TMlEqSh ,TMlpSh „..JMUq ,TM^S ,TMlEqSk WPsh

™UEq ,TMH ,TMNEqSh ,TMPsh} , где каждый вариант карты описан набором характеризующих параметров, заданных числовыми значениями. Характеристики используемого в варианте технологической карты TM1 оборудования TM'jjEq = {Fnc'uEq, Acc'uEq, Spdj^q, Cst\JEq } соответственно по функциональности, точности,

скорости и стоимости. ТМуэь - расписание видеосъемки; ТМе^ь - расписание вспомогательного оборудования; ТМ!рзь - график работы специалистов.

W={W*}- множество задач видеоаналитики

- тип к задачи

- мн ожество входных данных ^^опр - множество выходных данных ^Лврт - число необходимого оборудования

_ _

К Л* - мн ож еств о тр еб ований к р ешению за дачи

Я*рт - место и время рЛ/Б}- оборудование видеосъемки РЛтБ!- дополнительное сенсорное оборудование КЛнаец- вычислительное, сетевое, силовое оборудование - расписание видеосъемки - множество необходимых специалистов

1

L множество ограничений при решении задачи W*

r L WE - факторы водной среды

L FB -поведение рыб

L uc - условия эксплуатации

L*wv - характеристики водного резервуара

L wc - характеристики погодных условии

L cc - характеристики климатических условии

J'

Q - множество критериев оценивания

Qifcc- 1фитерии по функциональности

Qak- критерии по точности

Qspd- критерии по скорости

Qca- критерии по стоимости

I

ТМ .ТМ*- множество вариантов технологической карты задачи видео аналитики ГО?*

ТМV- используемое оборудование ТМ^зь-расписание видеосъемки

расписание вспомогательного оборудования ТМ*ря1 - график работы специалистов

Рис. 1. Концептуальная модель задачи видеоаналитики аквакультуры

Таким образом, для решения задачи Wk на основе критериев Q необходимо выделить подмножество вариантов технологической карты ТМк е ТМ с набором параметров используемого оборудования, идентичным по функциональности, точности, скорости свойствам оборудования для регистрации входных данных, обработки и формирования выходных данных, содержащихся в описании задачи Предполагается, что количество типов оборудования в вариантах техноло-

Ронжин А.Л., Ле В.Н., Оптимизация технологической карты допустимых

Шувалов Н. системотехнических решений задачи видеоаналитики аквакультуры

гической карты и описании задачи одинаковое и равно WkEqNum, а оборудование отличается только количественными значениями функциональных характеристик.

В рамках поставленных условий в варианте технологической карты ТЫ1 можно однозначно оценить соответствие характеристик используемого оборудования ТЫ^^ , учитывая две компоненты. Во-первых, соответствие характеристик оборудования видеосъемки

{рпсСЕ, Асс^ , } , дополнительного сенсорного °б°руд°вания {РпС\епЕ^, Acc'senEq, ^ИвпЕ^ } свойствам требуемого оборудования для регистрации входных данных

{FncInpEq, AcСInpEq, SpdInpEq} ■

Во-вторых, соответствие характеристик вычислительного, сетевого, силового оборудования {Рпссмаб^ , Асссх^ , Spd1CNAEq } свойствам требуемого оборудования для обработки и формирования выходных данных {FncOutEq, AcСOutEq, SPdOutEq } ■

При сравнении характеристик оборудования формируются бинарные оценки применимости вариантов технологической карты, в положительном случае сохраняется суммарная стоимость требуемого оборудования:

ТЫ1 =

ШШцИит

X CstlUEq, еслиТЫ^ = Wp

I=1

0, иначе

После этого в экспертном режиме рассматриваются варианты, имеющие более низкую стоимость. При оценивании стоимости используемого сервиса видеоаналитики следует учесть затраты на приобретение и установку специализированного программно-аппаратного обеспечения, оплаты работы экспертов, участвующих в ручной обработке изображений, и другие расходы.

Вопросы автоматизации и интеллектуализации технологических процессов сельского хозяйства являются наиболее актуальными современными задачами, им посвящены исследования передовых отечественных коллективов. В работах ведущей научной школы З.В. Нагоева детально обсуждаются проблемы интеллектуального принятия решений на основе самоорганизации муль-тиагентных когнитивных архитектур и созданы оригинальные наземные роботы сельскохозяйственного назначения [15-18]. Авторы выражают признательность за плодотворные дискуссии и считают своим приятным долгом поздравить Залимхана Вячеславовича Нагоева с юбилеем.

Проблема выбора оптимального варианта технологической карты и проектирования допустимых системотехнических решений программно-аппаратного комплекса видеоаналитики сводится к поиску конструктивных путей формирования вариантов, удовлетворяющих функциональным и временным критериям. Окончательное решение о структуре и функциях программно-аппаратного обеспечения видеоаналитики, необходимом для его реализации, принимается с учетом стоимостных затрат всего жизненного цикла индустриальной аквакультуры [19].

3. Результаты экспериментов по видеоаналитике на производстве

Первичные данные для разработки и внедрения системы видеоаналитики при решении задачи подсчета рыбы, ее массы при пересадках, отгрузке, приеме в цех переработки были получены

в рамках сотрудничества компании «Остров», специализирующейся на выращивании форели и уделяющей серьезное внимание внедрению современных технологий автоматизации и искусственного интеллекта в технологические процессы индустриальной аквакультуры.

Раз в неделю рыбоводная служба производит операцию навески рыбы, для этого устанавливается специальная емкость, предварительно наполненная водой, на весы и с помощью сачка в эту емкость перекладывается рыба партиями по 10 особей за одну итерацию. После каждой итерации производится запись показания весов, после чего повторяют эту операцию 4 раза. Затем общая масса делится на количество рыб и среднее значение используется в качестве значения массы рыбы в бассейне для дальнейшей корректировки прогнозов и плана кормления. При посадке рыбы компания знает количество полученного малька с заявления поставщика и производит раз в неделю по мере роста свои навески, а также ведет учет отходов, но реальные значения

не известны до момента потрошения рыбы в цеху. Метод навески рыбы имеет значительную погрешность из-за множества факторов, таких как:

- навески производятся до и после кормления;

- навеска производится с поверхности бассейна из одного места;

- в емкость для навески попадает дополнительная вода с сачка и рыбы, которая влияет на конечные данные измерения;

- выборка из 40 особей при общем их количестве более 3 000 - слишком мала. Вследствие этих факторов анализируемая выборка получается неоднородной и часто не

представительной, поэтому задача автоматизации расчета биомассы рыб с минимизацией ручного труда и снижением влияния факторов инстинктивного поведения рыб является актуальной для рыбоводных предприятий. Примеры изображений показаны на рис. 2.

Рис. 2. Примеры изображений рыб: слева) в прозрачной трубе в водном потоке; справа) на конвейере и разделочной доске

Проведенные ранее компанией исследовательские работы по обработке изображений, снятых под водой, не дали положительных результатов, поэтому более детально были проанализированы процессы съемки рыбы в прозрачной узкой трубе, направляемой потоком воды, и на воздухе при движении на конвейере.

В первом случае были выявлены следующие негативные факторы, препятствующие регистрации качественного изображения. Рыба, действуя инстинктивно, плывет против течения, тем самым создавая заторы; из-за наложений друг на друга и невозможности даже человеческим глазом определить, где закончилась первая, а где начинается следующая рыба, невозможно правильно их пересчитать. Помимо этого, создается сильная вибрация, которая, в свою очередь, приводит к смазанным изображениям. Труба была не заполнена водой полностью, поэтому возникают волны, пузыри, брызги, и съемка рыбы получается в двух средах, что усложняет последующую обработку изображений. При движении рыбы по течению ее скорость становится достаточно высокой, что требует применения видеокамер с большей частотой кадров (60, 120 Гц).

Во втором случае съемка рыб производится на воздухе на конвейере в цехе переработки, также делались качественные снимки на разделочной доске с двух сторон в подвижном состоянии. Собран корпус из 20 000 изображений на конвейере и фотографий 1500 особей форели с двух сторон, необходимый для обучения моделей и оптимизации их параметров под разные виды задач видеоаналитики.

Ронжин А.Л., Ле В.Н., Оптимизация технологической карты допустимых

Шувалов Н. системотехнических решений задачи видеоаналитики аквакультуры

Дальнейшие исследования будут направлены на разработку модельно-алгоритмического и программного обеспечения, необходимого для апробации предложенных математических моделей и оптимизации вариантов технологической карты функционирования системы видеоаналитики.

Литература

1. Bekarev, A. Aquaculture Digitalization: Polling Karelian Fish Farmers / A. Bekarev, E. Ivashko, V. Ivashko // Agriculture Digitalization and Organic Production. Proceedings of the Third International Conference on Agriculture Digitalization and Organic Production (ADOP 2023). Smart Innovation, Systems and Technologies. - 2023. - Vol. 362. - P. 363-372.

2. Недоступ, А.А. Обоснование масштабов подобия световых величин установок замкнутого водоснабжения для выращивания гидробионтов / А.А. Недоступ, А.О. Ражев, Е.И. Хрусталёв // Вестник Астраханского государственного технического университета. Серия: Рыбное хозяйство.

- 2020. - № 3. - С. 61-69.

3. Барулин, Н. Интенсивная аквакультура / Н. Барулин // Наука и инновации. - 2021. - № 8 (222). - С. 36-40.

4. О теоретических основах аэролимнологии: изучение пресных водоемов и прибрежных территорий с применением воздушных робототехнических средств / Д.С. Дудакова, В.М. Анохин, М.О. Дудаков, А.Л. Ронжин // Информатика и автоматизация. - 2022. - Вып. 21(6). -C.1359-1393.

5. Коллаборативная селекционная система на основе консорциума гетерогенных интеллектуальных агентов / М.И. Анчёков, З.И. Боготова, И.А. Пшенокова, З.В. Нагоев, Б.Р. Шомахов // Известия Кабардино-Балкарского научного центра РАН. - 2022. - № 5 (109). - С. 25-37.

6. Рекомендации по выращиванию рыбопосадочного материала радужной форели в рыбоводных индустриальных комплексах (с временными нормативами) / Н.В. Барулин, М.С. Лиман, Е. Г. Новикова и др. - Горки: БГСХА, 2016. - 180 с.

7. Abudalfa, S. Evaluation of Skeletonization Techniques for 2D Binary Images / S. Abudalfa // Informatics and Automation. - 2023. - Vol. 22, Iss. 5. - P. 1152-1176.

8. Building an Online Learning Model Through a Dance Recognition Video Based on Deep Learning / N. Hung, T. Loi, N. Binh et al. // Informatics and Automation. - 2024. - Vol. 23, no. 1. - P. 101128.

9. Разработка интеллектуальной интегрированной системы «умное поле» / З.В. Нагоев, В.М. Шуганов, А.У. Заммоев, К.Ч. Бжихатлов, З.З. Иванов // Известия ЮФУ. Технические науки.

- 2022. - № 1 (225) . - С. 81-91.

10. Mahamudul Hashan, A. Apple Leaf Disease Classification Using Image Dataset: a Multilayer Convolutional Neural Network Approach / A. Mahamudul Hashan, R. Md Rakib Ul Islam, K. Avinash // Informatics and Automation. - 2022. - Vol. 21, no. 4. - P. 710-728.

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

11. Ahmed, M.S. Fish Disease Detection using Image Based Machine Learning Technique in Aquaculture / M.S. Ahmed, T.T. Aurpa, M.A.K. Azad // Journal of King Saud University-Computer and Information Sciences. - 2022. - Vol. 34, Iss. 8, Part A. - P. 5170-5182.

12. An Advanced Bangladeshi Local Fish Classification System based on the Combination of Deep Learning and the Internet of Things (IoT) / M.A. Ahmed, M.S. Hossain, W. Rahman et al. // Journal of Agriculture and Food Research. - 2023. - Vol 14. - 100663.

13. Нагоев, З.В. Алгоритм нейрокогнитивного обучения мультиагентной системы эволюционного моделирования экспрессии генов по данным ПЦР-анализа растений / З.В. Нагоев, М.И. Анчёков, Ж.Х. Курашев, А.А. Хамов // Известия Кабардино-Балкарского научного центра РАН. - 2023. - № 6 (116). - С. 179-192.

14. Ле, В.Н. Обзор интеллектуальных систем управления и робототехнических задач в производстве аквакультуры / В.Н. Ле, А.Л. Ронжин // Морские интеллектуальные технологии. -2024. (в печати).

15. Nagoev, Z. Multi-Agent Neurocognitive Models of Semantics of Spatial Localization of Events / Z. Nagoev, O. Nagoeva, I. Gurtueva // Cognitive Systems Research. - 2020. - Vol. 59. - P. 91-102.

16. Нагоев, З.В. Извлечение знаний из многомодальных потоков неструктурированных данных на основе самоорганизации мультиагентной когнитивной архитектуры мобильного робота /

З.В. Нагоев, О.В. Нагоева // Известия Кабардино-Балкарского научного центра РАН. - 2015. -№ 6-2 (68). - С. 145-152.

17. Multi-agent Algorithms for Building Semantic Représentations of Spatial Information in a Framework of Neurocognitive Architecture / Z. Nagoev, O. Nagoeva, I. Gurtueva, V. Denisenko // Advances in Intelligent Systems and Computing. - 2020. - Vol. 948. - P. 379-386.

18. Автономный синтез пространственных онтологий в системе принятия решений мобильного робота на основе самоорганизации мультиагентной нейрокогнитивной архитектуры / З.В. Нагоев, К.Ч. Бжихатлов, И.А. Пшенокова и др. // Известия Кабардино-Балкарского научного центра РАН. - 2020. - № 6 (98). - С. 68-79.

19. Методы и алгоритмы синтеза технологий и программ управления реконфигурацией бортовых систем маломассоразмерных космических аппаратов / В.Н. Калинин, А.Ю. Кулаков, А.Н. Павлов и др. // Информатика и автоматизация. - 2021. - Т. 20, № 2. - C. 236-269.

Поступила в редакцию 17 февраля 2024 г.

Сведения об авторах

Ронжин Андрей Леонидович - доктор технических наук, профессор, главный научный сотрудник лаборатории технологий больших данных социокиберфизических систем, Санкт-Петербургский Федеральный исследовательский центр Российской академии наук, г. Санкт-Петербург, Российская Федерация, ORCID iD: https://orcid.org/0000-0002-8903-3508, e-mail: ronzhin@iias. spb.su.

Ле Ван Нгиа - соискатель лаборатории автономных робототехнических систем, Санкт-Петербургский Федеральный исследовательский центр Российской академии наук, г. Санкт-Петербург, Российская Федерация, ORCID iD: https://orcid.org/0009-0000-8848-0341, e-mail: lenghia18071999@gmail.com.

Шувалов Никита - аспирант лаборатории интеллектуальных систем, Санкт-Петербургский Федеральный исследовательский центр Российской академии наук, г. Санкт-Петербург, Российская Федерация, ORCID iD: https://orcid.org/0009-0008-1240-1561, e-mail: nikita@chouvalov.com.

Bulletin of the South Ural State University Series "Mathematics. Mechanics. Physics" _2024, vol. 16, no. 2, pp. 50-58

DOI: 10.14529/mmph240205

OPTIMIZATION OF TECHNOLOGICAL MAP OF ACCEPTABLE SYSTEM ENGINEERING SOLUTIONS FOR AQUACULTURE VIDEO ANALYTICS

A.L. Ronzhin, V.N. Le, N. Shuvalov

St. Petersburg Federal Research Center of the Russian Academy of Sciences, St. Petersburg, Russian Federation

E-mail: ronzhin@iias.spb.su

Abstract. The paper considers the problem of video analytics of aquatic organisms in fish farming industrial complexes. It proposes a conceptual model of the video analytics problem, and a corresponding mathematical formulation of the problem with the search for a subset of acceptable options for the technological map, which boils down to the search for options that satisfy functional criteria. The final decision on the structure and functions of video analytics hardware and software takes into account the cost of the entire life cycle of the equipment. The study emphasizes the importance of automation and intellectualization of technological processes in agriculture, the most pressing modern problems, which are the main focus of the research of advanced teams. The paper discusses primary data for the development and implementation of a video analytics system when solving the problem of counting fish and their mass during transplantation, shipment, and reception into the processing shop. The data were obtained in the framework of cooperation with the Ostrov company, specializing in trout cultivation and paying serious attention to the implementation of modern means of automatization and artificial intelli-

Ронжин А.Л., Ле В.Н., Шувалов Н.

Оптимизация технологической карты допустимых системотехнических решений задачи видеоаналитики аквакультуры

gence in technological processes of industrial aquaculture. Full-scale experiments were carried out and images of fishes were collected in a transparent narrow pipe directed by a stream of water, and in air while moving on a conveyor belt. Further research will be aimed at developing model-algorithmic and software necessary for testing the proposed mathematical models and optimizing options for the technological map of video analytics system.

Keywords: systems analysis; multi-criteria assessment; technical vision; video analytics; artificial intelligence technologies; robotics; artificial neural networks.

References

1. Bekarev A., Ivashko E., Ivashko V. Aquaculture Digitalization: Polling Karelian Fish Farmers. In: Ronzhin, A., Kostyaev, A. (eds) Agriculture Digitalization and Organic Production. ADOP 2023. Smart Innovation, Systems and Technologies, Vol 362, Springer, Singapore, 2023. DOI: 10.1007/978-981-99-4165-0_33

2. Nedostup A.A., Razhev A.O., Khrustalyov E.I. Substantiation of Scales of Light Values Similarity of Recirculating Aquatic Systems for Growing Hydrobionts. Vestnik of Astrakhan State Technical University. Series: fishing Industry, 2020, Iss. 3, pp. 61-69. (in Russ.). DOI: 10.24143/2073-5529-20203-61-69

3. Barulin N. Intensivnaya akvakul'tura (Intensive Aquaculture). Nauka i innovatsii, 2021, no. 8 (222), pp. 36-40. (in Russ.).

4. Dudakova D., Anokhin V., Dudakov M., Ronzhin A. On Theoretical Foundations of Aerolimnology: Study of Fresh Water Bodies and Coastal Territories Using Air Robot Equipment. Informatics and Automation, 2022, № 6 (21), pp. 1359-1393. (in Russ.). DOI: 10.15622/ia.21.6.10

5. Anchekov M.I., Bogotova Z.I., Pshenokova I.A., Nagoev Z.V., Shomakhov B.R. Collaborative Breeding System based on a Consortium of Heterogeneous Intelligent Agents. News of the Kabardino-Balkarian Scientific Center of RAS, 2022, no. 5 (109), pp. 25-37. DOI: 10.35330/1991-6639-2022-5109-25-37

6. Barulin N.V., Liman M.S., Novikova E.G., Shumskiy K.L., Atroshchenko L.O., Rogovtsov S.V., Surovets N.A., Nekrylov A.V., Plavskiy V.Yu. Rekomendatsii po vyrashchivaniyu ryboposadochnogo materiala raduzhnoy foreli v rybovodnykh industrial'nykh kompleksakh (s vremennymi normativami) (Recommendations for the Cultivation of Rainbow Trout Fish Planting Material in Fish-Breeding Industrial Complexes (with Temporary Standards)), Gorki, BGSKhA, 2016,180 p. (in Russ.).

7. Abudalfa S. Evaluation of Skeletonization Techniques for 2D Binary Images. Informatics and Automation, 2023, Vol. 22, Iss. 5, pp. 1152-1176. DOI: 10.15622/ia.22.5.7

8. Hung N., Loi T., Binh N., Nga N., Huong T., Luu D. Building an Online Learning Model Through a Dance Recognition Video Based on Deep Learning. Informatics and Automation, 2024, Vol. 23, no. 1, pp. 101-128. DOI: 10.15622/ia.23.1.4

9. Nagoev Z.V., Shuganov V.M., Zammoev A.U., Bzhikhatlov K.C., Ivanov Z.Z. Development of Intelligent Integrated System for "Smart" Agricultural Production. Izvestiya SFedU. Engineering Sciences, 2022, no. 1 (225), pp. 81-91.

10. Mahamudul Hashan A., Md Rakib Ul Islam R., Avinash K. Apple Leaf Disease Classification Using Image Dataset: a Multilayer Convolutional Neural Network Approach. Informatics and Automation, 2022, Vol. 21, no. 4, pp. 710-728. DOI 10.15622/ia.21.4.3

11. Ahmed M.S., Aurpa T.T., Azad M.A.K. Fish Disease Detection using Image based Machine Learning Technique in Aquaculture. Journal of King Saud University - Computer and Information Sciences, 2022, Vol. 34, Iss. 8, Part A, P. 5170-5182. DOI: 10.1016/j.jksuci.2021.05.003

12. Ahmed M.A., Hossain M.S., Rahman W., Uddin A.H., Islam M.T. An Advanced Bangladeshi Local Fish Classification system Based on the Combination of Deep Learning and the Internet of Things (IoT). Journal of Agriculture and Food Research. 2023, Vol 14, 100663. DOI: 10.1016/j.jafr.2023.100663

13. Nagoev Z.V., Anchyekov M.I., Kurashev Zh.Kh., Khamov A.A. Algoritm nejrokognitivnogo obuchenija mul'tiagentnoj sistemy jevoljucionnogo modelirovanija jekspressii genov po dannym pcr-analiza rastenij (The Algorithm of Neurocognitive Training of a Multi-Agent System of Evolutionary Modeling of Gene Expression Based on Plant PCR Analysis). News of the Kabardino-Balkarian Scientific Center of RAS, 2023, no. 6(116), pp. 179-192. DOI: 10.35330/1991-6639-2023-6-116-179-192

14. Le V.N., Ronzhin A.L. Review of Intelligent Control Systems and Robotic Tasks in Aquaculture Production. Marine intellectual technologies, 2024 (to be published).

15. Nagoev Z., Nagoeva O., Gurtueva I. Multi-Agent Neurocognitive Models of Semantics of Spatial Localization of Events. Cognitive Systems Research, 2020, Vol. 59, pp. 91-102. DOI: 10.1016/J.C0GSYS.2019.09.015

16. Nagoev Z.V., Nagoeva O.V. Extraction of Knowledge from Multimodal Flows of Unstructured Data on the Basis of Self-Organization of Multi-Agent Cognitive Architecture of the Mobile Robot. News of the Kabardin-Balkar scientific center of RAS, 2015, no. 6-2, pp. 145-152. (in Russ.).

17. Nagoev Z., Nagoeva O., Gurtueva I., Denisenko V. Multi-agent Algorithms for Building Semantic Representations of Spatial Information in a Framework of Neurocognitive Architecture. In: Samsonovich, A. (eds) Biologically Inspired Cognitive Architectures 2019. BICA 2019. Advances in Intelligent Systems and Computing, Vol. 948, Springer, Cham, 2020. DOI: 10.1007/978-3-030-25719-4_49

18. Nagoev Z.V., Bzhikhatlov K.Ch., Pshenokova I.A., Nagoeva O.V., Atalikov B.A., Chechenova N.A., Malyshev D.A. Autonomous Formation of Spatial Ontologies in the Intelligent Decision-Making System of a Mobile Agricultural Robot based on the Self-Organization of Multi-Agent Neurocognitive Architectures. News of the Kabardino-Balkarian Scientific Center of the Russian Academy of Sciences, 2020, no. 6, pp. 68-79. DOI: 10.35330/1991-6639-2020-6-98-68-79

19. Kalinin V., Kulakov A., Pavlov A., Potryasaev S., Sokolov B. Methods and Algorithms for the Synthesis of Technologies and Programs for Controlling the Reconfiguration of On-board Systems of Small-Sized Spacecrafts. Informatics and Automation, 2021, Vol. 20, no. 2, pp. 236-269. DOI: 10.15622/ia.2021.20.2.1

Received February 17, 2024

Information about the authors

Ronzhin Andrey Leonidovich is Professor, Dr. Sc. (Engineering), Chief Scientist of Laboratory of Big Data Technologies of Socio-Cyber-Physical Systems, St. Petersburg Federal Research Center of the Russian Academy of Sciences, St. Petersburg, Russian Federation, ORCID iD: https://orcid.org/0000-0002-8903-3508, e-mail: ronzhin@iias.spb.su.

Le Van Nghia is applicant for the Laboratory of Autonomous Robotic Systems, St. Petersburg Federal Research Center of the Russian Academy of Sciences, St. Petersburg, Russian Federation, ORCID iD: https://orcid.org/0009-0000-8848-0341, e- mail: lenghia18071999@gmail.com.

Shuvalov Nikita is Post-graduate Student, Laboratory of Intelligent Systems, St. Petersburg Federal Research Center of the Russian Academy of Sciences, St. Petersburg, Russian Federation, ORCID iD: https://orcid.org/0009-0008-1240-1561, e-mail: nikita@chouvalov.com.

i Надоели баннеры? Вы всегда можете отключить рекламу.