Научная статья на тему 'Оценка и оптимизация точности дискретно-логических решений по искаженнымфактическим и априорным данным'

Оценка и оптимизация точности дискретно-логических решений по искаженнымфактическим и априорным данным Текст научной статьи по специальности «Математика»

CC BY
123
19
i Надоели баннеры? Вы всегда можете отключить рекламу.
Ключевые слова
ПРИНЯТИЕ РЕШЕНИЙ / ПРЯМЫЕ И ОБРАТНЫЕ ЗАДАЧИ / ЧАСТОТНАЯ ЛОГИКА / ИНФОРМАТИКА

Аннотация научной статьи по математике, автор научной работы — Зверев Геннадий Никифорович, Боровская Радмила Владимировна, Колупаева Наталья Александровна

Выполнена строгая формализация прямых и обратных задач принятия решений в логических шкалах по искаженным фактическим и теоретическим априорным данным. В ситуациях с числом фактических источников данных 0, 1, 2 и одним априорным источником дан ответ на вопрос: существуют ли в полном и однородном по уровню искажений фактов лишние, неинформативные логические связи функции и предикаты, не обладающие наивысшей точностью решений задач диагностики, распознавания, классификации------, и как они ранжируются по информативности

i Надоели баннеры? Вы всегда можете отключить рекламу.
iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.
i Надоели баннеры? Вы всегда можете отключить рекламу.

Estimation and optimization of is discrete-logic decisions accuracy on the distorted actual and a priori data

Strict formalization of direct and inverse problems of decision-making in logic scales on the distorted actual and a priori data has been made. The answer to the question in situations with number of the facts 0, 1, 2 has been given: if there are superfluous logic relations functions and predicates which are not possessing the highest accuracy of diagnostics problems decisions, recognition, classification in the full and homogeneous information world with true and lie sources and how they are ranged on precision.

Текст научной работы на тему «Оценка и оптимизация точности дискретно-логических решений по искаженнымфактическим и априорным данным»

СИСТЕМНЫМ АНАЛИЗ, УПРАВЛЕНИЕ И ОБРАБОТКА ИНФОРМАЦИИ

УДК 681.5:51

Г. Н. ЗВЕРЕВ, Р. В. БОРОВСКАЯ, Н. А. КОЛУПАЕВА

ОЦЕНКА И ОПТИМИЗАЦИЯ ТОЧНОСТИ ДИСКРЕТНО-ЛОГИЧЕСКИХ РЕШЕНИЙ ПО ИСКАЖЕННЫМ ФАКТИЧЕСКИМ И АПРИОРНЫМ ДАННЫМ

Выполнена строгая формализация прямых и обратных задач принятия решений в логических шкалах по искаженным фактическим и теоретическим априорным данным. В ситуациях с числом фактических источников данных 0, 1, 2 и одним априорным источником дан ответ на вопрос: существуют ли в полном и однородном по уровню искажений фактов лишние, неинформативные логические связи - функции и предикаты, не обладающие наивысшей точностью решений задач диагностики, распознавания, классификации, и как они ранжируются по информативности. Принятие решений; прямые и обратные задачи; частотная логика; информатика

ПОСТАНОВКА ПРОБЛЕМЫ

В своей научной и практической деятельности человек принимает разнообразные решения в процессах исследования окружающей действительности (диагноз, прогноз, распознавание образов), проектирования новых изделий и планирования деятельности, управления действиями людей и автоматов [1, 2]. Эти решения ориентированы на выбор наилучшего, оптимального варианта из доступного множества альтернатив и основаны обычно на фактических данных и результатах их обработки, на теоретических (модельных, априорных) представлениях и рассуждениях, которые в конкретной проблемной ситуации предполагаются достоверными, достаточно надежными, чтобы получить однозначно определенные и правильные результаты.

Однако фактические и априорные знания о проблемной и решающих системах - факты и априорика стоящих задач - неполны и подвержены искажениям, поэтому важно иметь возможность оценить последствия подобных информационных потерь и оптимизировать по точности процедуры принятия решений в зависимости от качества исходной фактической и априорной информации. Строгий учет реальных неопределенностей имеющихся знаний (фактов и априорики), с которыми сталкиваются люди в своей жизни, лучше выполнить в ситуациях элементарной различимости объектов проблемной ситуации в двоичной шкале свойств и связей {да, нет}, а затем обобщить

Контактная информация: (347) 273-32-00

решения на описания реальных ситуаций. В данной работе мы ограничимся простейшими моделями зависимостей между параметрами информационных ситуаций, заданными в двоичных (логических и числовых) шкалах значений, и простейшими моделями неопределенностей, однако многие выводы при этом сохраняются и в более сложных случаях.

Смысл последующих решений поставленной проблемы базируется на формализации прямых и обратных задач классификации в семантике исследования, в которых по наблюдаемым, измеряемым количественным и качественным признакам проблемного объекта (прообраза), по его изображениям - образам объекта - необходимо с максимальной точностью диагностировать, распознать или предсказать состояние неизвестного двоичного классификационного признака х е {да, объект принадлежит выделенному классу, либо нет, не принадлежит}, «быть или не быть», либо в логической шкале модальностей знаний {истина, ложь}, или же в абстрактной числовой (битовой) шкале - хе {0, 1}. Эти решения с некоторой коррекцией семантической схемы переносятся на задачи проектирования, управления, целеполагания [1].

ПРЯМЫЕ И ОБРАТНЫЕ МОДЕЛИ ИССЛЕДОВАНИЯ

Пусть проблемный объект и окружающая его среда характеризуется набором существенных свойств и = (и1, и2, ик) - количествен-

ных параметров и качественных признаков, которые однозначно определяют результаты наблюдений, измерений, построения изображе-

нийу = (у1,у2,...,ут) в форме сенсорного преобразования у = A(u), где т - число источников фактических данных у, = А(и), 1 < i < m, в общем случае т > 0, А - прямая модель сенсорного процесса, который отображает свойства материального явления и процесса наблюдения, воздействующих на вход сенсора, в информацию у. Вектор и называется вектором причин, компоненты которого разделяются на полезные причины и шумы, помехи, искажающие результаты наблюдений. Вектор у может содержать полезную и бесполезную информацию, либо дезинформацию. Примерами сенсора в науке и технике служат измерительные приборы, информационно-измерительные системы - это объективированные источники данных с известными оценками точности результатов, а также органы чувств, свидетельские показания, оценки свойств реальных объектов и событий человеком - это субъективные источники с различной степенью объективности, достоверности. Простейшей формой вектора причин служит представление в виде и = (х, v), x - полезный сигнал, искомое количественное или качественное свойство проблемного объекта, v - помеха.

Различают прямые и косвенные наблюдения, измерения. Модель сенсора прямого измерения количественного свойства х есть у = x + + v, здесь переменные х, у, v е Real имеют единую единицу измерения. Модель сенсора косвенного измерения свойства х - линейное или нелинейное преобразование у = А(х, v), в котором величины x, у, v могут иметь любые единицы измерения, при этом обязательно предполагается этап обработки измерений, пе-

А

реход от у к оценке х = В(у) искомого свойства х, выполняемый рефором В, который обращает причинно-следственную связь между х и у: В =

= А-1.

В простейшей модели прямого наблюдения качественного свойства х, скажем, двоичного признака в шкале {0, 1}, результатом наблюдений у есть логическая операция дифференции: у=х © v, симметричной разности, v - двоичная переменная ошибки наблюдений, при v = 0 наблюдение у = х - «вижу то, что есть на самом

деле», при v = 1 результат у = х - отрицание истинного значения х, «вижу противоположное, совсем не то». Для косвенных наблюдений у = = А(х^) результат наблюдения у есть косвенный признак логической связи А между х и у, и потребуется обработка факта у и априорных

А

данных, чтобы получить оценку х = В(у) рефо-

ром В, который обращает причинную, либо корреляционную, статическую связь логических переменных х и у.

Построение модели сенсора А и получение по этой модели и входному вектору причин и результатов наблюдения у = А(и) называется решением основной прямой задачи исследования. Модель А преобразования свойств материи в информацию у называется начальным или основным источником информации о физической реальности (в измерительной технике -первичным преобразователем), а проблемный объект, взаимодействующий с сенсором, называется первичным источником фактических данных. Эту причинно-следственную цепочку можно продолжить влево, построив генор Г -модель генерации проблемного объекта и класса информационных ситуаций: Г^и^А^у, и

А

вправо у^Б^ х. Здесь генор Г есть метаисточник информации (источник источника), метапричина, полная модель априорной информации о полезных влияющих факторах и помехах сенсорного процесса. Генор (функцию) во многих задачах можно заменить без потерь существенной информации реляцией -частотной моделью априорной неопределенности - результатом генерации, распределением численности и частости (обобщенной вероятности) q(u) выбранных (случайно или закономерно) генором значений вектора и [1], а рефор В - чисто информационный преобразователь, модель обращения сенсора и процесса обработки фактической у и априорной J информации и

А

получения решения х = В(у, J) стоящей про-

А

блемы, точного х = х при истинных и полных

А

исходных данных или приближенного х ф х, если исходная информация искаженная или неполная.

Чтобы оценить точность и полезность наблюдений, вычислений, рассуждений необходимо решить еще одну - целевую прямую задачу, в которой определяется целевое преобразование х = С(и) вектора причин в истинное значение цели х = (х1, х2,..., х„). Это преобразование есть модель идеального исследования, С -целевой оператор или аккуратор - модель прецизионной системы исследования, например, истинная, эталонная классификация объектов, с которой сравниваются результаты реальных исследований.

Итак, прямая задача исследования состоит в построении моделей сенсорного и целевого преобразований с прямой ориентацией от источников причин Г^и к следствиям - резуль-

татам наблюдений у и целевому, истинному значению результатов идеального исследования х. Обратная задача исследования заключается в построении наилучшей модели В рефор-ного процесса обработки информации с обратной ориентацией связей от следствия сенсорного процесса у к его причинам и и далее к оценке

А

цели х = В(у, J), наилучшим образом представляющей истинное значение х. Различают прямое и косвенное обращение сенсора А. Если вектор причин и содержит цель х в качестве компонента, то рефор В реализует прямое обращение сенсора, если же х есть результат нетривиального преобразования вектора причин целевым оператором С, то рефор В выполняет косвенное обращение сенсора А. Например, истинная принадлежность проблемного объекта к определенному классу вычисляется моделью С по свойствам объекта, включаемым в вектор причин, и не является исходной причиной, поэтому, скажем, распознавание образов есть обратная задача классификации и косвенного обращения процесса наблюдения.

Помимо получения наилучшей оценки цели

А

х по критериям точности или полезности в обратную задачу включают также процедуры построения адеквативного рефора Ва(у, J), который оценивает адекватность (точность, погрешность) основного процесса наблюдения и обработки его результатов. Оценки адекватности и ценности существенно зависят от качества априорной информации и ее источников, поэтому в задачах анализа и синтеза информационных процессов исследования необходимо оценивать последствия искажений априорики.

Решение принципиальных теоретических вопросов медицинской и технической диагностики, идентификации объектов, распознавания образов, тестирования в педагогике, прямой и обратной классификации социальных явлений и т.п. серьезно упрощается, если перевести количественные и качественные параметры и характеристики проблемной ситуации в наборы двоичных признаков и воспользоваться формализмами классической и частотной логики, которые позволяют получить строгие оценки истинности и погрешности логических и частотных (статистических) зависимостей между двоичными признаками [1, 3].

Итак, пусть все фактические данные переведены в двоичную форму: у = {у}, у, = = А,(и) е {0, 1}, {да, нет}, {истина, ложь}, где у изменяется от 1 до к - число источников двоичной информации, оно обычно существенно больше исходного числа т (для факта уг- и сен-

сора АI оставим прежние обозначения). Легко показать, что любой наблюдаемый двоичный признак у, = Ау(и) косвенного наблюдения можно представить дифференциальным сенсором прямого наблюдения у,=х © у, искомого свойства х с ошибкой уу, зависящей от вектора причин и (см. далее). Качество такого фактического источника информации зависит от того, как часто возникают ошибки у, = 1. Оно определяется уровнем помех наблюдений, который измеряется в частотной логике удельным объемом искаженных данных, численностью N из общего числа N = \иб.\ информационных ситуаций универсума и решаемой проблемы: у = N/ N - частость, обобщенная вероятность детерминированных, либо случайных ошибок наблюдения у = х © у. Более полная характеристика информационных свойств источника информации определяется соотношением между объемами цели х = N / N и ошибочных результатов у, а также зависимостью между переменными х и у, которая описывается объемом

пересечения ху = классов объектов со

свойствами х = 1 и у = 1, представленных на диаграмме Эйлера кругами, вне которых х=1 и

у=1 (рис. 1).

Внутри круга у значению х = 1 соответствует ошибка у1 первого рода - пропуск цели, х = 1, у, = 0, частость этой ошибки у! = ху, а значению х = 0, у, = 1 - ошибка второго рода - ложная цель, ложная тревога с удельным объемом

у2 = ху = у - ху . Разность частостей у2 - у1

определяет регулярную (систематическую) составляющую ошибок источника информации уг = у - 2ху, она равна нулю при у1 = у2 . Нерегулярная, «случайная» составляющая ошибок упг = ш1и{у1,у2}, тогда сумма нерегулярной и

модуля систематической составляющих равна полному удельному объему ошибочных данных - частости у = 1: у = |уг| + упг [1]. Наиболее простые формулы ошибок частотной логики

получаются при независимости переменных: ху = х • у . Источники фактических данных по уровню ошибок наблюдений делятся на информативные, у < 0,5, неинформативные, у =

= 0,5 - предельная неопределенность факта, 50 на 50 процентов, и дезинформативные источники со средней ошибкой у > 0,5, однако, зная эту априорную информацию о степени недостоверности факта у, можно перейти к его отрицанию у = х © у = х © у и получить полезную

информацию у с достоверностью 0 < у< 0,5. Неинформативные источники, уровни ошибок которых у» 0,5 , можно исключить из постановки проблемы, если логическая переменная у не зависит от других переменных проблемы.

Предельную ошибочность источника информации у = 1 изучали древнегреческие логики в связи с парадоксом лжеца «критянин сказал: все критяне лжецы», в более поздней форме «я всегда лгу». В этом случае круг Эйлера у = 1 совпадает с универсумом и&. В формализме классической логики при толковании смысла подобных высказываний возникают противоречия или неопределенности смысла высказывания в оценках его истинности и состояния действительности. В частотной логике противоречия снимутся, если допустить редкие исключения: «почти все критяне.» и «почти всегда. » или «слишком часто я лгу», у » 1.

АПРИОРНЫЕ РЕШЕНИЯ

В реальной жизни человек часто принимает решения только по априорным знаниям, которые он считает достоверными, не обращаясь к фактам, либо фактические данные отсутствуют, к = т = 0, неинформативны при к >1, неизвестного происхождения или достоверность их весьма сомнительна и т. п. Априорная информация Jx о целевом двоичном признаке есть величина частости х логического значения х = 1. Если удельный объем признака большой, х » 1, или весьма малый х ~ 0, то априорные решения имеют весьма высокую достоверность.

Существуют только два априорных рефора:

А

единичный х = Б1(Jx) = 1, который решает, что целевой признак (высказывание х) всегда имеет значение «истина», х = 1, и нулевой рефор

А

х = Б0( Jx) = 0 - высказывание х ложное, х = 0. Например, прогноз х = «завтра утром взойдет Солнце» имеет 100-процентную достоверность, х ~ 1, а прогноз г = «в середине лета в Сочи наступят заморозки» имеют достоверность г ~ 0.

Средняя ошибка нулевого рефора

А

х = 0 = Б0( Jx) равна Д0 = х, а единичный рефор

А

х = Б1(Jx) = 1 имеет частотную меру ошибок априорного решения Д1 = 1 - х. В зависимости от априорики Jx = {х} выбирается рефор В0 или В1 по критерию шт{Д0, Д1}, следовательно, рефор Б1, оптимален по точности, если Д1<

< Д0, х > 0,5, в противном случае выбирают рефор В0. Однако минимальная ошибка априорного решения Дшт часто бывает выше допустимого граничного уровня Дг, поэтому вместо двоичной шкалы рефора вводят шкалу трило-гики {да, нет, не знаю}={1, 0, 0 }, 0 - биноль, базисный информационный ноль, двоичная неопределенность: либо да, либо нет, которая означает возможность отложенного решения и необходимость привлечения дополнительной информации [1].

Априорная информация также может быть отягощена большими погрешностями:

^ Аа I = 1х-Аа <х<х + Аа I, Аа - ошиб-

ка априорики. Учет последней усложняет априорные решения, особенно в ситуациях с нена-

А

дежными оценками этой величины: Аа =

= Аа + ААа, ДДа - погрешность погрешности. Простой, но не вполне обоснованный выход из этой сложной иерархии неопределенностей состоит в квадратическом суммировании оценок всех существенных погрешностей:

А2 =А2 + АА2а +...

ОДИН ФАКТ И АПРИОРИКА

Добавим к априорному источнику знаний источник фактической информации у = х © V -одно прямое наблюдение за свойством х проблемного объекта, либо одно косвенное наблюдение у = А(и), к = 1, в котором вектор причин может содержать в качестве компонента искомый двоичный признак х, тогда рефор В(у, 7) выполняет прямое обращение косвенного сенсора А, в противном случае х = С(и) и рефор выполняет косвенное обращение косвенного сенсорного процесса наблюдения за проблемным объектом.

Значения всех причин, входящих в вектор и и влияющих на результат наблюдения, неизвестны и в данном случае не измеряются, что приводит к размытию связи между двоичными переменными - искомым х и фактом у, превращая ее в корреляционную зависимость между

А А

частичной причиной х и следствием у, которая описывается частотным распределением д(х, у) как для косвенного, так и для прямого наблюдения у = х © у, если помеха у Ф 0. В этих случаях различия между прямыми и косвенными наблюдениями чисто терминологические, а косвенное наблюдение всегда можно представить в виде прямого источника значения признака у = х © у, где помеха у = х © А(и).

Для последующего анализа функциональную (причинную) модель сенсора у = А(и) удобно заменить реляционной моделью размытой связи между фактом у и искомым свойством х - частотным распределением

д(х, у)= ^ д(и)3(у-А(и))-(х-С(и))

и

где 5(.) - дельта-функция Кронекера, д(и) -функция распределения частости причин и, ^ - сигматор, оператор интегрального связывания неизвестных причин и: интегрирования по непрерывным компонентам и суммирования по дискретным компонентам вектора причин

[1]. Следовательно, априорная информация о процессе наблюдения, о влияющих факторах и связях, о целевом признаке возможного состояния проблемного объекта редуцируется в параметры - моменты распределения частости д(х, у), это полная априорика Jxy = (х, у, ху), содержащая частости ситуаций классов х = 1, у = 1, ху = 1. Более удобной для анализа задач диагностики и классификации является априорика Jxу = (х, у, ху) о возможных вариациях вектора причин и = (х, у), которая в точности эквивалентна модели Jxy частотной связи факта у и целевого свойства х. В самом деле, у = х + у --2ху, ху = х - ху и обратно, у = у + х -2ху, ху = = х - ху. Следует отметить, что при соответствующих значениях моментов и связях между полезным сигналом х и помехой у дифференциальная модель сенсора у = х © V воспроизводит все унарные (но не бинарные) операции классической логики: у = 0(х) = 0(у) = 0(х,у) при х = у = ху; у = 1(х) = 1(у) = 1(х, у) при х = = 1 - у, ху = 0; у = А(х) = х при у = 0 - идеальный сенсор; у = А(у) = у при х = 0; у = А( х) = х при у = 1, х > 0 - злостный лжец; у = А(у) = у

А

при х = 1, у > 0. Принятие решения х по факту у и априорике J = Jxv , либо Jxy выполняет

А

рефор Б(у, J)= х. Временно полагаем, что априорная информация известна точно. Существуют всего четыре возможных преобразования двоичной переменной у в оценку целевого при-

Л

знака x - это нулевой В0 и единичный рефор В1 априорных решений, которые пренебрегают фактом у = 0 либо 1, тождественное преобра-

Л

зование факта в решение x = у при априорном доверии фактическому источнику данных и

Л —

отрицание факта x = у, считая его ложным, но информативным, более ценным, чем априорные решения В0 и В1, в которых у является фиктивным аргументом константных функций.

Из этих четырех возможностей необходимо выбрать, используя априорику, наилучший рефор по критерию наибольшей точности или наименьшего риска. Итак, мы имеем четыре априорные оценки средних ошибок рефоров в универсуме Us информационных ситуаций проблемы {А 0, D1, А у, А у }={x,1 - x,v,1 - v}, выбирая

из которых наименьшую, получаем оптималь-

Л

ные по точности рефор Bopt, решение x opt и минимальную среднюю оценку ошибки решения Amm в классе ситуаций, определенных априори-кой Jxv. Полученное оптимальное решение Bopt не зависит от результата наблюдения у и априорного знания меры частотной (в пределе логической) связи между полезным сигналом х и помехой v, определяемой смешанным моментом xv, однако если различать ошибки первого и второго рода, стоимости рисков пропуска цели и выделения ложной цели, то априорика xv становится существенной. Ошибки нулевого рефора В0 есть ошибки первого рода, пропуска цели A0 = x, частость ложной тревоги равна нулю, а единичный рефор В1 допускает только ошибки второго рода: A1 = 1 - x, пропуск цели

Л

отсутствует. Решение x = у по наблюдаемому факту у сопровождается ошибками первого рода v1 = у(у = 0) = xv и второго рода v = у(у = = 1) = v - xv, определяемые двоичным значени-

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

Л

ем факта у. Решение x = у по отрицаемому факту имеет среднюю ошибку первого рода v1 = x - xv при у = 1 и второго рода v2 = 1 - x -- v + xv при у = 0, их сумма + v2 = 1 - v.

Априорика Jxv определяет частотные свойства универсума Us информационных ситуаций конкретной решаемой проблемы, а все возможные информационные миры с одним источником фактических данных составляют метауниверсум, который можно представить трехмерным априорным пространством с координатами x, v, xv и пределами изменений координат 0 < x, v ^ 1, 0 < xv < x, v, тогда конкретная проблема изображается точкой внутри части единичного куба, рассеченного плоскостями xv =

= х и ху = у, соответствующими ограничениям ху < х, ху — у. Из полного метауниверсума всех мыслимых проблемных ситуаций выделим мир объективных знаний, в котором отсутствуют грубые ошибки, обман и все источники фактических данных имеют ожидаемые средние погрешности у < 0,5. Тогда остальной части метауниверсума соответствует субъективный мир (или его часть), в котором существует преднамеренная ложь, личные интересы превалируют над истиной и т. п.: у > 0,5. Внутри полного метауниверсума выделяют подпространства логически зависимых вариаций переменных х и у, а также линейчатую поверхность их частотной независимости, определяемой условием ху = х • у. В последнем случае (а также, если не анализируется род ошибок) априорика проблем содержит только два параметра: Jxу = (х, у) и метауниверсум становится двумерным единичным квадратом, он разбивается на 4 треугольника, внутри которых оптимальным по точности является один из четырех рефоров. Все рефоры имеют одинаковые удельные объемы в полном метауниверсуме, равные %, и в этом смысле все нульарные и унарные операции равноправны при описании оптимальных по точности логических решений (рис. 2).

Рис. 2. Полный метауниверсум

В объективном метауниверсуме (половинка единичного квадрата) превалируют фактически положительные решения с удельным объемом % и априорные решения В0 и В1 объемом 1/8 каждый, удельный объем отрицательного рефора равен нулю (рис. 3).

И в полном, и объективном метауниверсуме априорный источник имеет тот же объем оптимальности / и %, что и фактический источник информации, и в этом смысле они информационно равнозначимы.

На границах оптимальных областей, определяемых уравнениями Д0 = Ду, Д1 = Д^ и т. д., возникают неоднозначности выбора оптималь-

ного по точности рефора. Предельная неоднозначность выбора и неопределенность решения возникают при неинформативности фактического и априорного источника - это центр квадрата х = у = 0,5, в котором все четыре рефора имеют одинаковую предельную ошибку Дшт = 0,5. Если при постановке проблемы допускаются отложенные решения введением ограничения ошибки Дшт < Дг при больших рисках и соответствующего рефора неопределен-

А

ности х = Бе (у, J) = 0, то в центре метауниверсума появляется квадрат неопределенных решений (отказов решить проблему) со стороной 1- 2Дг, например, граничное значение отсечки неопределенностей решений Дг = 1/4 - половина предельной неопределенности /, то сторона квадрата неопределенных решений равна / (рис. 4).

Рис. 3. Объективный метауниверсум

Рис. 4. Области оптимальности четырех рефоров

Априорная информация Jxу = {х, у} часто характеризуется большой неопределенностью и

А | А А I

искажениями оценок Jxv = 1 х, у Г = •/ху + + АJ,

АА

х = х + Ах, у = у + Ду , то же можно сказать и о границе допустимых определенных решений

XV

А

А г = Аг + ДА г. Переход от точной априорики J„

А

к искаженным оценкам Jxv переводит оптимальные по точности решения в класс квазиоп-тимальных решений. Если область априорной неопределенности QAJ не пересекает границ, разделяющих зоны оптимальности рефоров в метауниверсуме, то квазиоптимальное решение совпадает с оптимальным, искаженными останутся только оценки точности - погрешности

АА

А mm оптимального решения x. В противном случае анализ усложняется и проводится на основе вычислительных экспериментов или упрощающих приближений.

Так, если область априорной неопределенности охватывает два рефора В0 и у, как показано на рисунке, то возможны два решения

АА

(Xj, x2 ), в общем случае согласованные (00) и

(11), либо противоречивые (01) и (10). Эти два решения имеют «веса», обратно пропорциональные удельным объемам пересечений Q1 = = Qaj'Qq и Q2 = QbJ-Qy Ошибки решений А0 и Ау, вычисляемые в центрах областей Q1 и Q2, взвешиваются нормированными весами. Формулы оценок ошибок решений для согласован-

АА

ных и противоречивых значений x1 и х2 приводятся ниже.

ДВА ФАКТА И АПРИОРИКА

Теперь изучим информационные ситуации с тремя источниками: два фактических источника знаний y1 = x © v1, y2 = x © v2 и источник

априорики Ju = (x Vb v2. xVb xv2. v1V2, xv1v2} -это полная априорная информация о зависимых вариациях вектора причин u = (x, v1, v2), о распределении частости q(u). Процесс порождения априорных знаний, точных или приближенных, описывается моделью рефора априорики Ва. Модель обработки фактических и априорных данных и принятия решения представляется

А

рефором x = B(y1, y2, J). Теоретически возможны 16 преобразований двоичного вектора наблюдений y = (y1, y2) в двоичное решение

А

x е (0,1} - это две нульарные операции В0 и В1 с фиктивным аргументом у, четыре унарные операции тождественного преобразования фактов

у1, у2 и их отрицаний у1, у2 в решение x и 10 бинарных логических операций над фактами: логические сложение у1 + у2 , вычитание у1 - у2, у2 - у1, умножение у1 ■ у2, дифференция у1 © у2,

а также отрицания результатов этих операций: стрелка Пирса у1|у2, импликации у1 ^ у2, у2 ^ ^ у1, штрих Шеффера у1|у2, эквиваленция у1 ^ ^ у2. Вычисляя по априорике Ju средние погрешности этих преобразований в классе информационных ситуаций решаемой задачи и выбирая наилучший рефор Вор1 е {Бк} по критерию ш1п Ак = Аш1п , 0 < к < 15, получаем оптик

А

мальное по точности решение х = Б ор1 (у), которое соответствует точностному обращению сенсорного процесса наблюдения за проблемным объектом: у = А(и).

Средние ошибки нульарных и унарных рефоров были приведены выше: Д0 = х, Д1 = 1 - х,

Ду1 = уь Ду2 = ^ Ау1 = 1 - у , А— = 1 - у2.

Ошибки бинарных логических операций выводятся по формулам частотной и классической логики [1, 3]. Найдем ошибку логического сложения:

А+ = (у1 + у2) © х = (у1 + у2) •х+у1 • у2 •х =

= (ху1 + ху + ху2 + ху2) х+

+ (ху + ху) • (ху2 + ху2) • х =

= ху + ху2 + хуу2.

Средняя погрешность сложения

А+ = М(А+) = хчх + ху2 + ху^2 - хуху2 =

= у1 + у2 - ху1 - ху2 - уху2 + 2хуху2,

здесь М - математическое ожидание, вычисление среднего значения.

Аналогично вычисляются средние погрешности других рефоров: умножение

А. = ху1 + ху2 + у1у2 - 2ху1у2 , вычитание

А(у1 - у2) = х + у1 - ху1 - ху2 - у1у2 + 2ху1у2 , дифференция А© = х + у1 + у2 - 2ху1 - 2ху2 - 2у1у2 + 4ху1у2 .

Остальные формулы получаются перестановкой аргументов у1 и у2 и отрицанием результатов операций: ошибка импликации

А® = 1 - А- есть отрицание вычитания, для штриха Шеффера ошибка А| = 1 - А., стрелки Пирса А^ = 1 - А+, эквиваленции А« = 1 - А© .

Совокупность проблем с двумя источниками фактической и третьим - априорной информации - образуют метауниверсум и семимерное априорное пространство, координаты которого определяют семь параметров априорики с уче-

том ограничении высших моментов распределения д(н) низшими. Если вариации компонентов вектора причин независимы, то априорика проблемы определяется тремя параметрами: ^ = {х, у1, у2} - точкоИ в трехмерном априорном

пространстве, а высшие моменты вычисляются через первые моменты, скажем, ху1у2 = х • у1 • у2. Тогда метауниверсум есть

трехмерный единичный куб, который разбивается на оптимальные области Qk, внутри которых рефор Бк является наилучшим по точности

А

получаемого решения (х, Ат1П) . На границах оптимальных областей наивысшую точность решения обеспечивают 2, 4 или 8 рефоров, а в центре единичного куба х = у1 = у2 = 0,5 все три источника неинформативны, Дтт = 0,5 - предельная неопределенность решения для всех 16 рефоров.

На гранях единичного куба минимум ошибки решения равен нулю, т. к. параметры х, у1, или у2 принимают предельные значения 0 либо 1, поэтому каждой грани соответствует один из шести нульарных или унарных оптимальных рефоров. На ребрах куба два параметра из трех принимают предельные значения и каждому ребру соответствует четыре оптимальных рефора, обеспечивающих точное реА

шение х = х . В вершинах куба 8 рефоров имеют Дт1П = 0. К каждой вершине сходится 3 ребра по 4 оптимальных (идеальных) рефоров, всего 12, из которых один повторяется в четверках три раза, три рефора повторяются дважды и три не встречаются в других четверках, итого 7 рефоров, а восьмым оптимальным рефором является дифференция ® либо эквиваленция ^, которые поочередно в соседних вершинах куба принимают значения ошибок, равные 0 и 1. Например, в начале координат х_= у1 = У = 0 оптимальными преобразованиями фактов являются 8 рефоров с ошибкой Дт1П=0. Это В0, у1, у2, +, ', У1 - У2, У2 - У1, ®, остальные 8 из 16 рефоров имеют ошибки Дк = і. На вертикальной оси х оптимальны и идеальны рефоры у1, у2, +, •, на оси у1 - рефоры В0, у2, •, у2 - у1, на оси у2 оптимальны В0, у1, •, у1 - у2. В этих четверках логическое умножение встречается трижды, В0, у1, у2 - дважды и один раз - рефоры +, у1 - у2, у2 --у1. Эти соотношения получаются решением 16 уравнений Дк = 0, 0 < к < 15.

Из полного метауниверсума 0 < х, у1, У2 < 1 выделим мир объективных знаний: 0< х_<1, 0 <

< у1, у2 < 0,5 с двумя информативными источниками фактов. Остальной - субъективный мир - разделяется на три класса проблемных

ситуаций с одним или двумя источниками дезинформации, которые отрицанием переводятся в информативные факты: (у\,у2),(у1,у2) и

(У\,У2) • Тогда логические операции вычитания, импликации, функции Шеффера и Пирса сводятся к дизъюнкции и конъюнкции - логическому сложению и умножению. Из неравенства А. > А+ следует, что сложение точнее умножения для больших целей х > 0,5, а для малых целей более информативен рефор логического умножения фактов у\у2. Таким образом, метауниверсум разделяется на 8 половинных кубиков со сторонами 0,5 = 50 процентов частости двоичных значений переменных X, У\, у2. В каждом кубике выделяются оптимальные по точности рефоры, решая неравенства Дк < Дг для 16 рефоров, 0 < к, I < 15 (рис. 5).

Рис. 5. Полный и объективный метауниверсумы для двух фактов

_У2

1

0.5

к Уі + У 2 = У2 ® Уі У і + У 2 = Уі 1 У 2

Уі • У 2 = Уі - У2 Уі • У2 = Уі ^ У2

Уі + У 2 У і + У 2 = Уі ® У 2

- 2 У2 = 2 •У2 1 ^

1—►

0.5

У1

Оценим объемы, размеры и положения оптимальных областей Qк рефоров Вк в единичном кубе полного метауниверсума решаемых проблем, которые удобно выразить в корреляционном приближении, т. к. области Qk односвязны, что следует из полилинейности функций Дк. Центр оптимальной области есть и0к = = Мк(и) - математическое ожидание вектора метапричин и = (х,у1,у2) при условии и е Qk , размеры области описывает условная ковариа-

к Т к к Т

ционная матрица Ки = Мк (ии ) — и0 и 0 ,

ожидаемый удельный объем оптимальной области есть дк = М(е(и, Qk)) - частость попадания вектора и в область Qk при равномерном распределении д(и) в однородном метауниверсуме, е - двоичная функция принадлежности вектора метапричин к-й оптимальной области.

Но прежде следует выделить из полного набора рефоров {Вк} неинформативные преобразования фактов, никак не связанных с искомой целью х. Если полезный сигнал х не зависит от помех У1 и У2, то результаты преобразования наблюдений у1 и у2 не зависят от х для операций дифференции и эквиваленции, поэтому их объемы бесконечно малы - имеют меры нуль и только случайно А© и А« могут совпасть с Дтт. В самом деле, У\ © у2 =

= х © У\ © х © У2 = У\ © У2 , У\ « у2 = У\ « у2 -

результаты логических преобразований фактов зависят только от помех. Поэтому, эти функции попадают в оптимальный набор из 8 рефоров в четырех вершинах куба каждая, в которых Дтт = 0, и обе функции попадают в набор из всех 16 рефоров в центре куба, когда все они неинформативны: Дтт = 0,5.

Остальные 14 рефоров максимально информативны в своих конечных областях оптимальности. Результаты расчетов частотных моментов позволяют разбить все логические операции на три класса в зависимости от объемов областей, их точности и корреляционных характеристик в полном метауниверсуме. Первый класс содержит два нульарных В0, В1 и четыре унарных рефора у1, у2, у1, у2, им соответствуют шесть граней единичного куба, на кото-

Л

рых они обеспечивают идеальное решение х = = х, рефоры имеют одинаковые удельные объемы в однородном метауниверсуме: дк = 0,115 -частость их использования в наилучших решениях, одинаковую среднюю ошибку решений, Ак = Мк(Атт) = 0,105, различные среднеквадра-

тические размеры о вариаций и центры областей оптимальных решений х0, у01, у02, которые сведены в табл. 1. Сплющенность оптимальных областей рефоров первого класса отсутствует: коэффициенты корреляции между х, у1 и у2 равны нулю.

Во второй класс попали информативные бинарные логические операции над фактами у1 и у2, они также имеют одинаковые удельные объемы дк = 0,039 - равноправие их применимости в однородном метауниверсуме, но частость их применения в 3,5 раза меньше, чем оптимальных рефоров первого класса с меньшим числом аргументов. Средняя минимальная погрешность решения у них также одинаковая, Дк = 0,131, на 2,6% выше, чем у рефоров первого класса. Среднеквадратические размеры оптимальных областей одинаковы по трем параметрам ох=оУ1 = оУ2 = 0,116, сплющенность областей также одинаковая, положительная или отрицательная, коэффициенты корреляции г = = +0,373 либо г = -0,373 для всех парных связей гxy\, гxv2, гу1у2.

Положения центров оптимальных областей сведены в табл. 2, они на 0,03 отличаются от геометрических центров восьми половинных кубиков метауниверсума с координатами х Уь У2 = 0,25 и 0,75, приближаясь к соответствующим граням куба, а центры оптимальных областей шести рефоров из первого класса, удалены от геометрических центров на величину частости 0,145 в сторону своих граней, сами же области первого класса охватывают пары кубиков.

Третий класс содержит два неинформативных рефора: дифференцию у1 © у2 и ее отрицание - эквиваленцию у1 « у2 . В численном эксперименте удельные объемы этих логических операций составили частость менее 10-7. Сумма всех удельных объемов оптимальных

16

областей ^ дк = 6 • 0,115 + 8 • 0,0387 = 1.

к

Т аблица 1

Вк х0 Й0 ^20 ах ау2

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

Вс 0,105 0,5 0,5 0,094 0,202 0,202

В1 0,895 0,5 0,5 0,094 0,202 0,202

у1 0,5 0,105 0,5 0,202 0,094 0,202

у1 0,5 0,895 0,5 0,202 0,094 0,202

у2 0,5 0,5 0,105 0,202 0,202 0,094

у 2 0,5 0,5 0,895 0,202 0,202 0,094

Т аблица 2

Бк Ї0 ¥і0 У20

Уі + У 2 0,780 0,220 0,220

Уі ■ У2 0,220 0,220 0,220

У і- У2 0,220 0,220 0,780

У2 - У і 0,220 0,780 0,220

У і ^ У 2 0,780 0,780 0,220

У 2 ^ У і 0,780 0,220 0,780

Уі 1 У2 0,780 0,780 0,780

Уі 4 У2 0,220 0,780 0,780

Численный эксперимент был проведен и для мира объективных знаний, у1, У2 < 0,5. В нем удельные объемы априорных рефоров В0 и В1 оказались отличными от объемов оптимальных областей рефоров у1 и у2 и равными д0 = = ц1 = 0,118 (вместо 0,115 для полного метауниверсума), а удельные объемы оптимальных

ЛЛ

решений х = у1 и х = у2 равны дк = 0,231 -вдвое больше объемов априорных решений, однако средние значения точности априорных и фактических решений по одному источнику фактов совпали: Дк = 0,107.

Удельные объемы оптимальных областей решений по двум фактам - логического сложения у1 + у2 и умножения у1 ■ у2 равны дк = 0,15, как и средние ошибки Дк = 0,131 - такие же, как в полном метауниверсуме. Почти не изменились и сами области оптимальности конъюнкции и дизъюнкции. Остальные 10 рефоров, как и следовало ожидать, в объективном мире не информативны и имеют почти нулевые удельные объемы (в пределах погрешностей вычислительного эксперимента).

Средние уровни ошибок рефоров в конкретных ситуациях с известными результатами наблюденийу = (у1, у2) е {00, 01, 10, 11} могут сильно отличаться от интегральных средних во всех информационных ситуациях, приведенных выше. У двух источников фактических данных, скажем, двух свидетелей происшествия, результаты наблюдения могут быть согласованными (да, да) и (нет, нет), либо противоречивыми (да, нет) и (нет, да). Для точного вычисления зависимости локальной средней ошибки от результатов наблюдений у необходимо иметь полную априорику Зи = (х у1, у2, ху1, хУ2, у1у2, ху1У2). В локальных оценках точности или

Л

погрешности Д(у) решений х = Вк (у) проявляются ошибки только одного - либо первого, либо второго рода. Формулы ошибок априорных решений по одному факту Д(у) даны выше, остается изучить точности дизъюнкции и конъюнкции фактов, остальные 8 рефоров сво-

дятся к ним переходом от дезинформации у1 или у2 к ее отрицанию.

Л

Дизъюнктивное решение х = у1 + у2 в информационной ситуации согласованных фактов у = (00) равно 0, имеет среднюю ошибку только пропуска цели А+П (00) = ху1у2 , соответствующую значениям х = 1, У1 = 1, У2 = 1 - оба факта искажены. Например, два врача «пропустили» болезнь пациента, два эксперта дали отрицательные рецензии на ценную научную работу: у1 = у2 = 0. В трех оставшихся ситуациях с результатами наблюдений у = 01, 10, 11 возникаЛ

ют только ошибки второго рода, х=1, х = 0 -выделение ложной цели:

А+л = А+ (01) + А+ (10) + А+ (11), где

А+ (01) = ху1у2 = у2 — ху2 — у1у2 + ху1у2 ,

А+ (10) = ху1у2 = у1 — ху1 — у1у2 + ху1у2 ,

А+ (1 1) = хУ1У2 = — хУ1У2 .

В первых двух формулах факты противоречат друг другу, у1 Ф у2, последняя формула характеризует ошибку решения при взаимном подтверждении фактами у1 = у2 = 1.

Из этих формул следует: точность решения существенно выше, когда факты согласуются: у1 = у2, чем когда они противоречивы: у1 Ф у2. Действительно, суммарная ошибка ложной тревоги в информационной ситуации противоречивых фактов

А+ (01) + А+ (10) = у1 + у2 — 2у1у2 + 2 ху1у2.

Суммарная ошибка решения - пропуска цели и ложной тревоги при согласованных фактических данных, у1 = у2, равна А+П (00) + + А+л (11) = у1у2 . Она обнуляется, если ошибки

двух источников информации не совместны (классы ошибок у1 и у2 на диаграмме Эйлера не пересекаются). Если же ошибки источников независимы у1у2 = у1 • у2, суммарная ошибка логического сложения двух согласованных фактов существенно меньше ошибок каждого

источника, например, если эксперты ошибаются в 1% ситуаций, то итоговая погрешность дизъюнктивного решения равна 10-4 - достоверность согласованных решений двух независимых экспертов равна 0,9999.

Другой крайний случай - позитивная логическая связь между переменными у1 и у2, например, у1у2 = у1 - второй эксперт повторяет ошибки первого и, возможно, добавляет свои, тогда логическая сумма у1 + у2 имеет информативность первого источника у1 = х © у1. Суммарная ошибка ложного выделения цели А+л = У1 + У2 — У1У2 — ху1 — ху2 + ху1у2 , и если

помехи наблюдений у1 и у2 не зависят от цели х,

то А+л = (у + У2 — У^)(1 — х).

Л

Конъюнктивное решение х = у1 • у2 в информационной ситуации согласованных фактов у1 = у2 = 1 равно 1, имеет среднюю ошибку ложной тревоги - оба факта искажены, пропуск цели отсутствует, он возникает в трех других ситуациях:

А. (00) = ху1у2 , А, (01) = ху1у2 = ху1 — ху1у2 ,

А. (10) = ху1у2 = ху2 — ху1у2 ,

полная ошибка пропуска цели конъюнкцией фактов А,П = ху1 + ху2 — ху1у2 и если помехи не

зависят от цели, то А.П = (у1 + у2 — у1у2) • х.

Суммарная ошибка конъюнктивного решения при согласованных фактах, у1 = у2 , состоит из пропуска цели и ложной тревоги: А. (00) + А, (11) = у1у2 - совпадает с дизъюнктивным решением, а суммарная ошибка в ситуациях с противоречивыми фактами измеряет частость пропуска целей в противоречивых ситуациях: А. (01) + А. (10) = ху1 + ху2 — 2ху1у2 ,

для независимой цели ошибка пропуска равна (V + У2 _ 2у1у2Ух - существенно больше, чем при согласованных фактах и меньше полной ошибки пропуска цели на величину х-У1У2.

ВЫВОДЫ

Строгая формализация проблем диагностики, классификации явлений действительности основана на учете причинной и целевой, прямой и обратной ориентации информационных (знаковых, мыслительных) процессов, что ведет к различению в постановках прямых и обратных задач принятия решений. Прямая задача исследования состоит в построении перехода от причин к следствиям, от внутренних свойств проблемного объекта к внешним наблюдаемым

параметрам и признакам, а также к истинной классификации объектов. Обратная задача состоит в переходе от результатов наблюдений и известных теоретических, априорных данных к наилучшим оценкам искомых свойств изучаемых явлений. Решение прямой задачи есть модель источника информации в виде функции либо распределения, заданного моментами (средними) влияющих причин и результатов наблюдений. Решение обратной задачи основано на решении прямой задачи и является алгоритмом обработки данных и принятия решений. Для двоичных источников информации все возможные значения параметров решаемых проблем образуют априорное пространство, каждая точка которого определяет свойства универсума информационных ситуаций конкретной задачи, а все точки априорного пространства составляют метауниверсум. В нем выделяют области объективных знаний, несущих полезную информацию, и области дезинформации, которые при определенных условиях можно превратить в полезные знания. Выше были изучены простейшие логические формы знаний с числом фактических источников информации к = 0, 1 и 2. В классах априорных решений к = 0 и с одним фактом к = 1 все логические функции, предикаты максимально информативны в своих областях оптимальности, которые имеют равные удельные объемы в метауниверсуме и одинаковые уровни средней максимальной точности.

Для двух фактических источников знаний к = 2 в полном информационном мире, который содержит как достоверные знания, так и грубые ошибки или преднамеренную ложь, все возможные логические связи (преобразования и предикаты) разбиваются на три класса равнозначимых логических операций по удельным объемам и средним погрешностям принимаемых решений: 1) нульарные и унарные операции, 2) информативные бинарные операции, 3) неинформативные операции дифференции и эквиваленции фактов, при этом априорный и фактический источники равнозначимы, а решения из второго класса, принимаемые по двум фактам и априорике, имеют значительно меньшие области оптимальности и более высокий уровень ошибок, чем решения из первого класса, т. е. информационно более выгодны априорные данные и один достоверный факт. В объективном метауниверсуме - виртуальном мире научных знаний - оптимальными по точности остаются нульарные, унарные логические операции без отрицаний фактов, дизъюнкция и конъюнкция информативных фактов, осталь-

ные логические связи менее информативны, либо порождают дезинформацию. По-видимому, эти особенности сохранятся и при к > 2. Число возможных логических преобразований растет гиперэкспоненциально с увеличением к: для трех фактов существует 256 различных рефоров, для четырех - их 65 тысяч. Однако если пренебречь зависимостями между ошибками, то полученные выше формулы для к = 2 можно приближенно перенести на произвольные к. Для этого необходимо выбрать два наиболее информативных факта у1 и у2 с наименьшими ошибками у1 и У2 и получить субоптимальное решение х12, а также оценку его погрешности у12. Далее это решение можно последовательно улучшать, привлекая попарно другие факты в предположении независимости ошибок решений. Оптимальные и субоптимальные по точности дискретные и непрерывные решения с произвольным числом зашумленных фактических источников и искаженной априорике (см.

[4]).

Итак, априорная информация о проблемном объекте, источниках фактических данных, о факторах, влияющих на объект и процесс наблюдений, является чрезвычайно важной во всех ситуациях принятия решений. В теоретической информатике этот источник знаний формально представлен рефором априорики Ва^/, в предметных областях он зачастую слабо формализован, несмотря на большую ценность априорных данных, особенно недостатки формализации касаются оценок достоверности результатов рефора Ва [1]. В однородном метауниверсуме логические связи из одного класса «равноправны», однако реальный информационный мир неоднороден, распределение д(/ в априорном пространстве неравномерное, в частности, обман встречается чаще в критических ситуациях и стремление к истине в целом превалирует над ложью.

Еще одно усложнение решенных выше задач состоит в учете распределения д(А/ ошибок априорики А/ = (А х, А у1, А у2, А ху1, А ху2,

Ау1у2, А ху1у2,...), особенно в проблемных ситуациях, в которых область неопределенности априорики QAJ пересекает границы оптимальности рефоров Вк и рефора неопределенности Ве при Атт > АГ. Модели принятия решений становятся более адекватными информационной реальности, если в них учитываются противоречия между фактами и априорикой, на-

пример, в шкале тетралогики, содержащей критический информационный ноль □ - киноль, знак абсурдного результата информационного процесса [1]. Указанные усложнения моделей принятия решений доступны современным средствам информационного моделирования и представляют ближайшую перспективу информационных технологий.

СПИСОК ЛИТЕРАТУРЫ

1. Зверев Г. Н. Теоретическая информатика и ее основания. Т. 1. М.: Физматлит, 2007. 592 с.

2. Дуда Р., Харт П. Распознавание образов и анализ сцен. М.: Мир, 1976. 511 с.

3. Зверев Г. Н. Частотная логика - альтернатива классической логики в новых информационных технологиях // Информационные технологии. 1998. № 11. С. 3-11.

4. Зверев Г. Н Дискретно-непрерывная сенс-формика // Основания теоретической информатики. Разд. 9. Уфа: УГАТУ, 1999. 204 с.

ОБ АВТОРАХ

Зверев Геннадий Никифорович, проф. каф. проектирования средств информатики. Дипл. инж.-геофизик (Грозненск. нефт. ин-т, 1958). Д-р техн. наук по геофизике (МИНХиГП, 1982).

Иссл. в обл. информатики и искусственного интеллекта.

Боровская Радмила Владимировна, вед. прогр. ОПНПиНКВК УГАТУ. Дипл. инж.-системо-аналитик по САПР (УГАТУ, 1993). Иссл. в обл. автоматиз. инф. систем.

Колупаева Наталья Александровна, инж. 1 кат. каф. КМ. Дипл. инж. по САПР (УГАТУ, 2001). Иссл. в обл. инф. технологий в мед. диагностике.

i Надоели баннеры? Вы всегда можете отключить рекламу.