УДК 53.01:53.05+519.2 И.И. ГОРБАНЬ*
ПОРОГОВЫЕ ФУНКЦИИ ДЛЯ ИЗМЕРЕНИЯ ИНТЕРВАЛА СТАТИСТИЧЕСКОЙ УСТОЙЧИВОСТИ
Институт проблем математических машин и систем НАН Украины, Киев, Украина
Анотаця. Порогова функция, що зазвичай використовуеться для вим1рювання интервалу стати-стичног стткост!, не забезпечуе коректний поды процеав на статистично сттю i статистично несттю процеси. Запропоновано варiант оптимiзацiг пороговог функцп. Встановлено, що за-стосування на практиц оптимiзованог пороговог функцп не завжди виправдано. Ключов1 слова: статистична сттшсть, параметр статистичног нестiйкостi, теорiя гтер-випадкових явищ, гранично нестткий процес.
Аннотация. Пороговая функция, обычно используемая для измерения интервала статистической устойчивости, не обеспечивает корректное разделение процессов на статистически устойчивые и статистически неустойчивые процессы. Предложен вариант оптимизации пороговой функции. Установлено, что использование на практике оптимизированной пороговой функции не всегда оправдано.
Ключевые слова: статистическая устойчивость, параметр статистической неустойчивости, теория гиперслучайных явлений, предельно неустойчивый процесс.
Abstract. The threshold function, usually used for the assessment of the interval of statistical stability does not divide processes correctly on statistically stable and unstable ones. The approach for optimization of the threshold function is proposed. It is found that using in practice of the optimized threshold function does not always justify.
Keywords: statistical stability, parameter of statistical instability, theory of hyper-random phenomena, limit unstable process.
1. Введение
Физической основой математической статистики является феномен статистической устойчивости, проявляющийся в стабильности статистик (стабильности функций выборки). На протяжении веков считали, что феномен статистической устойчивости идеален в том смысле, что статистики, сформированные по реальным выборкам, обладают свойством сходимости или, иначе, реальные оценки состоятельны.
Экспериментальные исследования реальных процессов разной физической природы показывают [1-4], что реальные статистики тенденции к сходимости не проявляют. Тенденция к сходимости наблюдается лишь при небольшом объеме выборки. При большом же объеме она отсутствует.
Разные процессы и разные статистики обладают разной степенью статистической устойчивости. Для характеристики степени статистической устойчивости процессов по отношению к определенным статистикам используют различные параметры статистической неустойчивости. К ним относятся, например, зависящие от объема выборки N параметры статистической неустойчивости по отношению к среднему yN и по отношению к средне-
квадратическому отклонению (СКО) ГА., а также связанные с ними параметры
h-N ~ Уn!Тоn > — rN/y0N .
Параметры yN и rw - безразмерные. Они представляют собой нормированные дисперсии соответственно выборочного среднего и выборочного СКО, а y0N - эталонный параметр yN , соответствующий белому гауссовскому шуму, который, как показали иссле-
© Горбань И.И., 2016
ISSN 1028-9763. Математичш машини i системи, 2016, № 4
дования [5], статистически устойчив как по отношению к среднему, так и по отношению к СКО.
Теоретически все процессы можно разделить на статистически устойчивые и статистически неустойчивые. По определению [2] случайный процесс статистически устойчив по отношению к среднему, если при N —» оо параметр статистической неустойчивости уЛ. стремится к нулю, и статистически устойчив по отношению к СКО, если при том же условии стремится к нулю параметр статистической неустойчивости ГЛ..
Судя по экспериментальным исследованиям, все реальные процессы статистически неустойчивы. Однако существенные нарушения статистической устойчивости проявляются не сразу. При относительно небольшом объеме выборки нарушения статистической устойчивости пренебрежимо малы, что открывает возможности эффективного и корректного использования классической теории вероятностей, основанной на гипотезе идеальной статистической устойчивости (сходимости статистик). Интервал, на котором нарушения устойчивости пренебрежимо малы, - интервал статистической устойчивости [1, 2, 4-7] -зависит от процесса и рассматриваемой статистики.
В качестве оценок интервалов статистической устойчивости по отношению к среднему и СКО принимают объемы выборок (или интервалы наблюдения), при которых наблюдаются превышения соответственно оценками у*. и Г*, параметров у,, и Г,, установленной пороговой функции.
В качестве пороговой функции обычно используют зависящую от объема выборки N величину у' = yov +ка, , где к - фиксированный параметр, определяющий высоту
Ion
порога, а с * - СКО оценки у* параметра y0N (аналитические выражения для величин
y0 n
y0N и с* приведены в [2, 5]).
Недостатком пороговой функции у')Л. является то, что она не является оптимальной границей, корректно разделяющей процессы на статистически устойчивые и статистически неустойчивые. Эта функция стремится к нулю при N —» оо . Это означает, что она смещена в сторону статистически устойчивых процессов. Из-за смещения при проведении теоретических исследований на бесконечно большом интервале наблюдения всегда часть статистически устойчивых процессов ошибочно классифицируется как статистически неустойчивые, а при измерении интервалов статистической устойчивости результаты измерений всегда оказываются заниженными.
Целью настоящей статьи является оптимизация пороговой функции и исследование целесообразности применения оптимизированной пороговой функции при решении практических задач.
2. Предельно неустойчивый процесс
Рассчитать оптимальную (несмещенную) границу раздела статистически устойчивых и неустойчивых процессов без каких-либо дополнительных предположений относительно характера рассматриваемых процессов затруднительно. Однако задача значительно облегчается, если решение искать в классе процессов, степень устойчивости (неустойчивости) которых характеризуется монотонной функцией некоторого параметра. В этом случае искомой несмещенной пороговой функцией является функция, соответствующая предельно неустойчивому (или предельно устойчивому) процессу.
Ставя задачу поиска оптимальной границы, желательно потребовать, чтобы рассматриваемый класс процессов включал большое число процессов разного типа. Указанным требованиям удовлетворяет, например, класс, состоящий из процессов х), спек-
тральная плотность мощности (СПМ) которых описывается степенной функцией, представляемой в непрерывном случае выражением £ (/) = 1 / f^), а в дискретном -
1
(*- 1)р'
к = 2,И/2,
где / - частота, (3 - параметр формы спектра, к - номер спектрального отсчета. К этому классу процессов относятся различные цветные шумы (фиолетовый, синий, белый, розовый, коричневый, черный), фликкер-шумы [8, 9], фрактальные шумы [10, 11] и др. [2].
Исследования показывают [2, 4-7], что процесс со степенной СПМ статистически устойчив как по отношению к среднему, так и по отношению к СКО, если параметр формы (3 меньше единицы, и статистически неустойчивый, если Р > 1. Процесс х(() со степенной СПМ, у которого параметр (3 = 1, представляет собой предельно неустойчивый процесс. Соответствующий этому процессу параметр статистической неустойчивости уш можно использовать в качестве пороговой функции.
Представление о зависимости параметров статистической неустойчивости у0ЛГ и
уш (соответствующих процессам со степенной СПМ с параметрами р = 0 и (3 = 1), а также пороговой функции упд,, соответствующей параметрам (3 = 0 и £ = 3, от объема выборки дает рис. 1.
Как видно из рис. 1, функции уш и у1м не пересекаются и по мере увеличения объема выборки расстояние между ними в логарифмическом масштабе быстро нарастает. Это означает, что при использовании пороговой функции у1м значительная часть статистически устойчивых процессов ошибочно относится к числу статистически неустойчивых процессов и оценки интервала статистической, устойчивости оказываются сильно заниженными. Применение пороговой функции уш ситуацию исправляет, однако следует иметь в виду, что исправляет лишь для процессов, СПМ которых описывается степенной функцией.
При использовании пороговой функции уш представляется целесооб-
Рис. 1. Зависимость параметра статистической неустойчивости ут, рассчитанного для белого шума (параметр Р = 0) (пунктирная линия), пороговой функции у,'д/, рассчитанной для белого шума и параметра к = 3 (точечная линия), и параметра статистической неустойчивости уш, рассчитанного для предельно неустойчивого процесса (параметр Р = 1) (сплошная линия) от объема выборки N
разным вместо эталона у0ЛГ использовать уш. Тогда параметры статистической неустойчивости /?, , //,. описываются выражениями = у ¥/у| У , Ны - Гу/у| у , а критерием нарушения устойчивости служит превышение соответствующих оценок И*, Н* порогового значения, равного единице.
Пороговая функция уш позволяет определить верхнюю границу оценки интервала
статистической устойчивости, и в этом ее достоинство. Однако область ее практического применения ограничена. Для объяснения причин обратимся к примеру.
3. Пример
Рассмотрим конкретный пример оценки интервала статистической устойчивости процесса, представленного одной из 60-часовых записей колебаний напряжения городской электросети [2]. Этот процесс неоднократно использовался для тестирования, в частности, в работах [1-4, 7]. Описание этого процесса и различные его характеристики приведены в [2].
а б
Рис. 2. Оценки параметров статистической неустойчивости по отношению к среднему к (а) и по
отношению к СКО Н * (б) для фрагментов исследуемого процесса, определяемых оценками интер*
вала статистической устойчивости по отношению к среднему т
На рис. 3 приведены оценки интервала статистической устойчивости по отношению к среднему т1,т2,...,т0, на рис. 4 - оценки параметров статистической неустойчивости И0
и Н*0 по отношению к среднему и к СКО для последовательности оценок т*,!^,...,!^, а на
, „ „ _* рис. 5 - усредненные оценки интервала статистической устойчивости т по отношению к
среднему. Варианты «а» получены при использовании пороговой функции уш, а варианты
«б», заимствованные из работы [6], - при использовании пороговой функции у^ .
Сравнение рис. 3 а с рис. 3 б и рис. 5 а с рис. 5 б подтверждает очевидные предположения, что количество оценок, которые можно получить при использовании пороговой функции уш, меньше, чем при использовании пороговой функции у^ , а усредненный интервал статистической устойчивости по отношению к среднему принимает большие значения. В данном случае количество оценок, полученных при использовании пороговой функции уш, примерно в десять раз превзошло количество оценок, полученных при использовании пороговой функции у^ , а усредненный интервал статистической устойчивости оказался больше примерно в три раза (в конце интервала наблюдения т* =110 + 100 мин вместо т* = 35 + 30 мин).
а б
Рис. 3. Динамика изменения оценок интервала статистической устойчивости по отношению к среднему т* при использовании пороговых функций уш (а) и у+ом (б)
На рис. 2 изображены результаты расчета оценок к*, Н* параметров статистической неустойчивости кг, Ны на прилегающих друг к другу интервалах статистической устойчивости при использовании в качестве границы пороговой функции у .
б
Рис. 4. Оценки параметров статистической неустойчивости по отношению к среднему к* (полужирные сплошные линии) и по отношению к СКО Н * (полужирные пунктирные линии) последовательностей оценок х1,х2,...,х0 при использовании пороговых функций у,,. (а) и у,,Д;. (б). Тонкой пунктирной прямой на рисунке а и полужирной линией на рисунке б изображены соответственно пороговые функции уш и у+т
а
а б
Рис. 5. Динамика изменения усредненных оценок т * статистической устойчивости по отношению к среднему (полужирные сплошные линии) при использовании пороговых функций уш (а) и у,, Л,. (б). Полужирными пунктирными линиями изображены границы допусков т± = Т ±Зо_,
гл л * * *
Судя по рис. 4 а, последовательность оценок т1,т2,...,т0 статистически устойчива
по отношению к среднему на протяжении практически всего интервала наблюдения, однако вопрос о статистической устойчивости по отношению к СКО не столь очевиден. Это означает, что приведенным на рис. 5 а границам допуска доверять особенно нельзя.
Попытка применить пороговую функцию уш для оценки интервала статистической устойчивости по отношению к СКО натолкнулась еще на одну трудность: на интервале наблюдения удалось сформировать лишь одну оценку, равную 770 мин, то есть для оценки погрешности измерений длительности исследуемого процесса оказалось недостаточно.
Повышенные требования к длительности исследуемых процессов - не единственное обстоятельство, ограничивающее возможность и целесообразность использования на практике пороговой функции уш. Реальные процессы могут не принадлежать к классу процессов с СПМ, адекватно описываемых степенной функцией. Ошибочное же отнесение процесса к категории статистически устойчивых (возможность которого возрастает при применении пороговой функции уш) влечет за собой необоснованное использование статистических методов теории вероятностей, что может приводить к существенным потерям качества обработки.
Важным обстоятельством, ограничивающим область практического применения пороговой функции уш, является то, что для корректного выбора варианта статистической
обработки данных большого объема важно знать, как правило, не точную величину интервала статистической устойчивости, а величину интервала наблюдения, на котором гарантированно, с высокой степенью достоверности, обеспечивается сохранение статистической устойчивости. Пороговая же функция уш не позволяет оценить эту величину.
Перечисленные и другие обстоятельства указывают на целесообразность использования на практике пороговой функции у^, обеспечивающей получение, хотя и заниженных, но зато гарантированных оценок.
Следует обратить внимание, что при статистической обработке результатов многократных измерений интервала статистической устойчивости последовательность результатов однократных измерений может быть статистически неустойчивой (см. рис. 4). Поэтому
для получения корректной усредненной оценки и корректной величины погрешности измерений необходимо проверять последовательность результатов однократных измерений на предмет их статистической устойчивости и в случае нарушения устойчивости использовать неклассические методы обработки, в частности, предлагаемые теорией гиперслучайных явлений [1, 2, 7].
4. Выводы
На основании проведенных исследований можно сделать следующие выводы.
1. Обычно используемая при оценке интервала статистической устойчивости пороговая функция параметров статистической неустойчивости уЛ. и Гл. не является оптимальной границей, обеспечивающей корректное разделение процессов на статистически устойчивые и статистически неустойчивые процессы. Эта пороговая функция смещена в сторону статистически устойчивых процессов. Из-за смещения при проведении теоретических исследований на бесконечно большом интервале наблюдения всегда часть статистически устойчивых процессов ошибочно классифицируется как статистически неустойчивые, а при измерении интервалов статистической устойчивости результаты измерений всегда оказываются заниженными.
2. Рассчитать оптимальную (несмещенную) границу раздела статистически устойчивых и неустойчивых процессов без каких-либо дополнительных предположений относительно характера рассматриваемых процессов затруднительно. Однако задача значительно облегчается, если решение искать в классе процессов, степень устойчивости (неустойчивости) которых описывается монотонной функцией некоторого параметра. В этом случае искомой несмещенной пороговой функцией является функция, соответствующая предельно неустойчивому (или предельно устойчивому) процессу.
3. У процессов, спектральная плотность мощности (СПМ) которых описывается степенной функцией 1/ (/ - частота, (3 - параметр формы спектра), степень неустойчивости является монотонной функцией параметра в . В классе таких процессов предельно неустойчивым является процесс с СПМ вида 1 / / . Соответствующий этому процессу параметр статистической неустойчивости уш представляет собой несмещенную пороговую
функцию, обеспечивающую оптимальное (в рассматриваемом классе) разделение процессов на статистически устойчивые и неустойчивые.
4. Пороговая функция уш позволяет определить верхнюю границу оценки интервала статистической устойчивости и в этом ее достоинство. Однако область ее практического применения ограничена. Связано это с рядом причин:
- реальные процессы могут не принадлежать к классу процессов с СПМ, адекватно описываемых степенной функцией, а ошибочное отнесение процесса к категории статистически устойчивых влечет за собой необоснованное использование статистических методов теории вероятностей, что может приводить к существенным потерям качества обработки;
- для правильного выбора варианта статистической обработки данных большого объема важно знать, как правило, не точную величину интервала статистической устойчивости, а величину интервала наблюдения, на котором гарантированно обеспечивается сохранение статистической устойчивости, а пороговая функция уш не позволяет оценить эту величину;
- оценки интервала статистической устойчивости, соответствующие пороговой функции у , могут существенно превосходить оценки, получающиеся при применении
пороговой функции у1м . Поэтому замена пороговой функции функцией уш сопряже-
на с существенным повышением требований к длительности исследуемых процессов, что не всегда реализуемо.
Эти и другие обстоятельства указывают на целесообразность использования на практике пороговой функции , обеспечивающей получение, хотя и заниженных, но зато гарантированных оценок.
5. При статистической обработке результатов многократных измерений интервала статистической устойчивости следует иметь в виду, что последовательность результатов однократных измерений может оказаться статистически неустойчивой. Поэтому для получения корректной усредненной оценки и корректной величины погрешности измерений необходимо проверять последовательность результатов однократных измерений на предмет их статистической устойчивости и в случае нарушения устойчивости использовать неклассические методы обработки, в частности, предлагаемые теорией гиперслучайных явлений.
СПИСОК ЛИТЕРАТУРЫ
1. Горбань И.И. Теория гиперслучайных явлений: физические и математические основы [Электронный режим] / Горбань И.И. - К.: Наукова думка, 2011. - 318 с. - Режим доступа: http: //www.immsp.kiev .ua/perspages/gorban_i_i/index.html.
2. Горбань И.И. Феномен статистической устойчивости [Электронный режим] / Горбань И.И. - К.: Наукова думка, 2014. - 444 с. - Режим доступа: http://www.immsp.kiev.ua/perspages/ gorban_i_i/index.html.
3. Горбань И.И. Феномен статистической устойчивости / И.И. Горбань // Журнал технической физики. - 2014. - Т. 84, № 3. - С. 22 - 30.
4. Горбань И.И. Случайность и гиперслучайность [Электронный режим] / Горбань И.И. - К.: Наукова думка, 2016. - 288 с. - Режим доступа: http://www.immsp.kiev.ua/perspages/ gorban i i/index.html.
5. Горбань И.И. Статистически неустойчивые процессы: связь с фликкер, неравновесными, фрактальными и цветными шумами / И.И. Горбань // Известия вузов. Радиоэлектроника. - 2012. - Т. 55, № 3. - С. 3 - 18.
6. Горбань И.И. Измерение интервалов статистической устойчивости / И.И. Горбань // Математич-ш машини i системи. - 2016. - № 2. - С. 128 - 137.
7. Gorban I.I. The statistical stability phenomenon / Gorban I.I. - Springer, 2017. - 361 p.
8. Жигальский Г.П. Неравновесный l/f -шум в проводящих пленках и контактах / Г.П. Жигаль-ский // Успехи физических наук. - 2003. - Т. 173, № 5. - С. 465 - 490.
9. Коган Ш.М. Низкочастотный токовый шум со спектром типа 1/ f в твердых телах / Ш.М. Коган // Успехи физических наук. - 1985. - Т. 145, Вып. 2. - С. 285 - 325.
10. Ширяев А.Н. Основы стохастической финансовой математики. Т. 1. Факты, модели / Ширяев АН. - М.: ФАЗИС, 1998. - 512 с.
11. Кроновер Р.М. Фракталы и хаос в динамических системах. Основы теории / Кроновер Р.М. -М.: Постмаркет, 2000. - 348 с.
Стаття над1йшла до редакцп 12.09.2016