CC BY
180
Анализ экспериментальных данных по субъективной оценке качества восприятия QoE при передаче видео контента по ОТТ
В настоящее время видео-сервис на базе OTT является неотъемлемой частью "Интернет-жизни" практически любого пользователя. Миллиарды видео-роликов размещены в социальных сетях, миллионы видео-уроков выдаются в результатах поисковых машин, тысячи провайдеров телеканалов и фильмов предоставляют пользователям возможность смотреть интересующие видео онлайн. В таких условиях крупные сервис-провайдеры начинают все больше уделять внимание качеству предоставляемых услуг. В предыдущих статьях были пояснены базовые понятия и механизмы предоставления OTT-услуг, проанализированы технологии стриминга и определены факторы, влияющие на качество восприятия QoE данных услуг. Подробно описана экспериментальная платформа для исследования качества восприятия QoE для услуг потоковой передачи видеофайлов по технологии OTT. Приводятся результаты предварительных исследований по определению зависимости качества восприятия видео, выраженные в оценках MOS, от влияющих параметров качества сети QoS, полученные на экспериментальной платформе. Были сделаны выводы о характере зависимости QoE от величины потерь пакетов при различных значениях пропускной способности и используемой технологии стриминга. Резуль-Кпючевые слова: OTT, взатосвязь QoS QoE, таты, полученные в статье, в дальнейшем будут использованы при разработке модели зависи-
моделирование QoE, тигационный а-ещ, мости качества восприятия пользователем (QoE) от сетевых параметров качества (QoS) при
Pseudo-HTTP RTMP предоставления перспективных услуг на основе концепции OTT.
Деарт В.Ю., Кожухов И.С., Милицин Ю. А., Пилюгин А.В.,
МТУСИ
Актуальность
Согласно статистике 21,4 миллиарда видеороликов различного содержания просматриваются ежемесячно, более 80% процентов Интернет аудитории пользуется просмотром видео в онлайне, среднестатистический пользователь сети Интернет просматривает более 500 минут видеороликов ежемесячно. Крупнейший оператор видеоматериалов в США Netflix в 2013 г. превысил отметку в 29 млн. подписчиков. Наиболее успешная компания вещания бейсбольных трансляций MLB.TV регистрирует более 1 млн. просмотра трансляций игр в день. Все эти сервисы предоставляются пользователям согласно модели OTT и собственных или арендованных мощностей компании видеоматериалы доставляются средствами сети Интернет потребителям, которыми являются все пользователи Интернет.
В России OTT развивается в большой степени за счёт инициативы операторов, поскольку оператор предоставляет первичную необходимость для подобного рода услуг — CDN (сеть доставки контента).
Среди российских Интернет-кинотеатров лидерами являются Ivi.ru и Zoomby, данные сервисы примерно сопоставимы по аудитории и предлагают пользователям новинки кино для
просмотра через Интернет. Такие онлайн-кино-театры и крупные медийные сайты формата Забава.ру являются точками доступа пользователей к сервису просмотра видео-материалов согласно концепции OTT. Рост популярности подобного рода услуг ведёт к росту числа передаваемых видеоматериалов в сети Интернет в сторону пользователей, и, следовательно, обуславливает рост и развитие OTT-сервисов.
Для доставки контента пользователям зачастую используются различные технологии стриминга: RTMP, Pseudo-HTTP streaming, HDS (Adobe), HLS (Apple), Silverlight Smooth Streaming (Microsoft), DASH. В большинстве случаев достаточно средств, реализуемых на базе Flash-плееров (HDS и RTMP), для устройств от Apple в ряде случаев используется технология HLS. В последнее время всё чаще применяются встроенные в браузеры плееры видеоматериалов на базе технологий WebM.
Отличительная особенность предоставления доступа к видео согласно концепции OTT — минимальные затраты на инфраструктуру передачи данных от источника видеоматериалов до пользователя. Как правило, используется сущз-ствующая сеть с существующими условиями передачи, которые изменяются в процессе просмотра видеоматериала. Данная особенность выделяет OTT концепцию от концепции традиционного IPTV-решения, в котором пользователю можно гарантировать определённые показатели качества передача информации в канале.
Традиционная концепция к составлению соглашения по уровню сервиса (SLA), которая подходит для сетей с IPTV, не применима для услуг на базе OTT, поскольку невозможно обеспечить параметры! качества передачи данных (QoS) видеоматериалов, такие как задержка, джиттер, потери. Для регламентирования уровня качества доступа к сервису видеоматериалов на базе OTT требуется составить интеллектуальную методику оценки качества восприятия (QoE) на базе изменяющихся во времени параметров QoS.
Ошибки в IPTV
MPEG кодирование, применяемое при ТВ-вещании по пакетным сетям, сжимает видеоизображение с выделением трех различных типов кадров: I-кадры, B-кадры, и P-кадров. I-кадр содержит такую информацию в одном кадре видеопотока, что декодер MPEG может воссоздать исходный кадр с использованием информации только из I-кадра [1 ]. Для достижения требуемого сжатия видео используются специальные методы пространственного и временного кодирования для создания B- и P-кадров, содержащих частичную информацию, связанную с I-кадром. B-кадр — это закодированный видеокадр, который может быть декодирован с использованием информации связанного с ним I-кадра. P-кадр — это закодированный видеокадр, который может быть декодирован с использованием информации из связанных с ним I-кадра и B-кадра.
Эти I-, B- и P-кадры передаются по сети в 188-байтовых MPEG TS (Transport Stream) пакетах, инкапсулированных в IP-пакеты. Один пакет IP способен содержать приблизительно семь TS-пакетов. Потеря любого пакета, особенно содержащего I-кадры, может привести к серьезным проблемам, связанным с воспринимаемым качеством конечным пользователем (QoE).
Если ошибка произошла в результате потери пакета транспортного потока (MPEG TS), не содержащзго I-кадр, то результатом является изображение, которое содержит небольшие искажения, но не имеет таких симптомов, как "квадратики", "размытость", "замирания" в кадрах. Симптомы этого типа могут накапливаться, ухудшать качество, пока видео не обновится с приходом нового I-кадра. Эффект может наблюдаться в течение нескольких последних секунд. Выбор времени следующего I-кадра будет зависеть от длины группы закодированных изображений (GOP). Она может составлять 15 кадров, как в MPEG-2, или может быть 60, 100 или 300 кадров при использовании таких кодеков, как H.264/AVC, что делает видео поток еще более восприимчивым к потерям пакетов, так как каждый H.264 закодированный кадр содержит больше информации из-за повышенной эффективности сжатия [1]. Поэтому потери кадров при использовании кодека H.264 могут иметь большее влияние на впечатление от просмотра.
Потеря I-кадра имеет катастрофические последствия для качества изображения. Декодер полностью утрачивает точку отсчета, с которой начинается декодирование соответствующих B-и P-кадров. Эта ситуация будет исправлена только при получении и правильном декодировании следующзго неповрежденного I-кадра.
В отличие от IPTV, видеоматериалы, передаваемые по технологии OTT-стриминга, не страдают напрямую от потерь пакетов. Из-за того, что в OTT за доставку информации отвечает стек протоколов HTTP/TCP, любая потеря сразу же будет компенсирована механизмами гарантированной доставки TCR В работе [2] было показано, что значимыми метриками QoE для услуг на базе OTT являются:
— события ребуферизации;
— снижение качества видео;
— колебания качества видео;
— (ре)буферизация из-за действий пользователя.
В результате при вещании по технологии OTT вместо рассыпающейся картинки пользователь наблюдает остановку воспроизведения в момент наступления события ребуферизации. Таким образом, принципы возникновения нарушения качества видеопотока кардинальным образом различаются для технологий IPTV и OTT.
Имитационный стенд
а) схема стенда
В работе [3] приведено описание разработанного имитационного стенда для проведения экспериментов по оценке воспринимаемого пользователями качества QoE видео услуг при фиксированных значениях сетевых параметров QoS.
Структурная схема стенда с учётом размещения аппаратных компонент представлена на рис. 1. Веб-прокси сервер имеет ряд виртуальных интерфейсов для каждого клиента, с целью управления характеристиками QoS персонально посредством специализированного программного обеспечения (ПО) — WANem.
В рамках аппаратной платформы! сетевой трафик виртуальных машин передаётся без искажений и с минимальными постоянными задержками, очереди создаются только в операционных системахклиентских машин и могут быть увеличены на период модельного стендирования.
Подключение клиентских машин к стенду происходит через веб-прокси и внешний интерфейс аппаратной платформы. Хост-сервер подключается одним высокоскоростным интерфейсом Ethernet 1 Гбит/с (Gigabit Ethernet) в локальную сеть. В локальную сеть также включены и клиентские машины с сетевыми интерфейсами Ethernet 100 Мбит/с (Fast Ethernet). Таким образом, при условии достаточности производительности сетевого оборудования, такая схема подключения гарантирует отсутствие "узких" мест в сети передачи между сервером и клиентом.
б) ПО задействованное на стенде
В задачи аппаратной платформы входит обеспечение необходимой производительности для всех виртуальных машин, реализующих услугу предоставления видеоматериала. Аппаратная платформа предоставляет общий пул оперативной памяти и дисковый массив для хранения большого объёма информации, а также процессорные ядра (существующие и виртуальные) для обработки информации. Программное обеспечение, распределяющее аппаратные ресурсы хост-сервера и контролирующее виртуальные машины называется ги-первизор (hypervisor).
Для целей моделирования на аппаратной платформе с помощью гипервизора Oracle VirtualBox создаются три виртуальные машины для размещения следующих компонент макета учебно-исследовательского стенда:
• виртуальная машина 1 — веб-прокси сервер + WANem;
• виртуальная машина 2 — веб-сервер Apache;
• виртуальная машина 3 — медиа-сервер.
Все три виртуальные машины оснащаются
операционными системами, предназначенными для поддержки работы специализированного программного обеспечения. Виртуальные машины 1 и 2 оснащаются операционной системой Ubuntu 12.02 (64-bit), виртуальная машина 3 оснащается операционной системой Windows Server 2008 R2 Standard (64-bit).
Рис. 1. Структурная схема имитационного стенда
Для проведения эксперимента на стенде необходимо эмулировать работу сети передачи, а именно ее влияние на параметры передачи.
В реальной сети на параметры обслуживания трафика (задержка, джиттер, процент потерь) влияют, в большинстве своём, очереди в обслуживающих устройствах (маршрутизаторах). На стенде воспроизводятся идеальные условия передачи трафика с целью снизить влияние стендового оборудования на результаты эксперимента. При этом на виртуальную машину 1 (веб-прокси сервер) добавляется специализированное программное обеспечение WANem, позволяющее напрямую управлять механизмом обработки трафика на сетевом интерфейсе.
WANem (Wide Area Network Emulator) — это эмулятор глобальной сети (сети Интернет). Позволяет эмулировать большое количество характеристик глобальной сети. В первую очередь, это полезно для тестирования и отладки приложений, которым предстоит работать на сети в реальных условиях, без физического погружения в эти самые условия [4].
Функциональные возможности WANem позволяют имитировать и вносить в канал следующие параметры качества обслуживания в транспортной сети:
— длина очереди пакетов;
— величина задержки;
— величина вариации задержки (джиттер);
— процент потери пакетов;
— процент дублированных пакетов;
— процент пакетов с ошибкой;
— процент пакетов приходящих не по порядку;
— доступная полоса пропускания;
— разрывы соединения.
Видео материал Технология венчания Качество
Природа RTMP Низкое Среднее Высокое (HP) Высочайшее {Fuil-HP)
Pseudo-HTTP streaming Низкое Среднее Высокое mm Высячамшге (Full-HD)
HDS Низкое Среднее ЭУСРКО? CND) Высочайшее (Full-HP)
Бейсболл RTMP Ншв&е Высоко? Г HP) f Full-HP)
Pseudo-HTTP streaming Шгаае ВЫГСКЮШР) Высочайшее (Full-HP)
HDS Низкое Среди р? Вмео^ 1НШ
РИс. 3. Графический интерфейс веб-сервера для выбора режима просмотра видео
Клиентские машины взаимодействуют с веб-сервером Apache и медиа-сервером через виртуальные туннели: tun0, tun 1, ..., tun9, созданные на веб-прокси сервере (рис. 1). Параметры качества каждого виртуального тоннеля задаются с помощью WANem.
WANem обладает интуитивно понятным графическим интерфейсом (GUI), позволяющим легко задавать требуемые для эксперимента параметры качества сети (рис. 2). Создавая набор правил для каждого виртуального туннеля в отдельности, исследователь, образно выражаясь, создает изолированную виртуальную среду передачи для каждой клиентской машины, с заданными параметрами качества.
Дополнительно к операционной системе Ubuntu на виртуальную машину 2 устанавливается программное обеспечение веб-сервера Apache 2.2.22, для предоставления доступа к файлам по протоколу HTTP
При помощи веб-сервера Apache с дополнительным модулем h.264_streaming, который управляет прогрессивной загрузкой видеофайлов, на стенде организуется псевдо-потоковое вешрние (Pseudo-HTTP streaming). Данный модуль позволяет в режиме реального времени принимать от пользователя запросы на загрузку файла с указанием сдвига от начального байта данных, таким образом осуществляется управление моментом просмотра видеоматериала.
Рис. 2. Графический интерфейс WANem настройки параметров качества сети
Для реализуемых на стенде задач веб-сервер настраивается таким образом, чтобы предоставить пользователю веб-интерфейс (рис. 3) выбора режимов просмотра видеоматериалов. Выбор качества просматриваемого видеоматериала осуществляется пользователем на начальной странице. Доступны четыре различных качества видеороликов:
• низкое — разрешение изображения 240 пикселей по вертикали с прогрессивной разверткой;
• среднее — разрешение изображения 480 пикселей по вертикали с прогрессивной разверткой;
• высокое — разрешение изображения 720 пикселей по вертикали с прогрессивной разверткой;
• высочайшее — разрешение изображения 1080 пикселей по вертикали с прогрессивной разверткой.
На виртуальной машине 3 устанавливается Adobe Flash Media Server 5.0, необходимый для проигрывания видео в динамическом (HDS/HLS) и потоковом (RTMP) режимах.
Организация эксперимента
Эксперимент проводился в соответствие с методологией, описанной в Рекомендациях ITU-R BT.500-13 и ITU-T P.911 [5, 6].
Проведение измерений согласно методике PSQA (Pseudo-Subjective Quality Assessment) является трудоемким процессом, требующим достаточного количества человеческих и технических ресурсов [7, 8]. Так как данный эксперимент имеет ограниченную техническую базу, то для его проведения более подходящей является методика Рейтинг Абсолютной Категории с одиночным воздействием ACR SS (Absolute Category Rating Single-stimulus — метод с одним источником воздействия).
Мы поочерёдно задавали на веб-прокси сервере входные параметры сети передачи с помощью WANem. Пользователь участвующий в эксперименте (Эксперт), взаимодействуя с веб-сервером, в окне веб-браузера выбирает требуемое по условиям эксперимента качество тестового образца видеоматериалов.
Просмотрев, тестовый образец видеоматериала, Эксперт должен оценить качество по пятибалльной шкале, где 5 — Отлично, 4 — Хорошо,
Delay (с)
Рис. 5. Зависимость оценок MOS от времени задержки пакетов
3 — Приемлемо, 2 — Плохо, 1 — Неприемлемо.
Тестовые образцы видеоматериалов, стри-минг которых осуществляется с помощью медиа-сервера, представляют собой два видеоролика продолжительностью 10 минут разной тематики, записанные на виртуальный жесткий диск виртуальной машины 3. Содержание первого ролика — это, в основном, статичные сцены с небольшим количеством движения без частых изменений общего плана. Второй ролик является фрагментом трансляции спортивной игры с большим количеством динамичных объектов и частыми сменами планов.
Для кодирования тестовых видеоматериалов использовался видеокодек исполь — H.264 AVC с переменной скоростью (VBR) в формате MPEG-4, а в качестве аудиокодека использован AAC с переменной скоростью.
В результате экспериментов на стенде исследователи получают усреднённые экспертные MOS оценки качества восприятия (QoE) услуги на базе OTT в зависимости от входных параметров качества (QoS) для двух технологий вещания: псевдо-потоковое вешрние (Pseudo-HTTP streaming) и потоковое вещание (RTMP).
При организации эксперимента мы ввели следующие допущения и ограничения:
• используемые видеоролики закодированы с одним битрейтом (данное обстоятельство приводит к отсутствию событий изменения качества видео);
• канал передачи данных имеет стабильную пропускную способность (в реальной сети Интернет пропускная способность не является постоянной величиной и изменяется во времени);
• в пакеты не вносятся ошибки (протокол TCP, используемый для передачи, обладает высокой способностью к обнаружению и исправлению ошибок, вследствие чего искажение изображения будет отсутствовать);
Анализ результатов эксперимента
а) полоса пропускания и задержка
Первым этапом в проведении эксперимента является проведение экспертной группой из пяти человек предварительных тестов. На данном этапе исследовалась зависимость качества восприятия от величины доступной пропускной способности канала и задержки при передаче данных для двух технологий стриминга: pseudo-HTTP и RTMP, работающих поверх стека TCP/IF!
В первом эксперименте мы с помощью WANem изменяли доступную полосу пропускания в пределах от128 кбит/с до 5 Мбит/с, после чего просили Экспертов оценить качество просматриваемых видеороликов. Эксперимент повторялся для среднего качества (SD) и высокого качества (HD) тестовых видеоматериалов.
На рис. 4 приведены результаты эксперимента по определению зависимости воспринимаемого качества видеоматериала, выраженного в усредненных значениях оценок экспер-
тов (MOS), от доступной пропускной способности канала.
Анализируя графики зависимостей MOS от пропускной способности, можно отметить, что на низких скоростях средние оценки держатся на уровне 2 баллов. Начиная определенного значения (>256 кбит/с для SD, > 512 кбит/с для HD), дальнейшее увеличении скорости передачи приводит к возрастанию оценки качества восприятия видеоизображений. Для среднего качества видео при использовании технологии RTMP оценки растут быстрее, чем при использовании технологии Pseudo-HTTP Для высокого качества видео рост оценок имеет схожий характер для обеих технологий. При увеличении пропускной способности до 1 Мбит/с для SD и 2Мбит/с для HD качества оценки вплотную приближаются к своему максимальному значению 4,5 балла MOS.
Во втором эксперименте с помощью WANem изменялась задержка пакетов в пределах от 500 мс до 2 с. На рис. 5 приведены результаты эксперимента по определению зависимости воспринимаемого качества видеоматериала от времени задержки пакетов.
Из графика видно, что величина задержки пакетов в пределах исследованных значений не влияет на восприятие видео. Данный параметр влияет только на время начала воспроизведения видеоролика, при этом в последующем воспроизведении ролика увеличение задержки не оказывало никакого влияния на качество восприятия.
График зависимости оценок MOS от времени задержки пакетов идентичен как для обеих технологий стриминга, так и для любого качества видео, из чего можно заключить, что величина задержки передачи не влияет на качество восприятие услуги видео стриминга.
На основе полученных зависимостей
0 0.225 0.25 0.5 0.7S 1 1,5 2 3 Б (Мбкг'с)
Рис. 4. Зависимость оценок MOS от пропускной способности канала
Loss (%)
Рис. 6. Зависимость оценки MOS от величины потерь для Pseudo-HTTP (HD)
можно сделать вывод о том, что диапазон значений пропускной способности, на которых следует проводить дальнейшие исследования, составляет для SD 1, 2, 5 Мбит/с и для HD 2, 5 Мбит/с. В указанных диапазонах значений пропускной способности изменение качества восприятия будет наиболее заметным.
б) потери пакетов
Вторым параметром, изменяемым во время эксперимента, является величина потерь пакетов. Величина потерь задается в процентах. В данном эксперименте выбрано значение величины потерь пакетов 5% в качестве начального значения. Для видео в высоком качестве (HD) эксперимент проводился на скоростях 2 и 5 Мбит/с в виду того, что на скорости 1 Мбит/с даже при отсутствии потерь качество достаточно низкое. Далее приводятся результаты измерения MOS в зависимости от изменения величины потерь пакетов для технологии Pseudo-HTTP SD качество (рис. 5а) и HD качество (рис. 6) при различных значениях доступной полосы пропускания.
На рис. 7 и рис. 8 проиллюстрированы результаты измерения MOS в зависимости от изменения величины потерь пакетов для технологии RTMP (SD и HD качество) при различных значениях доступной полосы пропускания.
По приведённым графикам зависимостей экспертных оценок от процента потерь пакетов видно, что при низком уровне потерь линии представляют собой горизонтальные прямые на уровне 4,5 баллов MOS. При увеличении потерь до определенного значения (для каждой величины пропускной способности это значение различается) графики зависимостей перестают держаться на одном уровне и начинают идти вниз. Фактором начала снижения оценок является первое появление событий ребуфери-
зации, причём независимо от их величины и продолжительности. Далее графики представляют собой кривые, приближающиеся к оси абсцисс. Они имеют схожий характер изменения, нет ярко выраженных отличий, но для пропускной полосы меньшего значения кривые имеют более пологий вид. При достижении определенной величины потерь пакетов, графики опускаются ниже уровня 2 баллов, в этот момент качество видео становится неприемлемым.
При проведении эксперимента нами было отмечено, что характер влияний параметров сети на события ребуферизации отличается для разных технологий стриминга. Выявлено, что при использовании технологии Pseudo-HTTP события ребуферизации возникают чаще, но при этом имеют меньшую длительность, чем при использовании RTMR Для анализа влияния данного обстоятельства на качество восприятия Экспертами видеоматериалов можно сравнить графики зависимостей оценок MOS от величи-
ны потерь при использовании различных технологий стриминга при доступной полосе пропускания 5 Мбит/с (рис. 9).
На представленном графике (рис. 9) видно, что при использовании RTMP оценки начали снижаться раньше, и сначала были ниже, чем при использовании Pseudo-HTTP При этом кривая зависимости у RTMP имеет более пологий вид и при дальнейшем увеличении потерь MOS оценки стали выше, чем у технологии Pseudo-HTTP
Из этого можно сделать вывод о том, что конечный пользователь не так сильно обращает внимание на частые, но короткие перерывы в воспроизведении и использование Pseudo-HTTP даёт более высокие оценки. При росте процента потерь пакетов перерывы в воспроизведении начинают увеличиваться и раздражать пользователей сильнее, при этом RTMP показывает результат лучше, чем технология Pseudo-HTTP
Выводы и последующая работа
В данной работе представлены предварительные результаты экспериментов с трафиком видео услуг на базе ОТТ полученные с помощью имитационного стенда.
В ходе эксперимента были получены зависимости качества восприятия видео, выраженные в оценках MOS, от влияющих параметров качества сети. По результатам проведённой работы были сделаны следующие выводы:
1. Технология ОТТ развивается опережающими темпами по сравнению с классическими технологиями и по прогнозам скоро займет лидирующее положение среди способов передачи цифрового видео контента.
2. Основными метриками, определяющими QoE для услуги видеостриминга по технологии ОТТ, являются частота и продолжительность остановок (ребуферизаций) во время воспроизведения.
3 5 8 9 10 11 12 13 14 1S 16 17 18 19 20 21 22 Loss (%)
Рис. 5а. Зависимость оценки MOS от величины потерь для Pseudo-HTTP (SD)
Рис. 7. Зависимость оценки MOS от величины потерь для RTMP (SD)
Рис. 8. Зависимость оценки MOS от величины потерь для RTMP (HD)
Рис. 9. Сравнение зависимостей оценок MOS от потерь при использовании технологий Pseudo-HTTP и RTMP (HD)
3. Основными сетевыми параметрами качества обслуживания (QoS), определяющими QoE, являются полоса пропускания и потери пакетов. При этом уровень потери пакетов имеет более серьезное влияние на качество восприятия Экспертов, чем ограничение полосы пропускания.
4. Результаты анализа субъективных экспертных оценок QoE показывают, что технология Pseudo-HTTP streaming более устойчива к потерям пакетов по сравнению с технологией RTMP в области потерь от 0 до 15% .
В дальнейшем планируется продолжить эксперименты на имитационном стенде с большими группами Экспертов. Также планируется проведение экспериментов с другими технологиями HTTP-стриминга.
Литература
1 "Guide to IPTV The Technologies, the Challenges and How to Test IPTV", Tectronix white papers, 2012
2. Deart V., Kozhuhov I. Research of the QoS parameters defining QoE for transmitting streaming video over Internet // T-Comm, №7-2013. Pp. 28-31
3. Deart V., Kozhuhov I, Pilugin A. Experimental Platform for QoE research of streaming video services //T-Comm, №7-2013. Pp. 32-35
4. Wide Area Network Emulator // Documentation, http://sourceforge.net/ projects/ wan-em/files/Documents/ wanemulator_all_about_v2.0.pdf// 13.11.2013.
5. Recommendation ITU-T R911 (1998), Subjective audiovisual quality assessment methods for multimedia applications.
6. Recommendation ITU-R BT.500-13 (2012), Methodology for the subjective assessment of the quality of television pictures.
7. Rubino G. Quantifying the Quality of Audio and Video Transmissions over the Internet: The PSQA Approach // Communication Networks & Computer Systems. Chapter 14. France, 2005.
8. Rubino G., Varela M, BonninJ. Controlling Multimedia QoS in the Future Home Network Using the PSQA Metric//The Computer Journal archive, Volume 49 Issue 2, March 2006. Pp. 137-155.
Analysis of experimental data on subjective assessment of QoE when transmitting video content using OTT
Vladimir Deart, Ivan Kozhuhov, Yuri Milicin, Alexander Pilugin, MTUCI, Moscow
Abstract
At the present time video service on OTT basis is an essential part of "Internet life" for almost any user. Billions of vdeo clips are put in social networks, millions of vdeo lessons returns as results at search resources, thousands of televsion and film provders provde users a possibility of watching online vdeo, which is interesting for them. In such circumstances, large service provders are beginning to pay more attention to the quality of services provded. In prevous articles were explained the basic concepts and mechanisms to provde OTT-services, were analyzed streaming technologies and defined the factors affecting the quality of experience QoE of these services. Was also described in detail the experimental platform for studying the perceptual quality QoE for vdeo streaming services using OTT technology. This article presents the results, obtained on an experimental platform, of preliminary studies to determine the dependence of perceptual quality vdeo, expressed in MOS rating, from the influencing QoS parameters. Conclusions were made about the nature of QoE depending on the rate of the packet loss for different values of bandwidth and streaming technology used. Results obtained in the article will be further used for the development dependency model of the user perceived quality (QoE) from the network quality parameters (QoS) for provding advanced services based on the concept of OTT.
Keywords: OTT, interrelation QoS QoE, modeling QoE, simulation stand, Pseudo-HTTP RTMP
