© Полубояров В.В., 2013
УДК 004.77+37.07 ББК 3.32+74.04
АНАЛИЗ МЕТОДИКИ И РЕЗУЛЬТАТОВ РАСЧЕТА РЕЙТИНГА WEBOMETRICS ДЛЯ САЙТОВ ВУЗОВ РОССИИ
Полубояров Валерий Викторович
Кандидат технических наук, доцент,
начальник Управления информатизации и телекоммуникаций Волгоградского государственного университета vvp@volsu.ru
Проспект Университетский, 100, 400062 г. Волгоград, Российская Федерация
Аннотация. Проанализирована структура показателей рейтинга сайтов вузов Webometrics и причины наблюдаемых значений показателя Impact для Top-100 сайтов вузов России. Выявлено существенное влияние «черных» технологий поисковой оптимизации на позиции ряда вузов в рейтинге.
Ключевые слова: Webometrics, рейтинг сайтов вузов, технологии поискового спама.
2 августа 2013 г. была опубликована новая редакция рейтинга сайтов университетов Webometrics [1]. В данной редакции составителями рейтинга была использована новая методология расчета рейтинга. Самым значимым среди показателей рейтинга является Visibility («видимость»), обладающий весом 50 %. Он определяется параметром Impact («влияние»), рассчитывающимся на основе количества внешних ссылок, ведущих на домен университета с третьих сайтов. Для расчета используется следующая формула:
Visibility =4b * D, (1)
где B - количество обратных ссылок (ссылок на внешних по отношению к данному сайту доменах);
D - количество доменов, на которых расположены эти обратные ссылки.
Авторами рейтинга декларируется, что этот показатель характеризует престижность вуза, его академическую эффективность, ценность информации и полезность сервисов, опубликованных на веб-страницах сайта. Однако так ли это?
Источниками данных для параметра Visibility, согласно методологии Webometrics, являются два из наиболее значимых поставщиков подобной информации: Majestic SEO [2] и Ahrefs [3].
В инструментарии, представляющимся ресурсом Majestic SEO, присутствуют отчеты, позволяющие для выбранного сайта получить:
• Ref domains - список доменов, на которых расположены обратные ссылки на выбранный сайт, упорядоченный по убыванию количества обратных ссылок;
• Anchor text - список текстов обратных ссылок, упорядоченный по убыванию количества обратных ссылок, в которых указан такой текст;
• Pages - список страниц сайта с максимальным количеством обратных ссылок, упорядоченный по убыванию количества обратных ссылок.
Использование этого инструментария для анализа сайтов вузов, занявших первые 100 мест в списке лучших сайтов вузов России по версии Webometrics, выявило следы использования технологий поискового спама [5], в первую очередь спама ссылок (link spam) [6]. В этом случае сайт
вуза становится членом «фермы спам-ссылок» (link farm) [б]. Вариантов реализации этих технологий встречается несколько:
1. Спам ссылок в виде сообщений на форумах. В рамках этой технологии на форуме при помощи специального программного обеспечения публикуется большое количество со-
общений, содержащих ссылки на аналогичные сообщения на других форумах, а также ссылки на тот сайт, позиции которого в выдаче поисковых систем хотят повысить злоумышленники. В качестве примера можно привести сообщения на форуме Ульяновского государственного технического университета (рис. 1).
Рис. 1. Фрагмент сообщения с рекламным текстом на форуме tsas.ulstu.ru/jforum
(web.archive.org, 03.0б 2013 г.)
В списке Pages для сайта этого вуза 14 из 20 страниц с максимальным числом обратных ссылок - это сообщения со спамом ссылок на форуме. Общее число обратных ссылок для этих 20 страниц составляет 111 010, из них 13 365 - это обратные ссылки на сообщения со спамом ссылок. Общее число доменов, ссылающихся на указанные 20 страниц -2 273, из них 1 286 - это домены, на которых опубликованы ссылки на сообщения со спа-
мом ссылок. Исходя из формулы (1), Visibility для сайта Ульяновского государственного технического университета с учетом таких сообщений будет равно 757 322, а без их учета -308 420. Таким образом, по меньшей мере 60 % значения параметра Visibility для сайта Ульяновского государственного технического университета обусловлено наличием на страницах его форума подобных сообщений. Другим показателем, свидетельствующим о том, что
сайт вуза входит в «ферму спам-ссылок», являются наличие в списке anchor text фраз вида
«louis vuitton», «where can i purchase saroten in new york city» и т. п. (рис. 2).
Summary
Ref Domains Backlinks New Lost
Anchor Text
Map
Pages Link Profile
Filter Anchor Text
Referring
Clean Anchor Text:
External Backlinks
о г
Estimated Link Flow Metrics
uomains Total л Deleted CD No Follow CD Citation Flow л Trust Flow CD
1 Empty Anchor 7ext 399 149,428 23,854 235 52 36
2 ulstu.ru / 243 415 47 120 16 6
3 www.ulstu.ru x 109 392 6 35 39 36
4 http://www.ulstu.ru ' 87 304 6 33 34 31
5 louis vuitton ^ 86 430 15 88 23 11
6 where can i purchase saroten in new york city S 82 576 2 4 38 3
7 order prescription free saroten generic cheapest f 82 464 4 4 38 5
9 where to buy discount saroten online consultati...
10 next day delivery on line flamatak in Canberra
Рис. 2. Anchor text для сайта ulstu.ru (Majestic SEO)
Также на членство сайта вуза в «ферме спам-ссылок» указывает наличие в списке Ref domains сайтов, тематика которых не относится к образовательной деятельности (№ 2, 4, 5, 7-10) (рис. 3). Это сайты туристических компаний, расположенных в других городах, а не в Ульяновске, а также сайт
аудиторской компании из Белоруссии. Количество этих обратных ссылок на 1 сайте в районе 10-20 тыс. является аномальным. Таким образом, 7 из 10 доменов, на которых расположены внешние ссылки, являются не соответствующими тематике образовательной деятельности.
Summary
Ref Domains Backlinks
Anchor Text
Map
Pages Link Profile
Order By: Backlinks Descending Then: Alexa Rank Ascending
Showing 1-10 results for your subscription out of total 7,282 results available. Get a higher subscription to view more results.
n Referring Domains Backlinks CD AJexa Rank CD Flow Metrics
1 sts-ul.ru i=6 Ф ІІи<4* IS 30,124 N/A © Citation Flow 19 Trust Flow 6
2 xterratravel.ru $ Un 15 26,222 N/A CD 9 0
3 ulx.ru '.*> Ф 11 и <£ IS 23,725 N/A CD 25 11
4 teana-travel.ru Ф В 21,877 N/A CD 10 0
5 turskidki-online.ru Ф II n ^ IS 20,405 N/A CD 30 11
6 uonb.ru Ф II u 35 17,353 N/A CD 26 23
7 ukoo.ru i=£> Ф Ц її К 16,506 N/A CD 30 20
8 xte rrato u r. ru иІ $ 11 n <£ !• 15,366 N/A CD 25 5
9 economaudit.bv Ф 15,037 N/A CD 33 13
10 fortis-tour.ru ЬР Ф IIII 15 14,863 N/A CD 0 0
Рис. 3. Ref domains для сайта ulstu.ru (Majestic SEO)
Аналогичные сообщения наблюдаются на форумах (в порядке места, занятого сайтом в рейтинге, далее по тексту статьи после названия вуза в круглых скобках будет указываться его место в рейтинге): Кемеровского государственного университета культуры и искусств (15), Новосибирского государственного технического университета (17), Челябинского государственного университета (30), Международной школы бизнеса «Синергия» (35), Вологодского государственного педагогического университета (36), Пермского государственного университета (40), Тихоокеанского государственного экономического университета (41), Южно-Российского государственного технического университета (47), Кузбасского института экономики и права (53), Юго-Западного государственного университета (62), Сибирской академии права, экономики и управления (76), Вологодского государственного технического университета (80), Санкт-Петербургской химико-фармацевтической академии (83), Московского государственного открытого университета (86), Кузбасской государственной педагогической академии (96). На форумах части перечисленных вузов по состоянию на начало сентября 2013 г. сообщения со спам-ссылками уже удалены, но их присутствие на форумах в течение длительного времени, в том числе и на мо-
мент расчета рейтинга, оказало определяющее влияние на значение показателя Impact, и, поскольку его доля в общем рейтинге составляет 50 %, в целом на позицию сайта в рейтинге. Также подобные сообщения публиковались на сайтах Национального исследовательского ядерного университета МИФИ (3), Самарского государственного университета (25), Томского государственного педагогического университета (31), Томского государственного университета систем управления и радиоэлектроники (32), Мордовского государственного университета (38), Московского государственного университета тонких химических технологий (55), Современной гуманитарной академии (65), Московского государственного строительного университета (71), Тихоокеанского государственного университета (92), однако администрацией подобные сообщения достаточно оперативно удалялись, и значительного влияния на значения показателя Impact не оказали.
2. Поскольку спам-сообщения на форуме легко обнаруживаются пользователями и модераторами, злоумышленниками также используется технология, предполагающая массовое создание новых учетных записей на форуме, в свойствах которых (профилях) размещаются спам-ссылки. В остальном принцип аналогичен пункту 1 (рис. 4).
Рис. 4. Спам в профиле пользователя на форуме «Диггеры Владивостока», расположенном на сайте Владивостокского государственного университета экономики и сервиса
Использование данной технологии было выявлено на форумах, находящихся сайтах Санкт-Петербургского государственного политехнического университета (5), Карельской государственной педагогической академии (19), Воронежского государственного аграрного университета (57), Сибирского государственного аэрокосмического университета (59), Красноярского государственного педагогического университета (61), Мурманского государственного технического университета (63), что оказало определяющее влияние на положение сайтов данных вузов в рейтинге. Также попытки использования этой технологии выявлены на сайтах Российского государственного университета нефти и газа (52), Самарского государственного аэрокосмического университета (72), Московского государственного технического университета радиотехники, электроники и автоматики (75), однако за счет более оперативных действий модераторов профили таких пользователей были удалены и существенного влияния на позиции в рейтинге не оказали.
3. Также целью злоумышленников являются плохо защищенные вики-системы на сайтах вузов, на которых публикуются либо
вики-страницы со спам-ссылками, как, например, на сайте Томского государственного университета систем управления и радиоэлектроники (32) (рис. 5), либо создаются пользователи, в профилях которых публикуются спам-ссылки, как, например, на сайте Санкт-Петербургского государственного политехнического университета (5) (рис. 6). Из списка Top-100 использование подобных технологий было обнаружено на сайтах Томского государственного университета (6), Ульяновского государственного университета (21), Чувашского государственного университета (27), Пермской государственной аграрной академии (54), Мурманского государственного технического университета (63), Алтайского государственного университета (77) -высокое значение показателя Impact для этих вузов фактически определяется публикацией спам-ссылок в вики-системах. Также следы применения этой разновидности спам-ссылок обнаружены на сайте Удмуртского государственного университета (56), однако их вклад в значение показателя Impact невелик, поскольку они достаточно оперативно удаляются.
4- С 2 web.aгchive.oгg/web/20120918234131/htlp://isn1c.asu.tusuг.гu/mediawiki-l.lб.0/index.php/3aглaвнaя_cтpaниua
^rttp: М s m с .asutusurr и /media wik і-1.16.(Mndex.phpJ%DO%97%DO%BO%DO%B3%C Go
☆
4 captures
8 сен 12 - 5 anp ІЗ
parn w yeup
own logo image.
АВГ
■4
2011
СЕН янв Close X 1
18 ► Help ? 1
Заглавная страница Сообщество Текущее события Свежие правки Случайная статья
Перейти |
| Ссылки сюда | С в язанные правки | Спецстраницы | Версия для печати | Постоянная ссылка
Заглавная странща
ler zehnten Partie der chinesischen Ocean Eskorte Flotte vuitton taschen "Qingdao" Schiff", Yantai" Schiff Iv iphone 4 hulle "Weishan Lake” Schiff Bildung, 3. Kdinyn iiiUdiil 11lubbduing Hafen von Haifa, Haifa, begann eine Vier-Tage-Testspiel gegen Israel zu besuchen. Passes away ist eine chinesische Marine-Israel zum ersten Mai.
lO.Double zero Ortszeit, unter der Leitung des lokalen Plug-ins Piloten wird Iv Stuttgart cease to live Bildung langsam louis vuitton rapid anlaufenden Hafen von Haifa. Die drei Kriegsschiffe a strong bedroom Hauptmast hingen die Flaggen beider Lander, stellten sich expire louis vuitton zurich Offiziere und Soldaten der militarischen Kapazitaten der grundlichen Partition auf dems Porcfti Uraoltccha Undewalor legt greflen Wart auf living area chinesischen Kriegsschiffen besucht und ausdriicklich entschieden, eine grofte BegruUungszeremonie Iv wall socket uitton Taschenl louis vuitton taschen craigs list auf dems Boat dock. Israelische Ocean Haifa Ji dems Kommandeur Brigadegeneral Louis Geschaftstrager der chinesischen Botschaft throughout Israel perish Shi Schwimmen und Mitarbeiter, Vertreter der louis vuitton koffer Auslandschinesen zu ib shop der Boat dock zu begruGen.
Nach der BegruGungszeremonie, kick the bucket chinesische Botschaft throughout Israel Mitarbeiter, Vertreter der uberseeischen chinesischen louis vuitton retailer Medien Reportern an Bord waren die drei Kriegsschiffe zu Besuch sowie Austausch von Offtzieren und Soldaten, Yang Jun fliegende Significant General auch unterrichtete family room Konvoi und auf perish
Vuitton Handtaschen waneh, Ы5 I6UI5 VUITTCh w6
Scenario, louis vuitton sonnenbrille I'm Nachmittag fuhrte Fei Yang.Jun( Seneralmajor cm» delegation nach Haifa auf Stall der israelischen Marine Haifa Ji dems Kommandeur Brigadegener j Louis Vuitton Online Shop
’ertretender Burgermeister von Hod Iv frankfurt Child Almog sowie nennen, sowie besuchte kick the bucket israelische Sea Haifa
Ji zu israelischen Marine-Stutzpunkt.
Es wird louis vuitton tasche berichtet, dass around bedroom nachsten Tagen zu besuchen, wo sowohl um Marine-Offiziere louis vuitton Stuttgart sowie Mannschaften durchfuhren wird eine Reihe von Austauschmaftnahmen, expire Bildung Konferenz within Qingdao "Schiffsdeck stattfinden wird.
Haifa, das GalilSa, der Provinzhauptstadt von Israel, Israels grSftter Hafenstadt sowie cease to live bedeutendste Industriestadt. Hafen von Haifa louis vuitton gurtel befindet sich internet marketing nordlichen Ende der Bucht von Haifa, Israel Westkuste plusieurs sudlichen Ufer der Eingang a great bedroom Rand der ostlichen Seite plusieurs Mittelmeers, Israels grofiter Hafen. http://www.delouisvuittontaschen.net/
Содержание [убрать]
1 A Savior At the Grocery Store
2 The Business 9 Women Kept A Secret ForThree Decades
3 13 Things You Should Do To Live Life Without Regrets
4 The Opposite Of Poverty Is Justice
5.6 Steps Towards Living a Life Free of Fear and Full of Hope
Рис. 5. Вики-страница на сайте Томского государственного университета систем управления и радиоэлектроники (web.archive.org, 18.09 2012 г.)
С Q ш1к1.5рЬзУхи/Ыех.р11э/Обсуждение^частника:9^пе11еЬс40 'С? =
Q Представ иться f зарегистриро в атьс я
навигация
ВикиПолитех Заглавная страница Сообщество Программы обучения Текущее события Свежие правки Случайная статья В помоиф пользователю Справка
Перейти |
инструменты
Ссылки сюда | С в язанные пра в ки Вклад участника | Журналы Спецстраницы Версия для печати Постоянная ссылка
участник обсуждение
просмотр история
Обсуждение y4acTHHKa:Shanellebc40 ChanelZipWallets13 d&g shoes
Item NO: ChanelZipWallets13 Product description:Chanel A26710 Combon Black Sheepskin Zip Around Wallet- Black Sheepskin- 6 credit playing cards- Inside Zip pockets- Zip opening- Leather liningSize: W18.five x H11 x D3(1" = 2.54cm)Chanel A26710 Combon Black Sheepskin Zip Around Wallet Come with serial figures, Chanel authenticity card, Chanel Box,Chanel dust bag and Chanel care booklet.The wallets we offer are the latest and the best AAA+++ qualityl 00% 1:1 replica designer handwallets with the exact same materials and style as the authentic.We have our person; I ЛУ$*У HI — iS^xpert group to ensure that our goods are ideal.Not only it appears but also the touch are the exact same as the originals.What you can obtain is
pictures here vou see. Item NO
trim/interiorbras:
t'J-7
?~f=py £ just the exact same with the
GucciWallets019 black GG fabric with black leather hardwaresnap closureseven card slots and two five"L x 4"H224225 FTAQT one
invoice compartmentscoin pocket7 thousand>>l. We dedicated on offer top high quality Duplicate Purses, Fake Purses, This kind of as Duplicate Louis Vuitton, Duplicate Gucci, Duplicate Hermes, Duplicate Prada and Duplicate Wallets.2. In order to decrease Volumn save shipping price, you can buy bags and wallets, or a big bag and a smaller bag if selecting DHL as shipping techniaue.three. All Duplicate Purses will come with dust bag and id playing cards.f""[✓•f}\y+fy'fJ=7 7s.'\z\/\\\ Duplicate Wallets will come with a box and id playing cards.five. WE ONLY Provide Higher Quality REPLICAS, REFUSE Discount Items.
Последнее изменение этой страницы: 09:38, 30 июня 2013. К этой странице обратились 275 раз. Политика конфиденциальности ОписаниеММРоМех Отказ от ответственности
li«ll
Рис. 6. Спам в профиле пользователя вики-системы на сайте Санкт-Петербургского государственного политехнического университета
4. Другой потенциальной целью являются свободно распространяемые системы дистанционного обучения с открытым исходным кодом, в первую очередь Moodle, с включенной системой самостоятельной регистрации обучающихся. Злоумышленники
массово создают пользователей со спам-сообщениями в профиле.
В качестве примера можно привести систему на сайте Сибирского государственного аэрокосмического университета (59) (рис. 7).
Рис. 7. Спам в профиле пользователя системы Moodle на сайте Сибирского государственного аэрокосмического университета
Аналогичная технология использовалась на сайтах Международного университета природы, общества и человека «Дубна» (26), Уральского государственного экономического университета (34), Омского юридического института (46), Сибирского государственного аэрокосмического университета (59), и ее влияние на значение показателя Impact, судя по Ref domains и Anchor text, было определяющим.
5. Также на ряде сайтов были обнаружены следы прямого взлома систем управления контентом, как общего назначения, так и специализированных. Так, например, на сайте Волгоградского государственного технического университета (33) была взломана система управления контентом общего назначения, что позволило злоумышленникам публиковать новости со спам-ссылками (рис. 8).
Рис. 8. Сайт innocenter.cad.vstu.ru с блоком новостей, к которому получили доступ злоумышленники
(web.archive.org, 05.06 2013 г.)
Аналогичные проблемы были обнаружены на сайтах Иркутского государственного лингвистического университета (24), Кемеровского технологического института пищевой промышленности (70).
Другой пример - взлом специализированной веб-системы «АИСТ» («Автоматизированная информационная система содействия трудоустройству»), опубликованной на сайтах Московского государственного тех-
нического университета им. Баумана (11), Нижегородского государственного университета (12) и Южного института менеджмента (49). В результате злоумышленники использовали сайты указанных университетов как хостинг для собственных сайтов, выполняющих в том числе роль торрент-серверов с нелицензионным программным обеспечением, видеофильмами и т. п., на страницах которых также были опубликованы спам-
ссылки. Пример такого сайта, опубликован- го государственного университета, приведен
ного с использованием сайта Нижегородско- на рисунке 9.
<- X D web.archive.org/web/20130424225112Дійр://www.unn.ru/jobinfo/aistybeer/Acronis-true-i mage-2011-keygen.html *
1 intiknit ocnivi ^Tttp://ww"wunnrui]obinfo/aistfoee^Acronis-true-image-2011 -keygen.html Go | ИІЙ1ЯІ I •« МАЙ Close X Help ?
Рис. 9. Система обмена файлами с нелицензионным программным обеспечением на сайте Нижегородского государственного университета (web.archive.org, 24.04 2013 г.)
Наличие спам-ссылок существенно повысило значение показателя Impact для сайтов указанных вузов.
Особое внимание заслуживают сайты Московского технологического института (79) и Международного независимого эколого-по-литологического университета (85). Все
Anchor text для этих сайтов тематически правильные, все ведут на главную страницу официальных сайтов вузов. Большая часть обратных ссылок появилась в период приемной кампании (рис. 10), и по ее завершении количество ссылок и ссылающихся доменов резко снизилось (рис. 11).
Backlinks
120k --------------------------------------------- 8k
Рис. 10. Динамика количества обратных ссылок для сайта Московского технологического института за 2013 г.
(ahrefs.com)
Referring Domains
10k —
1Л
с
rfl
Е о О ст
с
W
L.
4J ч-
II
1 Mar 1 Apr 1 May 1 Jun 1 Jul 1 Aug 1 Sep
Рис. 11. Динамика количества ссылающихся доменов для сайта Московского технологического института за 2013 г. (ahrefs.com)
Анализ тематики сайтов при помощи ваны эти обратные ссылки, принадлежат
отчета Ref domains показал, что большин- футбольным клубам (рис. 12), на сайтах
ство доменов, на которых были опублико- которых указанные вузы размещали рекламу.
Рис. 12. Ref domains для сайта Московского технологического института (Majestic SEO.com)
Таким образом, в результате анализа первой сотни рейтинга сайтов российских вузов по версии Webometrics можно сделать следующие выводы:
1) для 43 вузов наблюдается большая доля значений в Anchor text, не имеющих отношения к тематике сайта, и в список Ref domains этих вузов входят домены, на которых расположены сайты, не относящиеся к образовательной тематике. Для еще 18 вузов подобные значения Anchor text и Ref domains наблюдаются, но их доля в общем списке невелика. Таким образом, значительное количество вузов имеют проблемы с модерированием форумов, вики-сайтов,
систем управления контентом и обеспечением их информационной безопасности;
2) сайты некоторых вузов указаны в спам-рассылках, реализуемых при помощи технологий «черной» поисковой оптимизации для повышения места этих сайтов в выдаче поисковых систем по отдельным поисковым фразам;
3) методология расчета показателя Impact в текущей редакции рейтинга Webometrics не отражает фактической престижности вуза, его академическую эффективность, ценность информации и полезность сервисов, опубликованных на веб-страницах
сайта. Требуется ручная постобработка результатов для выявления фактов использования сайтов вузов в технологиях «черной» поисковой оптимизации.
СПИСОК ЛИТЕРА ТУРЫ
1. Ahrefs Site Explorer. - Electronic data. - Mode of access: https://ahrefs.com/. - Title from screen.
2. Davison, B. Recognizing Nepotistic Links on the Web / B. Davison. - AAAI-2000 workshop on Artificial Intelligence for Web Search, Boston : AAAI Press, 2000. - Pp. 23-28.
3. Majestic Site Explorer. - Electronic data. -Mode of access: https://www.majesticseo.com/reports/ site-explorer. - Title from screen.
4. Ranking Web of Universities. - Electronic data. - Mode of access: http://www.webometrics.info. -Title from screen.
5 Ranking Web of Universities: Russian Federation. - Electronic data. - Mode of access: http: //www.webometrics.info/en/Europe/Russian%20 Federation. - Title from screen.
6. Sullivan, D. What Is Search Engine Spam? The Video Edition / D. Sullivan. - Electronic data. -Mode of access: http://searchengineland.com/what-is-search-engine-spam-the-video-edition-15202. -Title from screen.
ANALYSIS OF WEBOMETRICS RATING METHODIC AND CALCULATION RESULTS FOR RUSSIAN HIGH EDUCATION SITE
Poluboyarov Valery Victorovich
Candidate of Technical Science, Associate Professor,
Head of Informatization and Telecommunication Department,
Volgograd State University vvp@volsu.ru
Prospect Universitetsky, l00, 400062 Volgograd, Russian Federation
Abstract. Structure of Webometrics Rating indexes and source of Impact value under review for Russia Top-l00 university sites has been analyzed. Constitutive influence of black SEO technologies on some university position in rating has been revealed.
Key words: Webometrics, university site rating, search engine spam technologies.