Мобильная «аналитика»: кто платит за красивые результаты исследований

Не все аналитические центры одинаково полезны: «Ридус» разбирался в методах работы независимых исследователей сотовой сети, вводящих в заблуждение сотни тысяч абонентов, журналистов и экспертов. © Коллаж/Ridus
Какой оператор может похвастаться самым большим покрытием сети в столичной подземке? Ответ на этот вопрос подготовили специалисты независимой аналитической компании Mobile Speed Rating (MSR), которые исследовали покрытие 2G, 3G и 4G-сетей мобильных операторов на станциях и в тоннелях Московского метрополитена.
Ряд профильных изданий опубликовал полученные данные, приняв их за чистую монету, хотя MSR едва ли можно назвать авторитетной аналитической компанией: на рынке она совсем недавно, да и сами результаты исследования выглядят подозрительно. По основным параметрам исследования MSR безоговорочно лидирует компания МТС: оператор держит первенство в покрытии сети стандартов 3G и 4G на станциях подземки, уступая «МегаФону» лишь в распространении устаревшего формата 2G. Кроме того, аналитики отдали МТС золото за покрытие тоннелей метро наиболее распространенным стандартом связи 3G. В MSR уже анонсировали следующее исследование: сотрудники компании намерены проверить качество передачи голоса и скорости мобильного доступа в сеть операторов в метрополитене. Вместе с тем проведенная MSR работа вызвала праведный гнев у ряда операторов сотовой связи, да и среди пользователей Сети закрались подозрения в объективности аналитиков: информации о компании практически нет, а редкие публикации о ее деятельности вызывают еще больше вопросов. Вместе с экспертами и участниками рынка «Ридус» решил разобраться, так ли независима компания MSR, — и нужна ли вообще операторам сотовой связи объективная аналитика от сторонних компаний.
Рождение в муках
О появлении новой компании мобильной аналитики Mobile Speed Rating заговорили осенью минувшего года — на фоне громкого скандала на рынке мобильной связи. 28 ноября 2016 года авторитетное информационно-аналитическое агентство TelecomDaily представило итоги исследования качества услуг голосовой связи и передачи данных в сотовых сетях, работающих на территории Москвы и Московской области. Аналитики подчеркивали, что их исследование проводилось по методологии Минкомсвязи. Пальму первенства присудили Tele2 и «Билайну», неплохие результаты по времени соединения и коэффициенту качества речи показал и «МегаФон». Ожидаемо, не всех участников рынка устроили такие результаты: в ходе итоговой конференции в РИА Новости глава пресс-службы МТС Дмитрий Солодовников и сотрудник PR-департамента компании Алексей Меркутов фактически обвинили TelecomDaily в некомпетентности и необъективности.
К слову, почти годом ранее аналогичный скандал с этими же участниками разгорелся в Фейсбуке — по аналогичному поводу: на потеху сетевой публике Солодовников в свойственной ему манере констатировал, что исследование TelecomDaily — «шляпа», гендиректор TelecomDaily Денис Кусков в свою очередь попунктно объяснил, почему «шляпа», скорее, Солодовников.
Типичная картина в секции комментариев под медиа-скандалом.
В день, когда конфликт между представителями МТС и неудобными для оператора исследователями из TelecomDaily достиг критической точки, было объявлено о том, что на рынке начинает активно работать новый игрок — агентство Mobile Speed Rating, которое возглавит редактор направления IT и инноваций в информационном агентстве «Банкир.ру» Сергей Вильянов.
Зависимое аналитическое агентство
Mobile Speed Rating уже отмечалось на рынке мобильной аналитики, однако именно с ноября 2016 года слухи о подозрительном происхождении MSR, которых и раньше было предостаточно, начали множиться в Сети с ошеломительной скоростью:

Сразу три источника на телекоммуникационном рынке подтвердили «Ридусу» причастность МТС к администрированию аналитического агентства. Кроме того, по данным источника, приближенного к руководству компании, идея создания лояльного аналитического центра принадлежит главе PR-департамента МТС Елене Кохановской, которая неоднократно хвалилась в прессе своим внушительным арсеналом изощренных маркетинговых методов. Сергей Вильянов отрицает причастность MSR к МТС: «Труднее всего опровергать выдумки», — отметил глава исследовательского агентства, добавив, что параллельно с работой в MSR и по тем же методикам он занимается проектом «Города на связи», присудившим по итогам прошлого года победу «МегаФону». Данные о причастности компании МТС к администрированию MSR Вильянов опроверг: «Что касается обвинений в аффилированности, то мы, как и наши коллеги по бизнесу, получаем их регулярно и в зависимости от результатов нам приписывают близость к тому или иному оператору. Это нормально. Точнее, не совсем нормально, но так есть».
Очень закрытое исследование
Глава TelecomDaily Денис Кусков также называет деятельность MSR крайне подозрительной: «Любые исследования должны происходить планомерно и на постоянной основе, а не раз в год. Это показывает определенные возможности компании — и указывает на наличие заинтересованных лиц», — отметил Кусков в беседе с «Ридусом».
В отличие от исследований TelecomDaily, Mobile Speed Rating не предоставили операторам собранные данные в виде логов. В принципе, написать могли все что угодно, — никто не узнает правды. Подобные исследования выглядят несостоятельно. Чего им скрывать? Все параметры исследования записаны в логах, поэтому обычно никто никого не мучает, отдает данные операторам — и нет проблем. Но не в этом случае. Ведущий аналитик Mobile Research Group Эльдар Муртазин усомнился в возможностях сравнительно новой аналитической компании проводить столь сложные исследования.
«Любые замеры сети должны проводиться по определенной методике, операторы имеют для этого специальное оборудование. Полевые комплексы без машины стоят порядка 70 тысяч долларов. Он должен колесить по городу, измеряя работу нескольких операторов. К примеру, в прошлом году полностью обновлялась сеть „МегаФон“ в Ленинградском регионе и Санкт-Петербурге. Тогда на дорогах таких комплексов работало порядка 15, проехали они порядка 300 тысяч километров. Все это было сделано за несколько месяцев», — рассказывает «Ридусу» о масштабах исследовательских работ Муртазин. Сегодня существует порядка трех-четырех так называемых исследовательских компаний — по числу операторов: каждый оператор выбирает тех, с кем ему удобно работать. В случае MSR это исключительно PR-история: замеры если и делаются, то делаются „на коленке“. Им нужно собрать большой объем данных, который они не могут измерить просто в силу своего размера: нет ни комплексов, ни специалистов, которые будут измерять. «Как измеряется? В лучшем случае — на телефонах или ноутбуках, измеряется небольшое число точек, нет статистической поправки, нет измерений в той же точке в разную погоду, в другое время суток и так далее. Исходя из этого, исследование — это полная ерунда, которая де-факто нужна только операторам, чтобы заявить, что вот, мы тут быстрее и лучше. Смысла в этом никакого нет», — отметил Муртазин. По словам аналитика, у действительно независимого аналитического агентства попросту не получится продать показатели скорости российских сетей: «Это информация, которая не нужна никому, включая самих операторов, — они ее и так имеют, более того, измеряют свои сети куда точнее и лучше. Как и сети конкурентов», — резюмировал Муртазин. Слова Муртазина о том, что исследование скоростей мобильной связи в столичной подземке — это всего лишь «PR-история», подтверждаются и методом размещения материалов на сетевых ресурсах. К примеру, публикация по мотивам последнего исследования MSR на сайте «Москва24» вышла с пометкой «на правах рекламы». С этой же пометкой рекламный материал был сагрегирован сервисом «Рамблер.Новости». По данным источника, близкого к холдингу «Москва Медиа», заказчиком рекламной публикации выступило агентство «Страна-онлайн», которое ранее выиграло тендер МТС по размещению рекламы в СМИ.
«Обман всероссийского масштаба»
МТС и ранее уличали в манипуляции общественным мнением для создания имиджа самой быстрой мобильной сети. В 2015 году расследование о методах компании опубликовал в ЖЖ блогер Сергей Никитский. «Прямо перед Новым годом получил вот такое письмо. По понятным причинам электронный адрес отправителя пришлось скрыть. Человек вполне обоснованно боится репрессий», — писал блогер. «Честно говоря, сначала не поверил и отправил это письмо приятелю-технарю, который хорошо знает, как работает связь, — продолжает Никитский. — Через два дня пришел его ответ, после которого я начал основательно копать эту тему». Итак, перевожу на русский, а заодно рассказываю, что удалось узнать. МТС любым способом хочет стать самым быстрым по скоростям. Причем, прямо сейчас и чтоб никто не подкопался. Что они делают? Они договариваются с Ookla (владелец SpeedTest-а) о покупке отчетов по замерам скоростей на территории России. Но чуть раньше покупают умную „железку“ DPI (для тех, кто ничему не верит — она у них точно есть, читайте), которая позволяет произвольно менять скорость интернета при обращении к определенным серверам. Если клиент запускает SpeedTest, то МТС сразу же высвобождает под него все сетевые ресурсы и, клиент видит очень высокую скорость. Удовлетворенный и счастливый, он закрывает SpeedTest и дальше пользуется интернетом на обычных скоростях, в разы ниже. И даже не подозревает, что его на***ли. «А дальше наступает время пиара, — продолжает блогер. — МТС выгружает из Ookla отчет, по которому они всегда и гарантированно самые быстрые. Вот тут Дмитрий Солодовников, говорящая голова МТС, говорит о почти двух миллионах пользовательских тестов, по которым МТС быстрее всех. То есть, как минимум два миллиона лохов уже есть». Итак, красивая комбинация в три хода:
1. МТС заключает соглашение с Ookla на доступ к отчетам. Все же пользуются SpeedTest-ом, таким отчетам точно поверят.
2. Но результаты должны быть гарантированно самыми лучшими, поэтому на SpeedTest МТС ставит самый высокий скоростной приоритет.
3. Несколько месяцев накапливается статистика (два миллиона ПРАВИЛЬНЫХ замеров), после чего из каждого утюга мы слышим о самом быстром операторе по самым объективным замерам. Вот собственно и все. Вы уверены в том, что у вас самая высокая скорость, потому что SpeedTest — это компания с репутацией и она не может врать! Она не может, но МТС — легко. Никитский предложил аудитории самой проверить, как МТС манипулирует с показателями скоростей: «Проверить обман может каждый, достаточно установить любую другую программу по замеру скорости. Подкрученный SpeedTest показывает почти 40 мегабит, а три других „замерялки“, до которых МТС не дотянулся, показывают реальную скорость на 30–40% ниже». Судя по всему, методы работы МТС за последние годы не особо изменились. Разница заключается лишь в том, что раньше манипуляции компании касались только самих абонентов МТС. Теперь же их возможный масштаб охватывает и экспертов, и аналитиков, и сотрудников СМИ.

---

Вернуться назад