Все публикации по Драйв-тесту Москва-Юг: 6.09. Пресс-релиз о начале драйв-теста 6.09. Репортаж: день первый 7.09. Репортаж: день второй 7.09. Записки наблюдателя - тест GPRS в Московской области 8.09. Записки наблюдателя - "У природы есть плохая погода - если ты сотовый оператор" 8.09. Репортаж: день третий 9.09. Репортаж: драйв-тест завершился пресс-конференцией в Сочи 17.09. Результаты: Московская область 20.09. Результаты: Тульская область 21.09. Результаты: Липецкая область 23.09. Результаты: Воронежская область 23.09. Результаты: Ростовская область 23.09. Результаты: Краснодарский край

Десятый по счёту драйв-тест, проведенный командой MForum.ru с 6 по 9 сентября по-праву можно считать юбилейным! По какому-то таинственному совпадению юбилейный тест проходил как бы под знаком числа 10. В нем принимало участие десять участников,  десять лет отмечал оператор МТС и первые 10 миллионов абонентов праздновал "МегаФон".

И, как положено в таких торжественных случаях, этот тест был самым объемным - в нем принимало участие наибольшее за всю историю тестов число участников, самым протяженным был маршрут - от Москвы и почти до южной границы России, в ходе испытаний было собрано невероятно много информации.

За три с половиной дня, мобильная измерительная лаборатория сформированная MForum при поддержке крупнейших операторов сотовой связи на базе комфортабельного пассажирского автобуса, преодолела расстояние более 2000 километров по маршруту Москва-Воронеж-Краснодар-Анапа-Новороссийск-Сочи-Адлер.

Путь следования лаборатории пролегал по территории шести субъектов Российской Федерации – Московской, Тульской, Липецкой, Воронежской и Ростовской областям, а также по Краснодарскому краю. Конечная часть маршрута прошла вдоль побережья Чёрного моря через курортные приморские города.

За время пути было сделано около пяти с половиной тысяч звонков на автоответчики операторов. Измерения проводились в сетях трёх федеральных операторов ОАО «МТС», ОАО «МегаФон» и ОАО «Вымпелком-Р». Кроме того, в Краснодарском крае также были измерены параметры четвёртого регионального оператора ЗАО «СМАРТС». В процессе следования по описанному маршруту, участники провели две пресс-конференции c участием журналистов местных СМИ, где обсуждалась методика проведения мероприятия и высказывались мнения о развитии сотовой связи в России. 

В целом ряде публикаций мы подробно описывали процесс проведения драйв-теста и публиковали фотографии с мест событий, так что сейчас можно перейти непосредственно к результатам измерений.

Интересно, что вокруг результатов еще до их обработки и публикации на MForum.ru разгорелись немалые споры. Некоторые из наших коллег  поспешили с публикаций "предварительных результатов", необоснованно сделав выводы на основании путевых заметок которые публиковал MForum.ru в процессе тестирования.

На самом деле, только теперь каждый желающий может приступить к анализу результатов, которые опубликованы ниже и которые будут публиковать официальные партнеры MForum.ru, принимавшие участие в тестировании.

Материал будет состоять из шести частей, посвященных, соответственно различным административным регионам России, где проводились измерения. Первой на трассе следования мобильной лаборатории была Московская область.

Условия проведения

Измерения проводились в "выделенном режиме" (Dedicated Mode). Звонки осуществлялись на автоответчики операторов. Длительность соединения при этом составляла 60 секунд. В ходе измерений была собрана и проанализирована следующая информация:

• Call setup - число совершенных соединений

• Dropped calls - число оборванных соединений

• Blocked Calls - число неудавшихся соединений

• Handover OK - число успешных хендоверов (переход между сотами во время соединения)

• Handover failures - число неуспешных передач (неуспешная передача соединения между сотами)

• RxLev - уровень сигнала, принимаемого мобильной станцией

• RxQual - уровень качества сигнала, принимаемого мобильной станцией (bit error rate)

• Усреднённые значения параметров: RXLev, RXQuality

Измерения параметров радиоканала осуществлялись только в направлении "вниз": от БС к мобильной станции. Оценка и анализ результатов исследования проводился экспертным советом драйв-теста "Мобильного форума".

Результаты теста

Для удобства просмотра результатов, мы разделили участки маршрута на несколько увеличенных подучастков:

• первый обозначает отрезок от г. Москвы до Востряково,

• второй Барыбино - Миннево,

• третий от Михнево до границы с Тульской областью.

 

Для каждого участка в верхней части карты приведены дополнительные настройки, позволяющие выбрать оператора и параметры измерений, которые представлены в виде маркерных линий нанесённых на карту региона. Соответствие цветов маркера и параметров устанавливается по легенде, которая также присутствует на каждом из отдельных участков карты.

RXLevel

Параметр RXLevel описывает уровень сигнала радиоподсистемы от БС до абонентского терминала и измеряется в децибеллах на  милливатт. На таблице соответствия цвета определённому значению dbm (легенде) видно, что -58 dbm уровень сигнала очень высокий - это лучшее значение, а вот при уровне -110 dbm позвонить, как правило, уже не получится. Промежуточные значения от -68 до -89 dbm соответствуют достаточному уровню для качественного соединения. Значения от -89 до -100 dbm - "пограничная область" сигнала, не обеспечивающего гарантированной связи.

Карты RXLevel каждого из операторов хорошо демонстрируют, насколько обеспечен район проведения драйв-теста радиосигналом. RXLevel является базовым параметром, позволяющим делать оценки качество связи. Зачастую он впрямую связан с другим параметром - RXQuality (о нем речь впереди). На карте RXLevel заметно, что с момента старта тестирования, в районе Кузьминок, по Юго-восточной части МКАД и до Каширского шоссе (M4) лучший уровень сигнала демонстрировала сеть МТС. На втором месте оказался "МегаФон", у которого эпизодов с пониженным уровнем сигнала до 90 dbm заметно меньше, чем у "Би Лайн GSM". Но после выезда на Каширское шоссе и вплоть до района Домодедово уровень в сети "Би Лайн GSM" поднялся и заметно, обеспечив этой сети лидерство по данному параметру. 

В сети МТС уровень сигнала, как это не странно, в районе Домодедово сначала снизился до минимального значения, а затем и вовсе пропал, появившись вновь уже в районе Востряково.

Приятно радовал "МегаФон", продемонстрировав неожиданный для MForum.ru результат, - в районе Домодедова уровень, хотя и снижался до - 90 dbm, что, впрочем, позволяет уверенно совершать звонки, участков с потерей сигнала - не зарегистрировано.

Остается признать, что на участке Домодедово-Востряково первое место по RXLevel принадлежит сети "Би Лайн GSM", в последние месяцы принимавшей серьезные усилия по улучшению качества своего покрытия и услуг в Москве и Подмосковье, второе место по-праву принадлежит компании "МегаФон", также сумевшей добиться существенного, качественного изменения своего покрытия в лучшую сторону. 

Впрочем, уже от Востряково до Михнево налаживаются дела у МТС - здесь самый высокий в среднем уровень сигнала - у этой компании. "МегаФон" и "Би Лайн GSM" демонстрировали сравнимые показатели, разве что в районе Барыбино у "МегаФона" уровень сигнала оказался заметно выше, чем у "Би Лайна".

От Михнева и до границы Московской и Тульской областей, лучший результат демонстрировал "МегаФон". Уровень сигнала в сети МТС на большей части этого отрезка трассы характеризовался критическими значениями -100 и даже -120 dbm (когда совершить звонок не удаётся). Вряд ли это можно признать удовлетворительным результатом.

Для того, чтобы все желающие могли объективно оценить распределение уровней сигнала вдоль трассы измерений, мы  публикуем также гистограммы значений RX-Level.

Гистограммы RX-Level

Как известно, гистограммы, характеризующие разброс уровня сигнала каждого из четырех операторов, позволяют определить границы значений, которым соответствует уровень сигнала. Чем больше значений концентрируется ближе к правой вертикальной оси, тем лучше покрытие.

"Би Лайн GSM"

"МегаФон"

МТС

Гистограммы наглядно показывают, что по показателю RX-Level места между операторами в Московской области распределились так: МТС, "Би Лайн GSM" и "МегаФон".

RX-Quality

Параметр RX-Quality соответствует величине "bit error rate", измеренной в радиоканале, - процент ошибок при передаче оцифрованной речи. Значениям bit error rate в процентах для наглядности поставлены в соответствие цифровые значения от 0 до 7. Мы не публикуем таблицу этого соответствия, чтобы не перегружать текст, отметим лишь, что значение 0 - это "хорошо", 7 - "плохо".

Глядя на карту, несложно заметить, что по параметру RX-Quality от места старта (район Кузьминок) и до района Домодедово лучшие значения зарегистрированы в сети "Би Лайн GSM". Совсем незначительно уступает "МегаФон". Значения параметра, показанные сетью МТС, уступают результатам конкурентов. Можно предположить, что во-многом это обусловлено потерей сигнала в сети МТС в районе Домодедово.

От Востряково до Михнево, как и в случае с RxLev, лидером оказался МТС, тогда как "МегаФон" и "Би Лайн GSM" демонстрировали схожие показатели.

На участке от границы областей "МегаФон" по RX-Quality оказался первым.

Гистограммы RX-Quality

Здесь левая ось на гистограммах - это количество измеренных значений, которые использованное MForum.ru в ходе теста оборудование позволяет получать с частотой примерно 2 раза в секунду.

"Би Лайн GSM"

"МегаФон"

МТС

Нижняя шкала соответствует легенде на карте (0 - "хорошо", 7 - "плохо").

Настоящий сюрприз, как оказалось, скрывают интегральные диаграммы RxQual, согласно которым порядок лидерства оказался иным, нежели можно судить по RxLev. Если лидером по-прежнему следует признать МТС, то "МегаФон" вдоль трассы М4 обошел "Би Лайн GSM". Впрочем, оговоримся, что показанные значения достаточно близки у всех операторов, что само по себе можно считать еще одним сюрпризом и несомненным достижением "МегаФона".

Средние значения параметров, полученных в ходе драйв-теста

По поводу применимости средних значений параметров следует сделать одно важное замечание. Не всегда самые лучшие средние значения указывают на самую качественную связь. При обработке средних значений учитываются только те данные, которые смогла собрать измерительная станция, а собирает она их только при наличии сигнала. Следствием этого может стать факт того, что оператор, имеющий самое большое покрытие, усредненно проигрывает оператору, у которого покрытие меньше. Чтобы учесть факт наличия/отсутствия покрытия мы рассчитали дополнительный статистический параметр - общая продолжительность качественной связи (ОПКС) на всем маршруте тестирования. Для этого мы умножили суммарное количество полученных измерений при уровне RxQual<=2 на интервал измерений - 480 мс. Значения данного параметра приведены в последней колонке приведенной таблицы.

Очевидно, что в Московской области значения параметра ОПКС очень близки у всех операторов.

Таблица статистики событий

Статистика событий	"Би Лайн GSM"	МТС	"МегаФон"
Call setup - число совершенных соединений	68	71	71
Blocked Calls - число неудавшихся соединений / % к числу совершенных	3	3	2
Dropped Call - число оборванных соединений	0	2	0
Handover OK - число успешных передач соединения между сотами	90	110	144
Handover Failure - число неуспешных передач соединения между сотами	7	2	3

Резюме

Общее время качественной связи (ОПКС) получилось примерно одинаковым у всех операторов. На первом месте здесь МТС, затем "МегаФон" и "Би Лайн GSM". При этом, однако, "МегаФон" обеспечивал самую непрерывную связь (сигнал, достаточный для установления соединения присутствовал практически на всем протяжении трассы). Ни "Би Лайн GSM", ни МТС этого обеспечить не смогли, хотя на тех участках, где сигнал этих сетей присутствовал, уровень зачастую был выше, чем у "МегаФона".

По уровню сигнала (анализ гистограмм RxLevel) лидирует МТС, далее идут "Би Лайн GSM" и "МегаФон". По качеству сигнала (анализ гистограмм RxQuality) в лидерах по-прежнему МТС, за которой следуют "МегаФон" и "Би Лайн GSM".

Анализ карт покрытия RxLevel / RxQuality мы провели раздельно по трем участкам маршрута. Места распределились следующим образом:

Результат	1-й участок	2-й участок	3-й участок
1 место	"Би Лайн GSM"	МТС	"МегаФон"
2 место	"МегаФон"	"МегаФон"	"Би Лайн GSM"
3 место	МТС	"Би Лайн GSM"	МТС

Из всего разнообразия представленных оценок напрашивается один основной вывод: отсутствие явного лидера. Московская область, безусловно, имеет развитую инфраструктуру сотовой связи, выделиться на фоне которой становится все сложнее. Итоговые места по данном региону мы решили не распределять.

Результаты наглядно демонстрируют успешность активных мероприятий, предпринятых в последнее время компаниями "Би Лайн GSM" и "МегаФон" по кардинальному улучшению качества покрытия в Московской области. В этой связи будет интересно оценить аналогичным образом и результат развития сетей "большой тройки" непосредственно в Москве, для чего MForum уже запланировал проведение соответствующих испытаний в конце сентября.

MForum благодарит всех, кто принял участие в подготовке и проведении столь сложного мероприятия, как инструментальный драйв-тест, - прежде всего, сотрудников операторов сотовой связи, обеспечивающих качество измерений, журналистов, вытерпевших все тяготы длинного путешествия, а также всех, кто оказал поддержку этому мероприятию, сделав его возможным.

Впереди ещё пять областей - следите за публикациями MForum.ru и изданий-инфоспонсоров. Мнениями по-поводу проведенного драйв-теста, его результатам и распределению мест победителей, предлагаем обменяться в форуме.

© "Мобильный форум"

Редакция MForum выражает особую признательность Дмитрию Путию, взявшему на себя основные тяготы по организации драйв-теста, а также сотрудникам MForum.ru, принимавшим участие в разработке, организации и проведении драйв-теста и подготовке его результатов к печати: А.Борисову, А.Калабиной, Н.Солнцевой, Я.Ставничему.

Информационные партнеры драйв-теста: