Предложена Департаментом информационных технологий Правительства Москвы
Общественное и экспертное обсуждение документа проходит на сайте ДИТ http://dit.mos.ru/metodika
Методика проведения оценочных испытаний и нормы на показатели качества услуг связи стандарта GSM/GPRS/EDGE
1. СЕТИ СОТОВОЙ ПОДВИЖНОЙ СВЯЗИ
Методика проведения оценочных испытаний и нормы на показатели
качества услуг связи стандарта GSM/GPRS/EDGE.
Москва, 2013
2. Оглавление
Введение ...................................................................................................................................................... 4
1 Определения............................................................................................................................................. 6
2 Обозначения и сокращения .................................................................................................................... 9
3 Общие положения ..................................................................................................................................12
3.1 Классификация услуг ......................................................................................................................12
3.2 Процесс оказания услуги ................................................................................................................13
3.3 Типы соединений. ..........................................................................................................................13
4 Показатели качества основных услуг....................................................................................................14
4.1 Обзор международной практики классификации показателей качества. ................................14
4.2 Номенклатура показателей качества услуг. ..................................................................................18
4.3 Рекомендации к разработке норм на показатели качества услуг. .............................................20
5 Требования к программе проведения контрольных испытаний услуг СПС для оценки показателей
качества. .....................................................................................................................................................27
5.1 Требования к оценке результатов испытаний. .............................................................................27
5.2 Применение метода контрольных вызовов. ...............................................................................27
5.3 Требования к метрологическому обеспечению испытаний........................................................28
6 Методика проведения испытаний услуг СПС для оценки показателей качества.............................29
6.1 Требования к срокам проведения испытаний. .............................................................................29
6.2 Выбор маршрутов испытаний. .......................................................................................................29
6.3 Порядок и методология проведения контрольных вызовов. ....................................................30
6.4 Метод сбора данных испытаний при помощи технических комплексов. .................................30
6.5 Метод представления и обработки результатов испытаний при помощи технических
комплексов. ...........................................................................................................................................31
6.6 Требования к документированию результатов испытаний. .......................................................31
6.7 Требования к оборудованию для тестовых комплексов. ............................................................32
7 Нормы показателей качества ................................................................................................................36
7.1 Методика формирование норм показателей качества. ..............................................................36
8 Подготовка персонала ...........................................................................................................................37
8.1 Общие требования к подготовке персонала. ...............................................................................37
9 Список используемых источников ........................................................................................................38
Приложение 1. Основные параметры, декодируемые/вычисляемые из радиосигнала сети СПС
стандарта GSM с помощью тестового комплекса...................................................................................42
Приложение 2. Расчет технических показателей качества...................................................................46
3. Приложение 3. Примеры измерительных комплексов .........................................................................48
Приложение 4. Классификация автомобильных дорог общего пользования регионального или
межмуниципального значения по группам ............................................................................................51
Приложение 5. Классификация городских магистралей, улиц и проездов г. Москвы .......................53
Приложение 6. Нормы показателей качества голосовых услуг ............................................................54
Приложение 7. Нормы показателей качества услуг для передачи данных .........................................54
4. Введение
В настоящее время в РФ отсутствует документ, регламентирующий показатели
качества услуг радиотелефонной связи. Существует ГОСТ Р 53732-2009 «Качество услуг
сотовой связи. Показатели качества» [1], который содержит только частичный перечень
показателей качества без указания норм на эти показатели. На данный момент для
оценки качества услуг связи используются только показатели, определенные Приказом
Мининформсвязи № 113 от 27.09.2007 [2], однако следует отметить, что данный приказ
предъявляет требования к качеству функционирования сетей связи, а не к качеству
оказания услуг. В данном Приказе определен один показатель для сетей подвижной
радиотелефонной связи, а именно, доля несостоявшихся вызовов из-за технических
неисправностей или перегрузки сети связи в общем количестве попыток вызовов (потери
вызовов) при установлении соединений (не более 5%).
Сейчас контроль качества услуг проводится в рамках внутреннего аудита
предприятия связи. Федеральная служба по надзору в сфере связи, информационных
технологий и массовых коммуникаций (Роскомнадзор) пока не имеет полных методик
проверки качества услуг и проводит частичные выборочные проверки на основе
существующих нормативных правовых актов (НПА).
Таким образом, в РФ целесообразно развивать нормативную базу качества услуг,
включающую номенклатуру контролируемых показателей качества, важных с точки
зрения пользователей, допустимые нормы на эти показатели и методы их измерения,
единые для применения как операторами связи, так и контролирующими органами в
области связи.
Очевидно, что качество услуг связи является важным фактором, влияющим на
конкурентоспособность операторов связи и исследование вопросов обеспечения качества
услуг подвижной радиотелефонной связи является актуальной задачей. С целью
повышения качества оказания услуг связи в условиях конкуренции на рынке
телекоммуникационных услуг необходима разработка соответствующих
регламентирующих документов в области качества услуг и придания им статуса НПА.
Разработанные номенклатура показателей качества предоставления услуг связи, нормы
на показатели качества и методы их контроля (оценки) будут востребованы как
операторами связи и федеральными органами исполнительной власти,
осуществляющими деятельности в области связи, так и гражданами и юридическим
лицами, являющимися пользователями услугами связи.
Показатели качества услуг связи должны определяться на основе моделей,
предложенных Международным союзом электросвязи (МСЭ) при определении которых
следует учитывать цели применения данных показателей. Обеспечение эффективности
системы зависит в первую очередь от наличия нормативной базы для проведения
испытаний.
5. Целью настоящего документа является:
— создание общедоступных перечней показателей качества услуг сетей
подвижной связи стандарта GSM/EDGE (Global System for Mobile Communications/
Enhanced Data Rates for GSM Evolution), по которым потребитель может
сравнивать качество аналогичных услуг связи, оказываемых разными
операторами связи;
— создание уверенности у потребителей услуг связи и других заинтересованных
сторон в возможности организаций связи обеспечивать стабильность уровня
качества услуг связи в соответствии с установленными нормативными
требованиями, утвержденными Минсвязи России;
— повышение качества оказываемых услуг связи;
— подготовка в организациях отрасли квалифицированных специалистов, в
области обеспечения качества услуг связи через показатели, оцениваемые со
стороны потребителей, а также по системам качества;
— формирование доверия к отраслевой Системе сертификации средств связи,
которое позволяет использовать имеющийся опыт для создания
авторитетной системы сертификации услуг связи и систем качества;
— дальнейшая либерализация российского рынка телекоммуникационных
услуг.
В процессе работы был проведен и учтен анализ международного опыта
стандартизации, использован опыт ведущих российских и зарубежных операторских
компаний по обеспечению качества услуг.
Внедрение методики оценки качества услуг связи позволит решить следующие
задачи:
— повышение доверия потребителей и, как следствие, расширение
инфраструктуры потребления услуг инфокоммуникаций;
— обеспечит стабильно высокое качество предоставления услуг за счет
совершенствования моделей бизнес процессов, внедрение систем
управления качеством;
— повышение инвестиционной привлекательности предприятий отрасли.
6. 1 Определения
В настоящем документе применяются следующие термины с соответствующими
определениями [3]:
- сеть сотовой подвижной связи (сеть СПС) – совокупность аппаратно-программных
средств, обеспечивающих подвижным абонентам возможность представления услуг
связи между собой и со стационарными абонентами телефонной сети общего
пользования [4], а также возможность передачи данных от подвижного абонента к
удаленному серверу или другому абоненту сети СПС;
- служба (сети СПС) - организационно-техническая структура оператора на сети,
обеспечивающая производство одного или нескольких видов услуг сотовой связи;
- основные (базовые) услуги - услуги, определенные основным назначением
службы [5];
- дополнительные услуги - услуги, предоставляемые в дополнение к основным
услугам [5];
- зона обслуживания оператора СПС – территория, на которой оператор СПС
уполномочен оказывать услуги связи в соответствии с лицензией, а пользователю
обеспечивается возможность получения основных услуг СПС с качеством в соответствии с
нормами настоящего документа;
- оператор сотовой подвижной связи – организация или индивидуальный
предприниматель, имеющие лицензию на предоставление услуг сотовой подвижной
связи, выданную федеральным органом исполнительной власти в области связи, и
оказывающие эти услуги на основании договоров об оказании услуг сотовой подвижной
связи [6];
- пользователь (абонент СПС) – физическое (юридическое) лицо, получающее услуги
сотовой подвижной связи на основании договора об оказании услуг с оператором СПС [6];
- услуга сотовой подвижной связи – результат деятельности оператора СПС по
приему, обработке и передаче информации посредством сети сотовой подвижной связи;
- организационно-технический процесс предоставления услуг абоненту – комплекс
мероприятий, в том числе технологический процесс предоставления услуги, который
охватывает все взаимоотношения оператора связи и абонента;
- качество – степень, с которой совокупность собственных характеристик выполняет
требования [7];
- требование – потребность или ожидание, которое установлено, предполагается
или является обязательным [7];
- качество услуг СПС - интегральный эффект показателей обслуживания,
определяющий степень соответствия регламентированных параметров качества сети СПС
утвержденным нормам;
- показатели качества услуг СПС – численные характеристики услуги, полученные
путем расчета из параметров качества, которые определяют результат деятельности
оператора СПС по производству услуг СПС и обслуживанию пользователей [5];
7. - параметры качества – значения, полученные в результате испытаний, опросов или
данных статистической отчетности;
- обоснованная жалоба – письменная претензия клиента, подтвержденная
соответствующими службами оператора в результате проверки;
- доступность связи (доступность установления соединения) - вероятность
установления требуемого соединения между вызывающим и вызываемым абонентами
[5];
- показатель доступности связи – доля успешных вызовов от общего числа
сделанных попыток вызовов;
- непрерывность связи (сохранность установленного соединения) - отсутствие
преждевременного разъединения установленного соединения между двумя абонентами
по причинам, не зависящим от них [5];
- показатель непрерывности связи – доля вызовов, окончившихся разъединением
установленного соединения по инициативе абонента;
- аудит – систематический, независимый и документированный процесс получения
свидетельств проверки и объективного их оценивания с целью установления степени
выполнения согласованных критериев проверки [7].
- покрытие вне/внутри зданий определяется как процент тестового пути, где уровень
ВССН обслуживающей базовой станции выше или равен пороговому значению для этого
типа измерений. Покрытие является одной из важнейших характеристик сети – оно
определяет возможность доступ пользователя к сети и ее сервисам [8]. Обычно
операторы предсказывают покрытие на основании моделей распространения радиоволн.
Покрытие внутри зданий предсказывается косвенно по уровню ВССН обслуживающей
базовой станции вне зданий (на тестовом маршруте).
- доля неуспешных вызовов – отношение количества неуспешных вызовов к общему
количеству проверенных вызовов за период испытаний, выраженное в % или абсолютной
величине.
- успешные вызовы – вызовы, закончившиеся ответом станции вызываемого
абонента, включая не ответ или занятость вызываемого абонента, или вызовы
закончившиеся ответом оператора о том, что абонент находится вне зоны
обслуживания или его аппарат выключен.
- неуспешные вызовы – попытки вызовов, не завершившиеся установлением
соединения.
- преждевременное разъединение установленного соединения - прекращение
соединения (разговора) не по инициативе абонента.
- доля вызовов, не удовлетворяющих нормативам по качеству передачи речи –
отношение количества вызовов (установленных соединений), не удовлетворяющих
нормативам по качеству передачи речи к общему количеству проверенных вызовов за
период испытаний, выраженное в % или абсолютной величине.
8. - качество передачи речи – сохранение в допустимых пределах параметров
передачи речи информационного сигнала (громкость, разборчивость), поступившего в
систему связи, при заданных условиях, когда эта система находится в состоянии
готовности.
- доля вызовов, не удовлетворяющих нормативам по величине времени
задержки сигнала ответа - отношение количества вызовов, не удовлетворяющих
нормативам по величине времени установления соединения к общему количеству
проверенных вызовов за период испытаний, выраженное в % или абсолютной величине.
- время установления соединения интервал времени между запросом на
выделение радиоканала «Channel Request» по каналу RACH, отправляемый
мобильным терминалом; и сообщением «Alerting», после которого абонент
слышит тон ответа от вызываемого абонента (автоответчика) или сообщения
сети о том, что абонент находится вне зоны обслуживания или его аппарат
выключен.
- доля неуспешных попыток установления соединения для передачи данных –
отношение количества неуспешных попыток установления соединения для передачи
данных к общему количеству проведенных попыток за период испытаний, выраженное в
% или абсолютной величине. Соединение для передачи данных в сети СПС считается
неуспешным, если не удалось активировать PDP (Packet Data Protocol – протокол
передачи данных). Активация PDP начинается с момента отправки телефоном сообщения
о запросе на установление соединения для передаче данных ("Activate PDP context
Request"). PDP считается активированным, если в течении 150 секунд после отправки
запроса от сети приходит подтверждение об активации PDP ("Activate PDP context
Accept"), в противном случае контрольный вызов относится к неуспешным попыткам
активации сессии передачи данных [9]. Если соединение для передачи данных
установлено успешно, на дисплее тестового телефона появляется соответствующая
иконка.
- доля соединений для передачи данных, не удовлетворяющих нормативам по
величине времени установления соединения - отношение количества соединений, не
удовлетворяющих нормативам по величине времени установления соединения к общему
количеству проверенных соединений для передачи данных за период испытаний,
выраженное в % или абсолютной величине
- время установления соединения для передачи данных - интервал в секундах
между инициацией сессии передачи данных пользователем: моментом отправки
тестовым телефоном сообщения "Activate PDP context Request" и моментом получения от
сети сообщения "Activate PDP context Accept", что соответствует появлению логотипа
установленного соединения на дисплее тестового телефона
- средняя скорость передачи данных на линии вверх/на линии вниз – усредненное
значение скорости передачи тестового за весь период испытаний.
- городская территория – территория в пределах административных границ
городов.
9. - сельская территория – территория вне пределов административных границ
городов.
2 Обозначения и сокращения
В настоящей методике применяются следующие обозначения и сокращения:
ГЛОНАСС - глобальная навигационная спутниковая система
МСЭ - международный союз электросвязи
МТК - мобильный тестовый комплекс
РРВ - распространение радиоволн
СПС - сотовая подвижная связь
СТК - стационарный тестовый комплекс
ТфОП - телефонная сеть общего пользования
ACMA - австралийский департамент по надзору за телекоммуникациями и
СМИ (Australian Communications and Media Authority)
ARCEP - регулятор в области телекоммуникаций и почтовых сервисов
Франции (L'Autorité de régulation des communications électroniques
et des postes)
ВССН - широковещательный канал в сети GSM (Broadcast Common Control
Channel)
BER - процент ошибочных бит (Bit error rate – BER)
BS - базовая станция (Base Station)
BSC - контроллер базовых станций (Base Station Controller)
CDR - доля «оборвавшихся» вызовов (Call Drop Rate)
CI - идентификатор соты (Cell Identity)
CSG - гарантируемые уровни сервиса (Customer Service Guarantee)
CunSR - доля неуспешных вызовов (Call unsuccessful rate)
dBm - измеренная мощность сигнала в dB, отнесенная к 1mW.
DTX - прерывистая передача (Discontinuous Transmission)
10. EDGE - высокоскоростная система передачи данных в сетях GSM (Enhanced
Data rates for GSM Evolution)
ETSI - европейский институт телекоммуникационных стандартов (European
Telecommunications Standards Institute)
FER - процент неправильно декодированных фреймов (Frame Erasure Rate)
FH - перескоки по частоте (frequency hopping)
FTP - протокол передачи файлов (file transmission protocol)
GERAN - сеть радиодоступа EDGE (GSM EDGE Radio Access Network)
GPRS - система пакетной передачи данных (General Packet Radio Service)
GPS - система глобального позиционирования (Global Positioning System)
GSM - стандарт цифровой связи (Global System for Mobile Communications)
HLR - «домашний» реестр абонентов (Home Location Register)
IDA - департамент развития телекоммуникаций Сингапура (Infocomm
Development Authority of Singapore)
IP - интернет протокол (Internet Protocol)
ISDN - цифровая сеть связи (Integrated Services Digital Network)
LAC - код географической зоны внутри сети СПС (Location Area Code)
MCC - код страны сети СПС (Mobile Country Code)
MMS - сервис мультимедийных сообщений (Multimedia Messages Service)
MNC - код сети СПС внутри страны (Mobile Network Code)
MOC - исходящий вызов( Mobile Originated Call)
MOS - средняя оценка разборчивости речи (Mean Opinion Score)
MS - мобильная станция (Mobile station)
MSC - коммутатор сети мобильной связи (Mobile Switching Center)
MTC - входящий вызов (Mobile Terminating Call)
OFCOM - регулятор телекоммуникационной индустрии Великобритании (Office
of Communications)
11. PESQ - оценка воспринимаемого качества речи (Perceptual Evaluation of Speech
Quality)
PDP - протокол передачи данных (Packet Data Protocol)
RACH - канал случайного доступа (Random Access Channel)
SLA - соглашение об уровне качества услуг (Service Level Agreement)
SMS - сервис коротких сообщений (Short Messages Service)
STQ - качество передачи речи и данных (Speech and multimedia Transmission
Quality)
SQI - индекс качества речи (Speech Quality Index)
TRAI - регулятор в сфере телекоммуникаций Индии (Telecom Regulatory
Authority of India)
QoS - качество обслуживания (Quality of Service)
WAP - протокол беспроводных приложений (Wireless Application Protocol)
WGS - всемирная геодезическая система координат( World Geodetic System)
3GPP - проект партнерства третьего поколения (3rd Generation Partnership
Project)
12. 3 Общие положения
3.1 Классификация услуг
Классификация услуг радиотелефонного соединения, предоставляемых сетями
СПС:
Основные услуги:
1.1 Предоставление радиотелефонного соединения (т.е. соединения с
коммутацией каналов) в пределах сети связи одного и того же оператора;
1.2 Предоставление радиотелефонного соединения от/с абонентским устройством
ТфОП;
1.3 Предоставление радиотелефонного соединения от/с абонентскими станциями
абонентов других сетей подвижной связи одного и того же стандарта;
1.4 Предоставление радиотелефонного соединения от/с абонентскими станциями
абонентов других сетей подвижной связи другого стандарта;
1.5 Предоставление радиотелефонного соединения посредством национального
роуминга, оказываемое оператором связи Федеральной сети связи;
1.6 Круглосуточный вызов экстренных и аварийных служб по месту фактического
нахождения пользователя в пределах Российской Федерации.
1.7 Предоставление пакетного соединения по передаче данных;
Дополнительные услуги:
2.1 Предоставление радиотелефонного соединения или соединения по передаче
данных посредством международного роуминга, оказываемое операторами
федеральной сети сотовой подвижной связи и сети подвижной персональной
спутниковой связи общего пользования;
2.2 Определение номера вызывающего абонента;
2.3 Подробная расшифровка счета за оказанные услуги подвижной связи;
2.4 Переадресация вызова;
2.5 Запрещение вызова;
2.6 Ограничение вызова;
2.7 Голосовая почта;
2.8 Конференц-связь;
2.9 Предоставление доступа к телематическим службам и службам передачи
данных;
2.10 Передача коротких текстовых сообщений;
И т.д.
13. 3.2 Процесс оказания услуги
Услуга «предоставление радиотелефонного соединения» включает в себя
следующие процедуры:
- инициализация - предоставление доступа к сети оператора связи в ответ на
действие абонента по инициации радиотелефонного соединения;
- предоставление услуги - предоставление оператором абонентам основных и
дополнительных услуг связи, указанных выше;
- завершение предоставления услуги - разъединение радиотелефонного
соединения.
3.3 Типы соединений.
В сетях СПС выделяются следующие типы вызовов, создаваемых абонентами:
- подвижная сеть – подвижная сеть (СПС-СПС);
- подвижная сеть – фиксированная сеть (СПС-ТфОП);
- фиксированная сеть – подвижная сеть (ТфОП -СПС).
Классификация соединений по типам (исходящее, входящее, местное,
междугородное, международное) устанавливается нормативными документами
федерального органа исполнительной власти в области связи с учетом местонахождения
пользователей, участвующих в радиотелефонном соединении и технических
особенностей оказания услуг СПС.
14. 4 Показатели качества основных услуг.
4.1 Обзор международной практики классификации показателей
качества.
Оказание услуг в сетях GSM (Global System for Mobile telecommunications -
глобальная система подвижной связи) на коммерческой основе началось в середине 1991
г. К 1993 году существовало 36 сетей стандарта GSM в 22 странах мира, еще 25 стран
рассматривало либо приняло решение о возможности внедрения GSM. В начале 1994 г.
число абонентов сетей стандарта GSM по всему миру достигло 1,3 миллиона. В настоящее
время 29% населения земного шара использует услуги на базе стандарта GSM. Сети
стандарта GSM относятся ко 2-му поколению сетей подвижной радиотелефонной связи.
В Международном союзе электросвязи работы по стандартизации качества услуг
связи проводятся исследовательскими комиссиями (Study Group, SG), главным образом в
рамках сектора стандартизации МСЭ-Т и частично сектора радиосвязи МСЭ-Р. Ведущей
исследовательской комиссией в вопросах качества услуг связи МСЭ-Т является SG 12
(сквозные сетевые характеристики и качественные показатели для сетей и терминалов), в
МСЭ-Р – SG 8 (мобильная связь, радиолокация, любительская связь, спутниковая связь и
услуги).
Наиболее известным документом, выпущенным этой комиссией, является
Рекомендация МСЭ-Р M.1079-2 [10]. Данная рекомендация определяет требования к
сетям доступа IMT-2000 в части качества передачи голоса/данных с учетом требований к
QoS. Эта рекомендация также определяет показатели соединения/сеанса связи в части
показателей времени установления соединения, характеристик задержки и вероятности
хендовера в сети доступа IMT-2000.
На территории Европы за процесс стандартизации в области телекоммуникаций,
радиовещания и некоторых видов информационных технологий отвечает Европейский
институт телекоммуникационных стандартов (European Telecommunications Standards
Institute, ETSI). Ведущая роль в области стандартизации требований к QoS принадлежит
техническому комитету по качеству услуг при передаче речи и данных (Speech and
multimedia Transmission Quality, STQ). Комитет STQ, наряду с другими задачами,
разрабатывает общие и технические требования к QoS для подвижных сетей GSM/3G.
Технический комитет STQ координирует свою деятельность с деятельностью других
комитетов в области стандартизации технических требований к качеству услуг связи:
технического комитета по услугам и протоколам для перспективных сетей
(Telecommunications and Internet converged Services and Protocols for Advanced Networking,
TISPAN), а также проект партнерства третьего поколения (3rd Generation Partnership
Project, 3GPP). Проект 3GPP был создан в 1998 г. с целью разработки глобальных
15. спецификаций для сетей подвижной связи третьего поколения, а также для сетей
стандарта GSM.
Разрабатываемая ETSI совокупность технических руководств и стандартов в
области качества услуг подвижной связи позволяет сертифицировать и контролировать
устанавливаемые ими гармонизированные требования для всех европейских операторов
связи на основе открытых и публичных процедур утверждения этих документов.
Франция
C 1997 года французский регулятор в области телекоммуникаций и почтовых
сервисов ARCEP1 (L'Autorité de régulation des communications électroniques et des postes)
проводит ежегодные сравнительные исследования качества мобильной связи в сетях всех
операторов страны. Данные работы финансируются с участием операторов СПС и
проводятся также с целью проверки соответствия реального качества предоставляемых
операторами услуг заявленным спецификациям [11]. ARCEP проводит измерения на сетях
второго и третьего поколений, при этом отдельно изучается голосовая связь, отдельно –
передача данных. Для оценки качества работы голосовых услуг сетей СПС по
согласованию с национальными операторами была разработана методика, включающая в
себя исследования параметров стабильности (возможность установить телефонную связь
и поддерживать ее в течение 2 или 5 минут) и качества голосового соединения.
Работа сетей проверяется в самых густонаселенных районах страны снаружи и
внутри зданий, на автомагистралях и в общественном транспорте (в том числе, в
высокоскоростных поездах). В качестве тестового оборудования используются обычные
(но предварительно протестированные на отсутствие неисправностей) абонентские
терминалы, модель и марка которых выбирается по рейтингу популярности у
пользователей тестируемой сети СПС. Специально обученные эксперты-регистраторы
совершают тестовые звонки в сеть ТФоП, фиксируют в ручном режиме параметры
стабильности соединения и оценивают (субъективно, по четырехбалльной шкале) его
качество.
В городах с населением более 400 000 человек территория для тестирования
разделена на зоны эквивалентных площадей, в которых надо сделать целый ряд вызовов.
Эксперты корректируют свои маршруты в зависимости от местности; их цель заключается
в том, чтобы равномерно покрыть всю площадь. В других городах зоны измерений
делятся на 2/3 в городе и 1/3 - в пригороде. Для фиксации географических координат
точек измерений используется оборудование GPS.
Тестовые звонки внутри зданий проводятся следующим образом: 20% в частных
офисных зданиях, 30% в частных жилых домах, 50% в общественных местах. Внутри
зданий вызовы выполняются в комнатах с окном, не шевелясь, на первом и других
этажах, за исключением подвальных помещений.
1
http://www.arcep.fr
16. Измерения в автомобиле осуществляются группой из 7 человек (3 эксперта-
регистратора мобильных телефонов в сопровождении водителя и 3 регистратора
фиксированных телефонов). Расположение мобильных телефонов, а также экспертов-
регистраторов в автомобиле меняется дважды в день. Каждый регистратор тестирует
одну сеть. Звонки осуществляются одновременно по всем трем национальным сетям.
Измерения пешеходами и в поездах проводятся группой из 6 человек (3 эксперта-
регистратора мобильных телефонов и 3 регистратора фиксированных телефонов).
Эксперты-регистраторы меняются мобильными телефонами после каждых 10 вызовов.
Помимо тестирования голосовых услуг, ARCEP проводит исследования сервисов
передачи данных в сетях 2G и 3G (где они представлены). Исследованию подвергаются
следующие услуги: SMS через данные, MMS, WAP, передача файла в режиме FTP, и
видеотелефония.
Результаты тестов публикуются в ежегодных отчетах ARCEP, доступных всем
желающим [11].
Австралия
Австралийский департамент по надзору за телекоммуникациями и СМИ (ACMA2 -
Australian Communications and Media Authority) в 2002 году разработал и утвердил CSG
(Customer Service Guarantee – гарантируемые уровни сервиса). CSG определяет
минимальные стандарты функционирования сервисов для защиты интересов
пользователей телефонных сетей, в случае невыполнения которых пользователи
получают денежную компенсацию от поставщика услуг. Ежеквартально АСМА публикует
отчеты о качестве работы телекоммуникационных компаний, куда, в том числе, входят и
результаты измерений параметров QoS сетей сотовых компаний.
Индия
Начиная с 2000 года, регулятор в сфере телекоммуникаций Индии (TRAI3 - Telecom
Regulatory Authority of India) периодически публикует нормы QoS и правила их измерения
для национальных телефонных компаний, в том числе для СПС. Последняя версия
документа вышла в свет в 2009 году [12]. С 2005 года TRAI проводит ежеквартальные
контрольные измерения параметров QoS в 121 национальной СПС в 23 регионах Индии.
Сингапур
Департамент развития телекоммуникаций Сингапура (IDA4 - Infocomm Development
Authority of Singapore) разработал и опубликовал свод норм QoS и правил их измерения
для основных типов телекоммуникационных сервисов страны. В том числе для
операторов СПС второго поколения [13]. Сервис-провайдеры обязаны ежеквартально
передавать в IDA отчеты о текущих значениях параметров QoS своих сетей, а регулятор
2
http://www.acma.gov.au
3
http://www.trai.gov.in/
4
http://www.ida.gov.sg
17. (IDA) проводит выборочные контрольные измерения и публикует рейтинг национальных
телекоммуникационных компаний согласно фактическим значениям параметров QoS в
них. В случае, если параметры QoS сети оператора не соответствуют принятым нормам, на
последнего накладывается денежный штраф.
Исследования проводятся как вне, так и внутри помещений (в общественно-
доступных местах, таких как бизнес-центры, супермаркеты, автостоянки).
Также IDA проводит исследования покрытия и доступности национальных
мобильных сетей передачи данных.
Великобритания.
В целях обеспечения пользователей телекоммуникационных сервисов
прозрачными, понятными и измеримыми данными о качестве работы сетей страны
независимый регулятор телекоммуникационной индустрии Великобритании (Office of
Communications - OFCOM5) выпустил документ об открытости информации о фактическом
уровне QoS в сетях для пользователей [14]. Одновременно с этим на основании
стандартов ETSI [15] были разработаны нормы для QoS в различных сетях и методики их
измерения, опубликованные в [16]. После консультаций с операторами, 27 февраля 2005
года OFCOM выпустил директиву, обязывающую последних предоставлять пользователям
данные о фактических значениях параметров QoS из [16] в своих сетях.
Основные параметры QoS и их нормы из [12], [13] и [16] приведены в таблице 1.
5
http://www.ofcom.org.uk/
18. Таблица 1. Основные показатели QoS и их нормы из международной практики
Параметр Определение Международный опыт
Процент тестового пути, >95%
где уровень ВССН Значение порогового уровня сигнала:
Покрытие вне
обслуживающей базовой Индия: -95 дБм
зданий
станции выше или равен Сингапур: -100 дБм
-95 дБм Англия: -87.5 дБм
Процент тестового пути,
где уровень ВССН
обслуживающей базовой >85%
Покрытие внутри станции на улице выше Значение порогового уровня сигнала:
зданий или равен Индия: -75 дБм
-71 дБм для городских Англия: -73,7 дБм
территорий, -85 дБм для
сельских территорий
R
CDR 100% ,
N
Доля вызовов,
где R - общее суммарное
окончившихся Сингапур CDR < 5%
число контрольных
разъединением
вызовов с
установленного Индия CDR <3%
преждевременным
соединения не по
разъединением за все
инициативе Малайзия CDR < 5%
сеансы испытаний, N -
абонента (CDR)
общее суммарное число
контрольных вызовов за
все сеансы испытаний.
Q
CunSR 100% где Q -
N
общее суммарное число
неуспешных контрольных
Доля неуспешных
вызовов за все сеансы Индия CunSR <5%
вызовов (CunSR)
испытаний, N - общее
суммарное число
контрольных вызовов за
все сеансы испытаний.
Время Время установления
Сингапур: 5 секунд,
установления соединения больше
соединения нормативного значения
19. 4.2 Номенклатура показателей качества услуг.
Полная номенклатура показателей качества основных услуг согласно
рекомендации [17] приведена в таблице 2.
Таблица 2. Полная номенклатура показателей качества основных услуг
Услуга Показатель качества Ссылка
Время предоставления доступа по
фиксированной сети;
Время предоставления доступа в интернет;
Доля проблем, связанных с процедурами
переносимости номеров;
Интенсивность сообщений об отказе по линиям
фиксированного доступа;
Время устранения отказа для линий
фиксированного доступа;
Время ответа для услуг оператора;
Время ответа для справочных служб;
Применимо ко всем
Время ответа для запросов [17], [18]
услугам
администрации/счета;
Относительное (в процентах к общему числу
абонентов) кол-во жалоб в отношении
правильности выставления счетов;
Относительное (в процентах к общему числу
абонентов) кол-во жалоб в отношении
правильности кредита счетов предварительной
оплаты;
Качество представления счетов;
Частота поступления жалоб клиентов;
Время разрешения жалоб клиентов;
Доля неуспешных вызовов;
Голосовая телефонная Время установления вызова;
связь (и услуги в Качество речевого соединения;
диапазоне тональных Качество факсимильного соединения; [17], [19]
частот, такие как факс, Коэффициент успешно переданных SMS;
передача данных и SMS) Коэффициент полностью переданных SMS;
Время сквозной доставки для SMS;
(Также применимы перечисленные выше
параметры голосовой телефонной связи) Доля
Услуги подвижной связи неуспешных вызовов; [17], [8]
Показатель непрерывности связи;
Площадь покрытия;
Время регистрации;
Достигаемая скорость передачи данных;
Коэффициент безуспешных передач данных; [17], [20],
Доступ в интернет
Коэффициент успешной регистрации; [9]
Задержка (время передачи в одном
направлении);
20. 4.3 Рекомендации к разработке норм на показатели качества услуг.
Для оценки качества голосовой связи сети СПС предлагается использовать
показатели качества услуг, приведенные в таблице 3. Для вычисления указанных
показателей используются результаты, получаемые с помощью измерительных тестовых
комплексов (приложение 1).
Таблица 3. Показатели качества голосовых услуг
Параметр Определение Спецификация
Процент тестового пути, где уровень ВССН
Покрытие вне
обслуживающей базовой станции выше или равен [8]
зданий
-95 дБм
Процент тестового пути, где уровень ВССН
Покрытие внутри обслуживающей базовой станции на улице выше
[8]
зданий или равен -71 дБм для городских территорий, -85
дБм для сельских территорий
Доля вызовов,
R
окончившихся CDR 100% ,
N
разъединением
где R - общее суммарное число контрольных
установленного [8]
вызовов с преждевременным разъединением за
соединения не по
все сеансы испытаний, N - общее суммарное число
инициативе
контрольных вызовов за все сеансы испытаний.
абонента (CDR)
Q
CunSR 100% где Q - общее суммарное
N
Доля неуспешных
число неуспешных контрольных вызовов за все [8]
вызовов (CunSR)
сеансы испытаний, N - общее суммарное число
контрольных вызовов за все сеансы испытаний.
Качество сигнала
на линии вниз, от Процентная доля времени соединения с
сети к качеством сигнала на линии вниз (RX_Qual_DL) [21]
абонентскому выше или равного 4
терминалу
Процентная доля времени соединения с
Качество речи на качеством речи (SQI) меньше или равного 15, или
[19], [22]
линии вниз средней разборчивости речи (MOS) меньше или
равного 3
Процентная доля времени соединения с
Качество речи на качеством речи (SQI) меньше или равного 15,или
[19], [22]
линии вверх средней разборчивости речи (MOS) меньше или
равного 3
Время
Время установления соединения больше
установления [8], [23]
нормативного значения
соединения
Оценка покрытия сети
21. Для оценки покрытия используется критерий - требуемый уровень принимаемого
сигнала SSтреб . , [24]:
SSтреб. MSчуств. IFзамирания FFзамирания BL
SSтреб . - требуемый уровень принимаемого сигнала, [дБм]
MSчуств. - чувствительность телефона, [дБм] [25] .
IFзамирания - запас на интерференционные замирания сигнала, [дБ]
FFзамирания - запас на быстрые (Релеевские) замирания сигнала, [дБ].
BL - потери за счет человеческого тела, [дБ].
В таблице 4 приводятся основные нормы к покрытию сети на момент законченного
этапа строительства сети [24]. Данные требования основываются на пороговых значениях
принимаемого уровня сигнала (downlink), для различных условий распространения
радиоволн (РРВ).
Таблица 4. Требования к значениям принимаемого уровня сигнала для различных
условий РРВ [24]
Критерий Требования к покрытию
Уровень принимаемого сигнала (DL). Уровень сигнала на улице RXLEV = – 95 дБм
Условие РРВ: городская застройка, вне или выше в 95% всех измерений
помещений
Уровень принимаемого сигнала (DL). Уровень сигнала на улице RXLEV = – 71 дБм
Условие РРВ: городская застройка, внутри или выше в 95% всех измерений для
помещений городских территорий
Оценка доли вызовов, окончившихся разъединением установленного
соединения не по инициативе абонента (CDR)
22. R
CDR 100% , где R - общее суммарное число контрольных вызовов с
N
преждевременным разъединением за все сеансы испытаний, N - общее суммарное число
контрольных вызовов за все сеансы испытаний.
Согласно [26], основными причинами обрыва вызовов (call drop) являются:
— Низкий уровень сигнала на линии «вверх» или линии «вниз»;
— Низкое качество сигнала на линии «вверх» или линии «вниз»;
— Превышение порогового значения задержки времени распространения
радиосигнала от мобильной станции до базовой станции сети СПС (timing
advance);
— Низкая мощность базовой станции сети СПС;
— Потеря (или отсутствие) сообщения с описанием соседних базовых станций
(системно1 информации типа 2 и 5;
— Неуспешный хэндовер (переключение между базовыми станциями сети во
время разговора).
Оценка доли неуспешных вызовов (CunSR)
Q
CunSR 100% где Q - общее суммарное число неуспешных контрольных
N
вызовов за все сеансы испытаний, N - общее суммарное число контрольных вызовов за
все сеансы испытаний. Неуспешным считается вызов, для которого в течение в течении 40
секунд после набора номера не получено сигнала ответа станции вызываемого абонента,
включая не ответ или занятость вызываемого абонента, или сообщения сети о том, что
абонент находится вне зоны обслуживания или его аппарат выключен.
К неуспешным относятся также вызовы, завершившиеся сообщением «сеть занята»
(“network busy”).
Оценка качества сигнала
За качество передаваемой речи в системе GSM отвечает параметр RXQUAL,
который связан с процентом неправильно декодированных фреймов6 (Frame Erasure Rate
- FER) и процентом ошибочных бит (Bit error rate – BER) и выражается в следующих
единицах [21], таблица 5:
Таблица 5. Связь значений параметра RXQUAL с BER и FER.
Значение BER FER
6
Фрейм считается неправильно декодированным в случае неверной контрольной суммы.
23. RXQUAL (%) (%)
0 x<0.2 x4.5
1 0.2 x0.4 4.5 x 8.5
2 0.4 x0.8 8.5 x12.5
3 0.8 x1.6 12.5 x16.5
4 1.6 x3.2 16.5 x20.5
5 3.2 x6.4 20.5 x24.5
6 6.4 x12.8 24.5 x
7 12.8 x 24.5 x
Ниже, в таблице 6, приведены соответствия значений параметра RXQUAL и
соответствующие им субъективные описания качества передаваемой речи.
Таблица 6. Требования к качеству сигнала для системы СПС без опции перескоков по
частоте (FH-frequency hopping) и с опцией перескоков по частоте.
Значение RXQUAL
Ожидаемое качество передаваемой
Без перескоков по С перескоками по речи
частоте частоте
Отличное качество: речь передаётся без
0-3 0-3
искажений или почти без искажений
Хорошее качество: качество речи
4 4-5 удовлетворительно с присутствием
малого количества искажений
Приемлемое качество: речь различима, с
5 присутствием некоторого напряжения,
иногда требуется повторение.
Плохое качество: качество речи
6–7 6 -7 отвратительное, плохо различается речь
от помех.
Оценка качества речи
24. Помимо качества сигнала, необходимо измерять дополнительный параметр
оценки качества речи – SQI (Speech Quality Index) [19], [22], [27]. При вычислении данного
параметра учитывается: процент ошибочных бит (BER), процент неправильно
декодированных фреймов (FER), используемый речевой кодек, активация опции
прерывистой передачи (DTX - Discontinuous Transmission) и хэндоверы. При
осуществлении хэндоверов качество речи ухудшается, так как часть речевых кадров
теряется. Потеря речевых кадров при осуществлении хэндоверов не отражается на
показаниях RXQUAL, так как во время хэндоверов измерение BER не проводятся.
На Рисунок 1 приводится соотношение между показателями качества SQI и RXQUAL
для кодека EFR (enhanced full rate) в зависимости от включения опции перескоков по
частоте, для разных скоростей движения абонента и условий РРВ [28]. Рисунок 1
показывает, что параметр SQI учитывает больше факторов, чем RXQUAL и, следовательно,
лучше характеризует субъективное качество передачи речи, воспринимаемое абонентом
СПС.
Рисунок 1. Соотношение между SQI и RXQUAL
1 – Типичная городская застройка, скорость движения автомобиля 0 км/ч,
перескоки по частоте;
2 – Типичная городская застройка, скорость движения автомобиля 48 км/ч, без
перескоков по частоте;
3 – Амплитудное замирание сигнала, скорость движения автомобиля 12 км/ч, без
перескоков по частоте;
4 – Типичная городская застройка, скорость движения автомобиля 3 км/ч, без
перескоков по частоте.
Вместо SQI возможно использование MOS (Mean Opinion Score) по алгоритму PESQ
[22]. В таблице 7 приведены соответствия значений параметра SQI, MOS и
соответствующие им субъективные описания качества передаваемой речи.
25. Таблица 7. Расшифровка значений параметра SQI и MOS
Качество Диапазон SQI Диапазон MOS
Отличное 20 – 30 4.0-5.0
Хорошее 15 - 19 3.0-3.9
Приемлемое 10 - 14 2.0-2.9
Плохое 5 -9 1.0-1.9
Очень плохое <5 <1
Оценка времени установления соединения.
Определение показателя дано в п.1 настоящей методики.
Время установления соединения вычисляется только для успешных вызовов, если
сигнал ответа не получен в течение 40 секунд после набора номера, то такой вызов
считается неуспешным.
Для оценки качества передачи данных в сети СПС предлагается использовать
показатели качества услуг, приведенные в таблице 8. Для вычисления указанных
показателей используются результаты, получаемые с помощью измерительных тестовых
комплексов (приложение 1).
Таблица 8. Показатели качества услуг для передачи данных
Параметр Определение Спецификация
G
PDPunSR 100% ,
P
Доля неуспешных
где G - общее суммарное число контрольных
попыток
попыток с неуспешной активацией сессии [9]
установления
соединения передачи данных за все сеансы испытаний, P -
общее суммарное число контрольных попыток
установления соединения для передачи данных
Интервал времени между следующими
Время установления
событиями:
соединения для [9]
передачи данных
Запросом Activate PDP Context Request и
Сообщением Activate PDP Context Accept
Скорость передачи
Средняя скорость данных на линии вниз, от сети к
данных на линии [20]
вниз
абонентскому терминалу в кбит/с
Скорость передачи
Средняя скорость передачи данных на линии
данных на линии [20]
вверх
вверх, от абонентского терминала к сети в кбит/с
Оценка доли неуспешных попыток установления соединения.
26. G
PDPunSR 100% , где G - общее суммарное число контрольных попыток с
P
неуспешной активацией сессии передачи данных за все сеансы испытаний, P - общее
суммарное число контрольных попыток установления соединения для передачи данных.
Соединение для передачи данных в сети СПС считается неуспешным, если не
удалось активировать PDP (Packet Data Protocol – протокол передачи данных). Активация
PDP начинается с момента отправки терминалом сообщения о запросе на установление
соединения для передаче данных ("Activate PDP context Request"). PDP считается
активированным, если в течении 150 секунд после отправки запроса от сети приходит
подтверждение об активации PDP ("Activate PDP context Accept"), в противном случае
контрольный вызов относится к неуспешным попыткам активации сессии передачи
данных [9]. Если соединение для передачи данных установлено успешно, на дисплее
тестового телефона появляется соответствующая иконка.
Оценка времени установления соединения.
Время установления соединения - интервал в секундах между инициацией сессии
передачи данных пользователем: моментом отправки тестовым телефоном сообщения
"Activate PDP context Request" и моментом получения от сети сообщения "Activate PDP
context Accept", что соответствует появлению логотипа установленного соединения на
дисплее тестового телефона.
Время установления соединения вычисляется только для успешных соединений
для передачи данных, если сигнал ответа не получен в течение 150 секунд после
инициации сессии, то такое соединение считается неуспешным.
Оценка средней скорости передачи данных.
Для вычисления средней скорости передачи данных (отдельно на линии вниз и
отдельно на линии вверх) следует использовать режим передачи файлов (file transmission
protocol - FTP) между тестовым комплексом и удаленным тестовым сервером. Скорость
передачи данных измеряется при передаче заранее выбранного файла, объем файла
должен составлять от 1 до 1.5 Мб несжимаемых данных (например, последовательность
случайных чисел). Пропускная способность FTP-сервера не должна ограничивать скорость
загрузки.
Удаленный тестовый сервер следует выбирать таким образом, чтобы он был
подключен максимально близко к шлюзам тестируемых сетей СПС – это позволит
минимизировать влияние качества транзитных сетей передачи данных на результаты
измерений [20].
27. 5 Требования к программе проведения контрольных испытаний услуг
СПС для оценки показателей качества.
5.1 Требования к оценке результатов испытаний.
Нормативы на показатели качества мобильных сетей связи имеют два значения:
высокий и нормальный, что определяется в [23], [29] [12], [13], [16].
Оценка результатов испытаний проводится по оценке технических показателей
качества услуг методом контрольных вызовов (п.5.2 настоящей методики) и определяется
уровень качества услуг:
- если проверка показала, что значения показателей качества соответствуют
высокому уровню, то данная сеть связи обеспечивает высокий уровень качества
обслуживания;
- если проверка показала, что значения показателей качества соответствуют
нормальному уровню, то считается, что данная сеть связи обеспечивает
нормальный уровень качества обслуживания.
При выявлении несоответствия показателей качества услуг связи требуемым
значениям при любых вышеперечисленных испытаниях уровень качества услуг не
присваивается.
5.2 Применение метода контрольных вызовов.
Контрольный вызов – вызов, инициируемый при испытании
специализированными техническими средствами.
Порядок определения требуемого количества контрольных вызовов
устанавливается для каждого оцениваемого показателя качества в зависимости от
выбранной точности оценки.
Контрольные вызовы проводятся от одного абонентского терминала до другого
(автоответчика). Показатели оцениваются по результатам проведения контрольных
вызовов.
Порядок определения рекомендуемого количества контрольных вызовов
устанавливается для каждого оцениваемого показателя качества в зависимости от
выбранной точности оценки в соответствии с таблицей 9 [3].
Таблица 9. Число контрольных вызовов при выбранной точности оценки 7
7
Примечание - Формула для вычисления числа контрольных вызовов при 95%-ном уровне надежности
приведена в приложении 2.
28. Нормативное Число контрольных вызовов при выбранной точности оценки
значение
показателя 5% 10% 20%
0,01 39600 9900 2500
0,015 26200 6500 1600
0,02 19600 4900 1200
0,025 15600 3900 1000
0,03 12900 3200 800
0,035 11000 2700 700
0,04 9600 2400 600
0,05 7500 1900 500
В случае автоматизированной проверки должна быть обеспечена точность не
менее 10%. Например, для оценки нормативного значения 5% необходимое число
контрольных вызовов не менее 1900. В случае неавтоматизированной проверки должна
быть обеспечена точность не менее 20%. Например, для оценки нормативного значения
5% необходимое число контрольных вызовов не менее 500. Если результаты испытаний
при неавтоматизированной проверке не укладываются в установленные нормативы, то
необходимо провести дополнительные испытания для обеспечения точности 10%.
Например, для оценки нормативного значения 5% необходимое число дополнительных
контрольных вызовов не менее 1400.
5.3 Требования к метрологическому обеспечению испытаний.
Для проведения испытаний должны применяться средства испытаний,
удовлетворяющие перечисленным ниже общим требованиям, рекомендуемые
или аналогичные им [30];
Применяемые при испытаниях средства измерений, попадающие в сферу
Государственного метрологического контроля и надзора, должны быть
сертифицированы с целью утверждения типа в Госстандарте России, а средства
измерений электросвязи (в том числе и не попадающие в сферу Государственного
метрологического надзора и контроля) – в системе сертификации "Электросвязь".
Метрологическое обслуживание (поверка, калибровка) этих средств измерений
должно быть проведено в соответствии с [30];
Перечень рекомендуемых средств для проведения испытаний приведен в [31].
29. 6 Методика проведения испытаний услуг СПС для оценки
показателей качества
6.1 Требования к срокам проведения испытаний.
Периодичность и продолжительность испытаний определяется объемом
испытаний на основании анализа сведений, представленных оператором СПС о
результатах последних оценочных испытаний, сведений о выполнении нормативов на
показатели удовлетворенности абонентов и сборе статистики по жалобам абонентов.
Кроме того, продолжительность испытаний зависит от емкости сети и лицензионной
территории обслуживания оператора СПС. Рекомендуемая частота проведения
оценочных испытания – два раза в год.
График испытаний (расписание проведения контрольных вызовов по дням и часам)
составляется с учетом рекомендаций ETSI [8] таким образом, чтобы измерения
проводились в часы наибольшей нагрузки сети: для центров городов испытания
выполняются в период с 10 до 17 часов в рабочие дни, для жилых районов – с 18 до 22
часов в рабочие дни или с 12 до 20 часов в выходные и праздничные дни.
6.2 Выбор маршрутов испытаний.
Маршруты перемещений и/или установки тестовых абонентских установок или
специальной измерительной аппаратуры на исследуемой территории должен включать:
- не менее 90% всех дорог территории, относящихся к группе 1 СН согласно ГОСТ
[32] (приложение 4);
- не менее 80% всех дорог территории, относящихся к группе 1 Н;
- не менее 60% всех дорог территории, относящихся к группе 2 Н;
- не менее 50% всех дорог территории, относящихся к группе 3 Н;
- не менее 10% дворовых проездов территории.
Для исследуемой территории в г. Москва маршруты перемещений и/или установки
тестовых абонентских установок или специальной измерительной аппаратуры должны
включать:
- не менее, чем 90% всех дорог территории, относящихся к категории №6 согласно
[33] (приложение 5);
- не менее, чем 80% всех дорог территории, относящихся к категории №1;
- не менее, чем 60% всех дорог территории, относящихся к категории №2;
- не менее, чем 50% всех дорог территории, относящихся к категориям №3 и 4;
- не менее 10% дворовых проездов территории.