2024年1月1日发(作者:)

5G NSA网络覆盖性能评估测试规范

中国移动通信有限公司网络部

2019年9月

文档修订记录

版本号 日期 修订页/修订描述 人员

v1.0 2019/9/11

创建文档 苏翰、耿鲁静、李世光

II

目录

1

2

目标 ........................................................................................................................................... 4

总体原则 ................................................................................................................................... 4

2.1

核心内容 ...................................................................................................................................... 4

2.2

测试手段 ...................................................................................................................................... 4

3

测试细则 ................................................................................................................................... 5

3.1

道路测试 ...................................................................................................................................... 5

3.2

室内测试 ...................................................................................................................................... 5

3.3

测试工具 ...................................................................................................................................... 6

3.4

测试卡要求 .................................................................................................................................. 6

3.5

FTP服务器要求 ........................................................................................................................... 6

3.6

测试网络 ...................................................................................................................................... 6

3.7

测试业务及方法 .......................................................................................................................... 6

3.8

频段信息 ...................................................................................................................................... 7

4

5

数据分析方法 ............................................................................................................................ 8

5G网络扫频测试评估指标 ........................................................................................................ 8

5.1

覆盖类指标 .................................................................................................................................. 8

5.2

干扰类指标 .................................................................................................................................. 8

5.3

锚点类指标 .................................................................................................................................. 9

5.4

测试基本信息 ............................................................................................................................ 10

6

5G网络终端测试评估指标 ...................................................................................................... 10

第10页

1 目标

本测试规范用于评估和分析各省、市的5G工程建设进度和网络性能,采用人工测试模式,对核心城区网格内主要道路和重点楼宇的覆盖情况和网络性能进行评估,验证5G网络质量情况。本规范采用5G商用终端加扫频仪联合测试的模式,以扫频测试对三家运营商的5G网络覆盖进行评估,以5G商用终端执行业务测试对移动5G网络性能进行评估,通过对室外道路和室内楼宇两大场景进行遍历测试,来对比分析与友商网络差异,评估网络覆盖的短板问题,为预商用提供支撑。

2 总体原则

室外道路场景和室内楼宇场景测试必须选择有竞对同时覆盖的区域:室外测试保证同车同路线,选取的测试网格内友商基站规模大致与移动相当;室内测试选择无5G室分由室外宏站覆盖室内的场景,且该宏站站点与友商基站共址,同时覆盖方向基本相同。

评估应充分考虑数据质量和采集效率,降低人为干预。

测试评估体系根据目标,主要从“网络覆盖性能评估”维度考虑。 其核心内容、指导方向、测试手段和主要指标如下:

2.1 核心内容

通过对室外道路和室内楼宇进行扫频仪加商用终端遍历测试来评估5G NSA全网建设落地质量,针对各省市竞争对手5G建设区域,开展4G锚点和5G网络的覆盖摸底测试,梳理网络建设、优化的主要问题,寻找短板,为下一步工作开展提供支撑。

2.2 测试手段

为反映真实覆盖情况,本次测试并不是专门针对5G连续覆盖区域的测试,每个城市至少完成3个核心城区或热点4G网格和6个无5G室分的楼宇,对网格内所有1至4级道路和楼宇内所有可以进入的区域进行遍历测试,对移动、电信、联通三网5G网络进行扫频测试,对移动5G网络进行商务终端业务测试。考虑到扫频仪的采样输出频度和采样均衡性,建议在扫频测试中每一个运营商对应一个扫频设备,扫描该运营商的所有锚点和NR频点;5G商用终端与扫频设备同车进行中国移动5G FTP大数据量上传、下载业务测试;

第10页

3 测试细则

所有路测软件与扫频仪同车、同时、同路线进行测试,商务终端插入中国移动测试SIM卡,并按3.7节要求进行测试。没有达到以下所有测试要求的网格或楼宇需进行重测直到符合要求为止。

3.1 道路测试

(1).

测试区域:至少完成3个核心城区或热点4G网格,选取的测试网格内友商基站规模大致与移动相当。

(2).

(3).

(4).

测试道路:城区1-4级道路

相应GPS设备进行测试轨迹记录;

测试速度:城区保持正常行驶速度,不设置最高限速,平均车速需达到20公里/小时;高速/高铁/地铁测试按照实际限速正常行驶;

(5).

渗透率:城区1-4级道路测试渗透率需达到80%以上。

3.2 室内测试

(1).

场景选择:室外宏站覆盖室内的无5G室分场景,同时该宏站应为移动与电信或联通共站址站;本次参与测试的连续覆盖范围内选取不少于6个重点楼宇/城市;

(2).

测试场景:楼宇按照使用性质分类较为复杂,主要分为党政军机关、办公楼、宾馆酒店、餐饮娱乐、交通枢纽、大型商超、高校、旅游景点、工业园区等。室内区域每座楼宇选择高、中、低层进行均匀遍历测试,需同步提交室内结构图和遍历测试打点结果,原则上须遍历测试室内全部可进入场景,严禁仅完成门口窗边定点测试;

(3).

测试区域

a)

办公楼宇主要测试区域为客户接待区、办公区、休息区;

b)

居民小区主要测试区域为社区休闲区、体育活动区、楼宇楼道、电梯间。无法进楼的居民小区务必进行楼宇间道路测试,选取居民小区核心区域;

c)

宾馆酒店主要测试区域为大堂、休闲区、客房(有条件进入);

d)

商场(大型超市)主要测试区域为服务台、休息区、休闲区、主要购物区域;

e)

餐饮娱乐场所主要测试区域为接待区、大堂、客户包房区域;

f)

工业园区的主要测试区域为员工宿舍、公共活动区域;

g)

高校的主要测试区域为主教学楼、宿舍楼和图书馆;

第10页

h)

交通枢纽的主要测试区域为机场大厅、到达区、候车区、火车站售票厅、休息区,大型地铁中转站点;

(4).

GPS定位:测试人员进入楼宇前需首先进入GPS定位、上报测试点。

3.3 测试工具

扫频仪需满足中国移动相关测试仪表规范要求,具备5G、4G TDD和4G FDD三模能力,并通过性能评估测试且达标。扫频仪支持5G网络制式下的无线信道扫描、TopN小区扫描、频谱测量、CW测试,测量模式采用NR TopN信号:同步信道(P-SS / S-SS)和PBCH,频率范围Sub 6Ghz:10MHz – 6GHz;mmWave : N257 (26.5-29.5GHz), N258 (24.25-27.5GHz),

N260 (37-40GHz),最低检测水平RP:-135 dBm。

终端需满足中国移动相关测试仪表规范要求,支持海思或高通芯片终端测试、NSA网络测试,支持Ping、UDP上下行灌包、FTP上下行、VoNR语音、MOS、语音/数据并行等业务测试,TCP/IP抓包,分析信令内容,可自定义过滤信息等。支持GPS信息采集及地图打点显示,锁频段、锁网络、锁小区、锁频点等强制性测试,并灵活配置测试计划及工作区展示,测试设备自动检测和连接,测试工程配置一键备份和恢复等。终端应支持批量导出参数、事件、信令及详情且导出格式丰富,可定制报告模板。

3.4 测试卡要求

使用无限流量卡,如限制测试卡流量,需及时换卡,避免测试中因测试卡流量超出导致测试异常。

3.5 FTP服务器要求

要求每个省配置专门的FTP服务器用于5G网络测试(带宽建议100G以上),确保测试时FTP服务器正常。如服务器限制测试用户数,确保测试前能够正常下载,确保接入服务器的用户数不影响测试性能。

3.6 测试网络

NSA组网模式下5G商用公网(非专网),采用现网配置带宽,优先考虑5G 100MHz带宽配置,做好4/5G干扰协同。需同步提交测试区域站点工参清单。

3.7 测试业务及方法

测试业务

FTP大数据量

上传、下载业务

测试方法

1.文件大小: FTP下载50GB文件, FTP上传10GB文件;

2.线程设置:下载10线程、上传10线程;

3.测试间隔:15秒;

4.测试次数:次数设为最大,最好无限循环。

第10页

5.测试终端:有条件省份使用2台终端同时进行上传和下载业务,终端不够的使用一个终端,通过软件设置上、下行业务并行进行测试

6.网络选择:4G/5G自由选网;

7.服务器选择:建议采用本地部署的专门用于5G网络测试的文件传输服务器;

扫频测试

设置扫频频段、ARFCN列表、子载波带宽,进行扫频测试,三台扫频仪分别测试移动及竞对5G NR及全部可能配置的锚点频点覆盖

3.8 频段信息

对同区域移动、电信、联通5G网络扫频测试时的需扫频频段信息如下:

运营商

中国移动

中国联通

中国电信

对应的锚点频段和NR频段的频段如下:

运营商 锚点频段

1800

1800

1800

1800

1800

联通 1800

2100

2100

2100

2100

900

1800

1800

1800

电信

2100

2100

2100

800

800

移动

1800

1800

带宽(M)

20M

15M

10M

5M

20M

10M

20M

20M

20M

10M

5

15M

20M

5

20

15

20

5

3

20M

20M

频点

1650

1650

1524

1533

1848

1506

450

500

550

550

3765

1825

1850

1925

100

75

1650

2452

2446

1309

1300

第10页

NR 频段(MHz)

2515-2615

3500-3600

3400-3500

锚点频段(MHz)

1805-1825

1840-1860 2140-2155

1860-1880 2110-2130

1885-1905

954-960

830-835

NR频段 带宽(M) 频点

3.5G 100M 636666

3.5G 100M 630000

4.9G

2.6G

100M

60M

723332

509004

1800

1800

1900

1900

5M

10M

20M

10M

1425

1300

38400

38544

100M 513000

注:每个城市按主流配置频点进行扫频测试。

4 数据分析方法及数据上报要求

扫频原始数据、5G工参需要上传网盘(建议和彩云),将地址邮件发送总部,由总部使用ASPS工具统一进行数据处理。终端测试数据需依据评估指标模板进行上报,同时网格测试需上报测试路线和1-4级道路图层和截图,楼宇测试需上报每个测试楼层的结构底图及建筑物与楼宇的位置关系图,详情请参看附件格式。

5 5G网络扫频测试评估指标

为避免基于采样点统计分析带来的一些问题,例如重复测试影响统计结果、无法进行历史数据对比、数据处理效率等,扫频数据基于50*50m栅格进行分析,网格地图分割为固定的若干50*50m栅格。覆盖和干扰类指标最小维度由采样点变为栅格,表征每个栅格的数据由栅格内所有采样点算术平均获得。竞对网络测试数据指标分析标准相同。

5.1 覆盖类指标

序号

1

指标

NR综合覆盖率(SSB-RSRP >= -88定义

综合覆盖率=条件栅格数/总栅格数*100%;条件栅格:栅格内所有采样点的最强信号算术单位

%

来源

扫频

且SINR>=-3占比) 平均满足SSB-RSRP >= -88dBm且SSB-SINR>=-3

2 平均RSRP 栅格内所有NR采样点的接收电平最强信号算术平均后,以栅格为粒度的所有栅格SSB-RSRP算术平均结果

3 边缘RSRP 栅格内所有NR采样点的接收电平最强信号算术平均后,以栅格为粒度所有栅格SSB-RSRP集合中CDF等于5%的值

4 NR覆盖率覆盖率=条件栅格数/总栅格数*100%;条件栅% 扫频

dBm 扫频

dBm 扫频

(SSB-RSRP>=-88) 格:栅格内所有NR采样点的最强信号算术平第10页

均满足SSB-RSRP >= -88dBm;

5 RSRP连续覆盖区域比例(-SSB-RSRP>=-88占比)

首先根据条件判断栅格是否为覆盖栅格,对于覆盖栅格集中的栅格,如果某2个栅格间距(栅格中心距离)小于等于1个栅格边长,则认为这两个覆盖栅格连续,按照这样判断规则生成覆盖区域栅格集,如果某一覆盖区域栅格集包含的栅格数大于等于40个,则认为该覆盖区域栅格集为一个连续覆盖路段。NR连续覆盖栅格集包含栅格数/NR测试总栅格数*100%

% 扫频

5.2 干扰类指标

序号

1

指标

平均SINR

定义

栅格内所有NR采样点的平均接收信号与干扰噪声比算术平均后,以栅格为粒度的所有栅格SSB-SINR算术平均结果

2 边缘SINR 栅格内所有NR采样点的平均接收信号与干扰噪声比算术平均后,以栅格为粒度所有栅格SSB-SINR集合中CDF等于5%的值

3 连续SINR质差里程占比(SSB-SINR<-3占比)

首先根据条件判断栅格是否为SINR质差栅格,对于质差栅格集中的栅格,如果某2个栅格间距(栅格中心距离)小于等于2个栅格边长,则认为这两个质差栅格连续(即属于同一问题区域),按照这样判断规则生成问题区域栅格集,如果某一问题区域栅格集包含的栅格数大于等于4个,则认为该问题区域栅格集为一个问题路段。NR连续SSB-SINR质差栅格集包含栅格数/NR测试总栅格数*100%

4 重叠覆盖率 道路重叠覆盖率=重叠覆盖度>=4的栅格数/ 总栅格数*100%;重叠覆盖度指在栅格归一化时,栅格内所有采样点按小区维度算术平均后,小区最强信号电平(均值)差距在6dB范围内的电平(均值)数量,且小区最强信号电平均值需满足SSB-RSRP>=-88

5 重叠覆盖里程占比

首先判断栅格是否为重叠覆盖栅格,对于重叠覆盖栅格集中的栅格,如果某2个栅格间距(栅格中心距离)小于等于2个栅格边长,则认为这两个重叠覆盖栅格连续(即属于同一问题区域),按照这样判断规则生成问题区域栅格集,如果某一问题区域栅格集包含的栅格数大于等于4个,则认为该问题区域栅格集为一个问题路段。NR连续重叠覆盖栅格集包含栅格数/NR测试总栅格数*100%

% 扫频

% 扫频

% 扫频

dB 扫频

单位

dB

来源

扫频

5.3 锚点类指标

序号

指标

锚点综合覆盖率(RSRP >=-105(室外)、定义

对相应运营商NSA锚点的所有频段进行扫频测试,然后统计数输出锚点综合覆盖率

注:

1、 采样点的锚点RSRP=MAX(锚点频段1在该采样点的扫频测试RSRP,锚点频段2在该采样点的扫频测试RSRP……锚点频段N在该采样单位

%

来源

扫频

1

第10页

RSRP >=-110(室外覆盖室内)且SINR>=-3)的比例

2

锚点频段X综合覆盖率

点的扫频测试RSRP )

2、 栅格锚点RSRP为采样点的锚点RSRP的算术平均

2、对应栅格锚点频段SINR为上述“栅格锚点RSRP”对应的SINR值

锚点综合覆盖率=条件栅格数/总栅格数*100%;条件栅格:栅格锚点满足RSRP >= -110dBm且SINR>=-3dB

对相应运营商NSA锚点的频段X进行扫频测试,统计输出锚点频段X的综合覆盖率

注:X表示运营商NSA锚点的具体频段

锚点频段X综合覆盖率=条件栅格数/总栅格数*100%;条件栅格:锚点X所有栅格算术平均满足RSRP >= -110dBm且SINR>=-3dB

3 锚点平均RSRP

4 锚点边缘RSRP

5 锚点覆盖率(RSRP >=-105(室外)、栅格内所有频段锚点采样点的接收电平最强信号算术平均后,以栅格为粒度的所有栅格RSRP算术平均结果

栅格内所有频段锚点采样点的接收电平最强信号算术平均后,以栅格为粒度所有栅格RSRP集合中CDF等于5%的值

栅格内所有频段锚点采样点的接收电平最强信号算术平均后,以栅格为粒度统计RSRP >= -110dBm占比

% 扫频

dBm 扫频

dBm 扫频

% 扫频

RSRP >=-110(室外覆盖室内)

6 锚点平均SINR

7 锚点边缘SINR

8 室外RSRP连续覆盖比例(RSRP>=-栅格内所有频段锚点采样点的平均接收信号与干扰噪声比算术平均后,以栅格为粒度的所有栅格SINR算术平均结果

栅格内所有频段锚点采样点的平均接收信号与干扰噪声比算术平均后,以栅格为粒度所有栅格SS-SINR集合中CDF等于5%的值

首先根据条件判断栅格是否为覆盖栅格,对于覆盖栅格集中的栅格,如果某2个栅格间距(栅格中心距离)小于等于1个栅格边长,则认为这两个覆盖栅格连续,按照这样判断规则生成覆盖区域栅格集,如果某一覆盖区域栅格集包含的栅格数大于等于40个,则认为该覆盖区域% 扫频

dB 扫频

dB 扫频

105占比) 栅格集为一个连续覆盖路段。NR连续覆盖栅格集包含栅格数/NR测试总栅格数*100%

5.4 测试基本信息

序号

1

指标

历史库栅格数

2 测试道路里程(Km)

3 室外道路遍历率(%)

测试道路里程/网格道路里程*100%

测试遍历的总里程

定义

NB-IoT测试历史总栅格数=基准库栅格数+本次测试新增栅格数

第10页

6 5G网络终端测试评估指标

从“占得上、驻留稳、体验优”三个维度共计梳理出13个主要指标,用于整体评估5G网络质量及业务体验,详情如下:

用户感知

评测指标 指标定义

占得上

5G 网络测试覆盖率

LTE 锚点覆盖率

SgNB添加成功率

5G时长驻留比

NR 掉线率

核心城区:SS-RSRP≥-88dBm&SS-SINR≥-3的采样比例

普通城区:SS-RSRP≥-91dBm&SS-SINR≥-3的采样比例

锚点频点RSRP≥-110dBm&SINR≥-3的采样比例

辅站链路成功增加次数/辅站链路尝试增加次数*100%

占用NR SCG总的时长/总的测试时长*100%;

SCG载波异常释放次数/SCG载波添加成功次数

(辅站站内链路成功变更次数+辅站站间链路成功变更次数)/(辅站站内链路尝试变更次数+辅站站间链路尝试变更次数)*100%

从UE收到RRC connection reconfiguration信令开始到UE

向目标小区发送RRC Connection Reconfiguration Complete完成

MAC层上传总流量/上传总时间 ;记录和统计路测中UE的L2层上行吞吐量并计算平均吞吐率

MAC层下载总流量/下载总时间;记录和统计路测中UE的L2层下行吞吐量并计算平均吞吐率

MAC层上传速率小于 2Mbps采样占比

MAC层下传速率小于100Mbps采样占比

MAC层上传速率大于80Mbps采样占比

MAC层下传速率大于800Mbps采样占比

驻留稳

NSA 切换成功率

NSA切换控制面时延

用户路测上行平均吞吐率

用户路测下行平均吞吐率

体验优

用户路测上行低速率占比

用户路测下行低速率占比

用户路测上行高速率占比

用户路测下行高速率占比

备注:1、5G驻留比、LTE 锚点覆盖率需三方软件确认是否可以直接统计输出

2、NR掉线率,定义为:SCG载波异常释放次数/SCG载波添加成功次数。SCG载波添加次数:NR已激活,网络下发携带NR切换目标PCI的RRCConnectionReconfiguration后第10页

(含4G锚点小区切换和NR切换两种场景),UE回复RRCConnectionReconfigurationComplete认为SCG载波添加成功。2、SCG载波异常释放次数:包含3种情况,1)NR已激活,4G锚点小区从RRC Connected状态直接回到RRC Idle状态(无RRC Connection Release释放信令),判为NR异常掉线;2)NR已激活,UE上报ScgFailureInformationNR-r15,导致NR承载释放,判为NR异常掉线;3)NR已激活,UE因RRC连接重建、脱网、失步等异常,重新配置NR RB承载,判为NR异常掉线。

除上述13个主要指标之外,还会考虑分析以下附件内的更加全面的指标

5G网络终端测试评估指标表.xlsx

第10页