DB31-T 1324-2021 基于用戶感知的5G網(wǎng)絡質(zhì)量測試方法

基于用戶感知的5G網(wǎng)絡質(zhì)量測試方法2021-10-29發(fā)布2022-02-01實施 Ⅲ 1 1 1 15測試條件 25.1測試方式和場景 2 2 3 4 6 6 67.35G時長駐留比 77.4NSA掉線率 87.5SA掉線率 87.6NSA切換成功率 97.7SA切換成功率 97.8SA接人成功率 7.24應用程序使用成功率 20I8測試報告 附錄A(資料性)公眾用戶測試場景典型分類 A.1移動性測試場景典型分類 A.2定點測試場景典型分類 附錄B(資料性)行業(yè)用戶測試場景典型分類建議 24附錄C(資料性)測評的典型評價方法 26 28 29圖1測試布置-1 3圖2測試布置-2 4圖3測試布置-3 4 4表A.1移動性測試場景細分類別表 22表A.2定點測試場景細分類別表 22表B.1行業(yè)用戶測試場景典型分類建議 24表C.1不同用戶對應的測試指標 26 28Ⅱ本文件按照GB/T1.1-2020《標準化工作導則第1部分：標準化文件的結(jié)構(gòu)和起草規(guī)則》的規(guī)定起草。請注意本文件的某些內(nèi)容可能涉及專利。本文件的發(fā)布機構(gòu)不承擔識別專利的責任。本文件由上海市經(jīng)濟和信息化委員會提出并組織實施。本文件由上海市無線電監(jiān)測站歸口。本文件起草單位：上海市無線電監(jiān)測站、上海泰峰檢測認證有限公司、中國電信股份有限公司上海分公司、中國移動通信集團上海有限公司、中國聯(lián)合網(wǎng)絡通信有限公司上海市分公司、珠海世紀鼎利科技股份有限公司、諾優(yōu)信息技術(上海)有限公司。Ⅲ本文件規(guī)定了基于用戶感知的中低頻段5G網(wǎng)絡質(zhì)量的測試條件、測試指標、測試方法和測試2規(guī)范性引用文件用戶在移動通信網(wǎng)絡中使用個人業(yè)務和垂直行業(yè)業(yè)務的真實體驗。在移動通信網(wǎng)絡中使用個人業(yè)務的用戶。行業(yè)用戶industrialuser在移動通信網(wǎng)絡中使用垂直行業(yè)業(yè)務的用戶。4縮略語EPS:演進型的分組系統(tǒng)(EvolvedPacketSystem)FTP:文件傳輸協(xié)議(FileTransferProtocol)NB-IoT:窄帶物聯(lián)網(wǎng)(NarrowBandInternetofThings)NSA:非獨立組網(wǎng)(Non-StandalonPBCH:物理廣播信道(PhysicalBroadcastChanne1PCI:物理小區(qū)標識(PhysicalCellIdentifiePDCP:分組數(shù)據(jù)匯聚協(xié)議(PacketDataConvergPDU:分組數(shù)據(jù)單元(PacketDatRLC:無線鏈路控制(RadioLinkControl)RRC:無線資源控制(RadioResourceRSRP:參考信號接收功率(ReferenceSignalReceivedPower)SINR:信號與干擾加噪聲比(SignaltoInterferenceplusNoiseRatio)SS:同步信號(SynchronizationSignal)SSB:同步信號和PBCH塊(SynchronizationSignalandPBCHBlock)5測試條件步行開展測試。測試場景應結(jié)合使用方需求、地域特征以及5G移動通信基站分布進行規(guī)劃選擇。公眾用戶感知測試場景典型分類參見附錄A。行業(yè)用戶感知測試場景典型分類參見附錄B。根據(jù)測試結(jié)果，可對測5G中低頻段包括700MHz、2100MHz、2600MHz、3300MHz、3500具體工作頻段參見附錄D。用于連接測試終端的設備。內(nèi)存容量不低于8GB,處理器主頻不低于2.4GHz,硬盤容量不低于測試終端宜選用5G專用終端、5G商用終端和4G專用終端。a)5G專用終端：內(nèi)存容量不低于4GB,存儲容量不低于128GB;應支持5G頻段和編碼方式、b)5G商用終端：宜采用市場占有率較高的終端。內(nèi)存容量不低于4GB,存儲容量不低于2c)4G專用終端：內(nèi)存容量不低于4GB,存儲容量不低于128GB;應支持4G頻段和編碼方式、測試過程中應保證終端不處于省電模式、低電量或過熱等影響設備正常性能的狀態(tài)。根據(jù)使用方掃頻儀應具備采集5G網(wǎng)絡頻點同步信道和物理廣播信道的信號強度、信號與干擾加噪聲比等數(shù)5.2.5GNSS天線出應及時換卡。一個測試終端僅配置一張測試卡。5.2.7FTP服務器FTP服務器的帶寬配置應不低于100Gbit/s。測試設備的連接布置參見圖1、圖2和圖3。測試過程中，掃頻儀天線和GNSS天線應避免被遮擋，應將掃頻儀天線和GNSS天線固定在車輛外或放在背包外。天線1圖1測試布置-13測試終端基站測試終端圖3測試布置-36測試指標測試指標參見表1。表1測試指標類別章條號測試主機、網(wǎng)絡覆蓋率測試主機、網(wǎng)絡覆蓋率是衡量5G網(wǎng)絡用戶在使用業(yè)務過程中，5G網(wǎng)絡下行SSB同步參考信號覆蓋的指標5G時長駐留比測試主機、5G時長駐留比是衡量5G網(wǎng)絡用戶在使用業(yè)務NSA掉線率是衡量NSA組網(wǎng)的5G網(wǎng)絡中，5G網(wǎng)NSA切換成功率是衡量NSA組網(wǎng)時5G網(wǎng)絡用4類別章條號測試主機、EPSFallback接通率是衡量5G網(wǎng)測試主機、行業(yè)用戶高速率占比行業(yè)用戶高速率占比時延類測試主機、EPSFallback時延是衡量5G網(wǎng)絡公眾用戶測速軟件下載平均速率是衡量5G網(wǎng)絡用戶在使用HTTP下載平均視頻直播觀看成功率是衡量5G網(wǎng)絡用戶在使用5表1測試指標(續(xù))類別章條號公眾用戶應用程序使用應用程序使用成功率是衡量5G網(wǎng)絡用戶在使用門戶網(wǎng)站首頁門戶網(wǎng)站首頁打開成功率是衡量5G網(wǎng)絡用戶在6在業(yè)務運行的時候使用5G專用終端對SSB信號的電平和信號與干擾加噪聲比進行測量和統(tǒng)計得到，本指標適用于公眾用戶和行業(yè)用戶。網(wǎng)絡覆蓋率測試步驟包括：a)選定測評區(qū)域規(guī)劃測試路線，測試路線應遍歷測b)連接測試終端、測試主機(含測試軟件)與GNSS天線，GNSS天線固定在車輛外，參見圖2;也c)開啟測試終端、測試主機(如有)與測試軟件，關閉非測試需要的應用程序；設置測試軟件中(下載文件大小為50GB,上傳文件大小為5GB)、線程(下載30線程、上傳30線程)、測試間隔(15s)等；網(wǎng)絡選擇為自由選網(wǎng)；兩臺測試終端一臺用于FTP上傳，同時另一臺用于FTP下載。e)記錄當前占用信道的SSRSRP、SSSINR。絡覆蓋率要求為SSRSRP≥-105dBm且SSSINR≥-3dB,行業(yè)用戶的要求可根據(jù)行業(yè)實際需求制Net——總采樣數(shù)據(jù)個數(shù)。7.35G時長駐留比本指標適用于公眾用戶和行業(yè)用戶。5G時長駐留比測試步驟包括：b)記錄占用5G的總時長和總測試時長；7統(tǒng)計測試設備記錄占用5G的總時長和總測試時長。指標計算公式為：DU?G——5G時長駐留比；7.4NSA掉線率NSA掉線率是衡量NSA組網(wǎng)的5G網(wǎng)絡用戶在使用業(yè)務過程中掉線占比的指標。NSA組網(wǎng)時，掉線是SCG載波異常釋放；成功完成連接建立是SCG載波添加成功及SCG載波變更成功。NSA掉線率測試步驟包括：b)記錄掉線次數(shù)和成功完成連接建立次數(shù)；統(tǒng)計測試設備記錄的NSA組網(wǎng)時的掉線次數(shù)和成功完成連接建立次數(shù)。指標計算公式為：DRNSA——NSA掉線率；7.5SA掉線率SA掉線率是衡量SA組網(wǎng)的5G網(wǎng)絡用戶在使用業(yè)務過程中掉線占比的指標。SA組網(wǎng)時，掉線是測試任務還在運行中且已經(jīng)接收到一定數(shù)據(jù)時，超過60s沒有任何數(shù)據(jù)傳輸；成功完成連接建立是本指標適用于公眾用戶和行業(yè)用戶。統(tǒng)計測試設備記錄的SA組網(wǎng)時的掉線次數(shù)和成功完成連接建立次數(shù)。指標計算公式為：8DRsA——SA掉線率；nsA-D——SA組網(wǎng)時的掉線次數(shù)；NsA-D——SA組網(wǎng)時的成功完成連接建立次數(shù)。7.6NSA切換成功率NSA切換成功率是衡量NSA組網(wǎng)時5G網(wǎng)絡用戶在移動情況下持續(xù)進行業(yè)務能力的指標。NSANSA切換成功率測試步驟包括：b)記錄切換嘗試次數(shù)和切換成功次數(shù)；統(tǒng)計測試設備記錄的NSA組網(wǎng)時的切換嘗試次數(shù)和切換成功次數(shù)。指標計算公式為：7.7SA切換成功率SA切換成功率是衡量SA組網(wǎng)時5G網(wǎng)絡用戶在移動情況下持續(xù)進行業(yè)務能力的指標。SA組網(wǎng)本指標適用于公眾用戶和行業(yè)用戶。統(tǒng)計測試設備記錄的SA組網(wǎng)時的切換嘗試次數(shù)和切換成功次數(shù)。指標計算公式為：9nsA-aue——SA組網(wǎng)時的切換成功次數(shù)；NsA-a——SA組網(wǎng)時的切換嘗試次數(shù)。7.8SA接入成功率SA接人成功率是衡量SA組網(wǎng)的5G網(wǎng)絡用戶在使用業(yè)務過程中接入網(wǎng)絡能力的指標。SA組網(wǎng)發(fā)起ping)而發(fā)起SERVICEREQUEST過程。接人成功是成功完成連接建立，RRCIDLE狀態(tài)的終端本指標適用于公眾用戶和行業(yè)用戶。SA接人成功率測試步驟包括：b)記錄接入請求次數(shù)和接入成功次數(shù)；統(tǒng)計測試設備記錄的SA組網(wǎng)時的接入請求次數(shù)和接人成功次數(shù)。指標計算公式為：ACsA—SA接人成功率；NAC-att——SA組網(wǎng)時的接人請求次數(shù)。7.9EPSFallback接通率EPSFallback接通率是衡量5G網(wǎng)絡用戶在進行語音撥打業(yè)務時接通能力的指標。EPSFallback嘗試次數(shù)是5G專用終端在NR側(cè)發(fā)送Invite消息的次數(shù)。EPSFallback接通成功是在5G網(wǎng)絡進行語音業(yè)務時，回落到4G網(wǎng)絡并接通的情況。EPSFallback成功次數(shù)是4G專用終端在LTE側(cè)接收本指標適用于公眾用戶和行業(yè)用戶。EPSFallback接通率測試步驟包括：back模板：1部5G專用終端發(fā)起EPSFallb音通話時長30s;語音通話間隔30s;網(wǎng)絡選擇設置為4G/5G自由選網(wǎng)；網(wǎng)絡配置設置為c)開始測試，啟動測試設備發(fā)起EPSFallback業(yè)務并保持循環(huán)撥打。終端業(yè)務撥叫、結(jié)束均設d)記錄EPSFallback嘗試次數(shù)和EPSFallback成功次數(shù)；統(tǒng)計測試設備記錄的EPSFallback嘗試次數(shù)和EPSFallback成功次數(shù)。計算公式為：nPB-sue——EPSFallback成功次數(shù)(只統(tǒng)計主叫側(cè));NFB-att——EPSFallback嘗試次數(shù)(只統(tǒng)計主叫側(cè))。7.10EPSFallback平均接通時延EPSFallback平均接通時延是衡量5G網(wǎng)絡用戶進行語音撥打時接通時延情況的指標。本指標適用于公眾用戶和行業(yè)用戶。EPSFallback平均接通時延測試步驟包括：b)記錄單次EPSFallback接通時延和EPSFallback接通次數(shù)；統(tǒng)計測試設備記錄的單次EPSFallback接通時延和EPSFallback接通次數(shù)。指標計算公式為dp,——單次EPSFallback接通時延，NFB-sue——EPSFallback接通次數(shù)。7.11FTP應用層下載速率FTP應用層下載速率包括FTP應用層下載平均速率和FTP應用層下載最小速率，可進行柵格化FTP應用層下載平均速率是衡量5G網(wǎng)絡用戶在進行FTP下載時平均速率的指標。本指標適用FTP應用層下載最小速率是衡量5G網(wǎng)絡用戶在進行FTP下載時最小速率的指標。本指標多應FTP應用層下載速率測試步驟包括：b)記錄應用層下載實時速率和總采樣數(shù)據(jù)個數(shù)；統(tǒng)計測試設備記錄的應用層下載實時速率和總采樣數(shù)據(jù)個數(shù)。指標計算公式為：7.12FTP應用層下載高速率占比FTP應用層下載高速率占比是衡量5G網(wǎng)絡用戶在進行FTP下載時使用高速率業(yè)務情況的指標，本指標適用于公眾用戶和行業(yè)用戶。統(tǒng)計總采樣數(shù)據(jù)個數(shù)及FTP應用層下載速率大于800Mbit/s的采樣數(shù)據(jù)個數(shù)。在使用時可根據(jù)5G網(wǎng)絡建設運行發(fā)展情況調(diào)整下載高速率的判定閾值。指標計算公式為：nH-DLFTP—-FTP應用層下載速率大于800Mbit/s的采樣數(shù)據(jù)個數(shù)；7.13FTP應用層下載低速率占比FTP應用層下載低速率占比是衡量5G網(wǎng)絡用戶在進行FTP下載時使用低速率業(yè)務情況的指標，統(tǒng)計總采樣數(shù)據(jù)個數(shù)及FTP應用層下載速率小于100Mbit/s的采樣數(shù)據(jù)個數(shù)。指標計算公nL-DLFTP—-FTP應用層下載速率小于100Mbit/s的采樣數(shù)據(jù)個數(shù)；7.14FTP應用層上傳速率FTP應用層上傳速率包括FTP應用層上傳平均速率和FTP應用層上傳最小速率，可進行柵格化FTP應用層上傳平均速率是衡量5G網(wǎng)絡用戶在進行FTP上傳時平均速率的指標。本指標適用FTP應用層上傳最小速率是衡量5G網(wǎng)絡用戶在進行FTP上傳時最小速率的指標。本指標多應FTP應用層上傳速率測試步驟包括：b)記錄應用層上傳實時速率和總采樣數(shù)據(jù)個數(shù)；統(tǒng)計測試設備記錄的應用層上傳實時速率和7.17Ping成功率Ping成功率是衡量5G網(wǎng)絡用戶通過5G基站與測試服務器間進行數(shù)據(jù)包交互通暢情況的指標。行業(yè)用戶可根據(jù)行業(yè)需要分為網(wǎng)絡負載時的ping成功率和網(wǎng)絡空載時的ping成功率。網(wǎng)絡負載時的ping成功率用于判斷業(yè)務進行時的可靠性；網(wǎng)絡空載時的ping成功率用于判斷網(wǎng)絡的連通性。Ping成功率測試步驟包括；b)開啟測試終端、測試主機與測試軟件；設置Ping業(yè)務模板：Ping包要求32Bytes,測試間隔c)開始測試，啟動測試設備發(fā)起Ping業(yè)務并保持循環(huán)；如果業(yè)務掉線，軟件應重新發(fā)起數(shù)據(jù)d)記錄Ping成功次數(shù)和Ping總次數(shù)；統(tǒng)計測試設備記錄的Ping成功次數(shù)及Ping總次數(shù)。指標計算公式為：nping-sue—-Ping成功次數(shù)；7.18Ping時延Ping平均時延是衡量5G網(wǎng)絡用戶通過5G基站與測試服務器間交互時平均時延情況的指標。Ping最大時延是衡量5G網(wǎng)絡用戶通過5G基站與測試服務器間交互時最大時延情況的指標，行業(yè)用行業(yè)用戶可根據(jù)行業(yè)需要分為網(wǎng)絡負載時的Ping時延和網(wǎng)絡空載時的Ping時延。網(wǎng)絡負載時的Ping時延用于判斷業(yè)務進行時的可靠性；網(wǎng)絡b)記錄Ping時延和Ping成功次數(shù)；統(tǒng)計測試設備記錄的單次Ping時延及Ping成功次數(shù)。指標計算公式為：式中：nping-sue——Ping成功次數(shù)。DMAX-ping=max{dping,1,dping,2,…,dping,n}…7.19測速軟件下載平均速率7.19.1測試說明測速軟件下載平均速率是衡量5G網(wǎng)絡用戶在使用第三方測速軟件時實時下載速率平均值的指標。a)選定測評區(qū)域規(guī)劃測試位置。b)確保同批次測試應使用同一品牌型號的商用終端，且保持相同的終端硬件配置和指標參數(shù)設c)設備連接參見圖3。f)重復執(zhí)行7.19.2e)。統(tǒng)計所有測試位置的第三方測速軟件下載速率及總測試次數(shù)。指標VsT,;——單個測試位置第三方測速軟件下載實時速率，單位為兆比特每秒(Mbit/s),其中i=1,NsT—-總測試次數(shù)。7.20HTTP下載平均速率HTTP下載平均速率是衡量5G網(wǎng)絡用戶在下載應用程序時平均速率的指標。HTTP下載平均速率測試步驟包括：a)選定測評區(qū)域規(guī)劃測試位置。c)設備連接參見圖3。e)關閉非測試需要的應用程序，打開商用終端自帶的APP商店，選擇下載免費排行榜第一和第統(tǒng)計在所有測試位置的HTTP下載數(shù)據(jù)量總和及總下載時間。指標計算公式為：7.21視頻播放成功率視頻播放成功率是衡量5G網(wǎng)絡用戶在使用視頻類應用程序觀看視頻時感受的指標。a)選定測評區(qū)域規(guī)劃測試位置。b)確保同批次測試應使用同一品牌型號的商用終端，且保持相同的終端硬件配置和指標參數(shù)設置；在5G商用終端自帶的APP商店內(nèi)下載視頻類排名第一和第二的應c)設備連接參見圖3。首頁中選擇接近或大于5min的視頻觀看，同批次測試應選擇在同一款應用程序中觀看相同g),否則記為失敗。g)繼續(xù)觀看視頻，測試時長為5min,記錄視頻播放卡頓次數(shù)和卡頓時長占比。若測試時長不滿5min,則按照實際測試時長將卡頓次數(shù)折算成5min的卡頓次數(shù)，卡頓次數(shù)在1.6次以內(nèi)且卡頓時長占比不高于0.6%,記一次成功，否則記為失敗。h)打開排名第二的視頻應用程序，清除應用程序緩存，在應用程序首頁中選擇接近或大于5min統(tǒng)計在所有測試位置的視頻播放總次數(shù)及視頻播放成功次數(shù)。指標計算公式為：SLv——視頻播放成功率；nLv——視頻播放成功次數(shù)；NLv——視頻播放總次數(shù)。7.22視頻直播觀看成功率視頻直播觀看成功率是衡量5G網(wǎng)絡用戶在使用視頻直播類應用程序觀看直播時感受的指標。本指標僅適用于公眾用戶。視頻直播觀看成功率測試步驟包括：a)選定測評區(qū)域規(guī)劃測試位置。在5G商用終端自帶的APP商店內(nèi)下載視頻直播類排名第一和第二的應用程序并安裝。c)設備連接參見圖3。f)觀看視頻直播，測試時長為5min,記錄直播視頻播放卡頓次數(shù)和卡頓時長占比。若測試時長不滿5min,則按照實際測試時長將卡頓次數(shù)折算成5min的卡頓次數(shù)，卡頓次數(shù)在1.6次以統(tǒng)計在所有測試位置的視頻直播觀看總次數(shù)及視頻直播觀看成功次數(shù)。指標計算公式為：7.23短視頻上傳成功率短視頻上傳成功率是衡量5G網(wǎng)絡用戶在使用攝影錄像類應用程序上傳短視頻時感受的指標。a)選定測評區(qū)域規(guī)劃測試位置。在5G商用終端自帶的APP商店內(nèi)下載攝影錄像類排名第一和第二的應用程序并c)設備連接參見圖3。f)在程序內(nèi)拍攝15s視頻并上傳至應用程序服務器，上傳時間不高于1s,記為成功，否則為g)打開排名第二的攝影錄像類應用程序，拍攝15s視頻并上傳至應用程序服務器，上傳時間不統(tǒng)計在所有測試位置的短視頻上傳總次數(shù)及短視7.24應用程序使用成功率應用程序使用成功率是衡量5G網(wǎng)絡用戶在使用應用程序時感受的本指標僅適用于公眾用戶。a)選定測評區(qū)域規(guī)劃測試位置。在5G商用終端自帶的APP商店內(nèi)下載具有發(fā)送文件功能的應用程序并安裝。c)設備連接參見圖3。間不高于1s,記為成功，否則為失敗。在測試時可根據(jù)5G網(wǎng)絡建設運行發(fā)展情況調(diào)整發(fā)送文件的大小。統(tǒng)計在所有測試位置使用應用程序總次數(shù)及成功次數(shù)。指標計算公式為：NAPp—應用程序使用總次數(shù)。7.25門戶網(wǎng)站首頁打開成功率門戶網(wǎng)站首頁打開成功率是衡量5G網(wǎng)絡用戶在打開任意門戶網(wǎng)站首頁面時感受的指標。a)選定測評區(qū)域規(guī)劃測試位置。b)5G商用終端應確保同批次測試使用同一品牌型號，且保持相同的終端硬件配置和指標參數(shù)設置。c)設備連接參見圖3。7.25.3指標計算統(tǒng)計在所有測試位置的門戶網(wǎng)站首頁打開測試總次數(shù)及門戶網(wǎng)站首頁打開成功次數(shù)。指標計算公式為：式中：Sweb——門戶網(wǎng)站首頁打開成功率；nweb——門戶網(wǎng)站首頁打開成功次數(shù)；Nweb——門戶網(wǎng)站首頁打開測試總次數(shù)。8測試報告測試報告應包括但不限于以下幾方面內(nèi)容：——測試日期；—-所用測試方法的識別；——測試設備；——測試數(shù)據(jù)和測試結(jié)果的說明；——測試時遇到的問題；——意見和解釋；——測試機構(gòu)和測試人員；——其他影響測試結(jié)果的因素。A.1移動性測試場景典型分類移動性測試場景宜包括城市快速路、高架、橋梁、隧道等場景。移動性測試場景細分類別參見表A.1移動性測試場景細分類別表細分類別12一3高架一45隧道6注：移動性測試場景包括但不限于表A.1。A.2定點測試場景典型分類勻合理。測試位置數(shù)量可根據(jù)測試場景的大小和實際情況決定，相鄰測試位置至少相距20m。1醫(yī)院一級醫(yī)院二級醫(yī)院表A.2定點測試場景細分類別表(續(xù))2郵輪碼頭34商圈核心商業(yè)圈次級商業(yè)圈邊緣商業(yè)圈5公園城市公園自然公園63+1中心區(qū)行政事務受理中心社區(qū)事務受理中心社區(qū)衛(wèi)生服務中心社區(qū)文化活動中心7旅游景點5A級景區(qū)大門口(售票處)區(qū)域、旅游景點室外區(qū)域、室內(nèi)游客休息區(qū)4A級景區(qū)3A級景區(qū)8一9大學校園中部位、底層、操場、室外休息區(qū)域等注：定點測試場景包括但不限于表A.2。(資料性)行業(yè)用戶測試場景應結(jié)合5G網(wǎng)絡在該垂直行業(yè)的應用特征并盡可能在實際接入位置測試，行業(yè)用戶測試場景細分類別參見表B.1。行業(yè)類型典型應用5G+自動化控制柔性生產(chǎn)、AGV物流、5G+智慧工廠5G+車路協(xié)同斷、交叉口通行交通信號配時動態(tài)優(yōu)化、編隊行駛到站管理、車輛調(diào)度、站臺、調(diào)度室、車輛行經(jīng)路線自動代客泊車、泊車機器人道路橋梁質(zhì)量監(jiān)測智能理貨5G+急診