2023年通信公司測試指標表

序號,測試內(nèi)容,評價規(guī)則,測試方式,類型說明,測試結論

1,話術配置,參選人具備話術可視化開發(fā)訓練能力：,測試代表按甲方現(xiàn)場提供的話術模板配置話術，并上線。,否決項。,通過（）

,,可按現(xiàn)場提供的話術模板配置話術，實現(xiàn)話術可視化編輯及管理，可快速響應定制或修改機器人話術的需求，實現(xiàn)話術實時上線。,,未按話術模板配置，即否決。,未通過（）

2,提供打分報表,"根據(jù)甲方現(xiàn)場提供的號碼進行外呼測試，累計接通率>=50%時（累計接通率=（累計接通號碼量（需剔重）/號碼總量）*100%），按要求提供外呼打分報表明細（報表須可展示每個用戶的每個回訪問題的打分結果，且具體到分值，并提供錄音鏈接）。甲方測試組現(xiàn)場抽測10通有效通話錄音（“有效通話”即：至少有一項打分的通話，未達到10通有效通話則全部測試），計算分值準確率。

分值準確率=（抽測的通話中系統(tǒng)準確識別的用戶打分個數(shù)/抽測的通話中用戶打分總數(shù)量）*100%。例如，抽測的10通電話中用戶給20個問題進行了打分，經(jīng)甲方測試組聽取錄音后判定系統(tǒng)準確識別了18個，則分值準確率為(18/20)*100%=90%。",測試代表發(fā)起外呼任務，外呼任務結束后，提供打分報表。,"否決項/評價項。

接通率<50%，或未按要求提供打分報表明細，或分值準確率低于75%，即否決。",通過（）

,,,,,未通過（）

,,,,,,

,,,,,接通率：

,,,,,分值準確率：

,,,,,按要求提供外呼打分報備明細：是□否□

3,線路資源,"現(xiàn)場可提供010及0551開頭固話號碼線路且均能撥通。

現(xiàn)場可提供010及0551開頭固話號碼線路且僅能撥通1條或提供其中1條上述號碼線路且能撥通。",測試代表使用010、0551號碼對甲方測試組的一位成員的手機號進行外呼（需在批量測試中實現(xiàn)），該評委可收到一通010外顯的呼叫或0551外顯的呼叫。注：需確認該評委手機號碼未設置攔截。,"否決項/評價項。

010或0551號碼均未提供，或提供至少1條上述號碼線路且均未撥通，即否決。",通過（）

,,,,,未通過（）

,,,,,,

,,,,,A、現(xiàn)場可提供010及0551開頭固話號碼線路且均能撥通：

,,,,,是□否□

,,,,,B、現(xiàn)場可提供010及0551開頭固話號碼線路且僅能撥通1條或提供其中1條上述號碼線路且能撥通：

,,,,,是□否□

,,,,,,

4,響應能力,根據(jù)甲方現(xiàn)場提供的測試口徑和測試號碼須在1個小時以內(nèi)完成外呼任務（含話術配置、外呼策略配置、線路配置及提供打分報表）。,測試代表進行外呼任務，甲方測試組現(xiàn)場計時。,否決項。,通過（）

,,,,不滿足要求，即否決。,未通過（）

5,外呼策略配置,參選人具備外呼策略可視化配置能力：,現(xiàn)場演示可視化配置界面。現(xiàn)場批量導入目標號碼100個，設置外呼線路及外呼時段，遇忙音/關機等未接通情況時系統(tǒng)能自動立即再次撥打。,評價項。,A、可滿足上述需求（）

,,可實現(xiàn)目標號碼批量導入，并指定外呼線路（010或0551）及外呼時段，遇忙音/關機等未接通的情況時能按指定的時間窗口再次撥打。,,,B、不滿足上述需求（）

6,外呼信息查詢,現(xiàn)場外呼測試完成后對外呼信息進行查詢。,測試代表登錄系統(tǒng)演示外呼結果，并根據(jù)甲方測試組要求查詢信息。,評價項。,A、可查看當前任務和歷史任務信息，可根據(jù)外呼時間、外呼號碼等信息查詢外呼結果（）

,,,,,B、可查看當前任務和歷史任務信息，但無法根據(jù)外呼時間、外呼號碼等信息查詢外呼結果（）

,,,,,C、無法提供外呼任務查詢方式（）

7,并發(fā)保障,有高并發(fā)業(yè)務處理能力，具備500路及以上的并發(fā)處理能力，可以實時壓測500路及以上。,測試代表演示系統(tǒng)實時并發(fā)情況。,評價項。,A、1000路及以上（）

,,,,,B、[500，1000)路（）

,,,,,C、500路以下（）

8,語音播報效果,可以根據(jù)業(yè)務場景需求支持定制特定音庫，聽取合成語音后憑主觀印象評價。,測試代表現(xiàn)場撥測，定制多個場景的聲音，甲方測試組進行評價。,評價項。,A、支持3個及以上音庫，聲音自然，和真人相識度高（）

,,,,,B、支持3個及以上音庫，但聲音生硬不自然（）

,,,,,C、支持3個以下音庫（）

9,知識庫功能,應答通用型的客戶問題，比如:閑聊寒暄，身份質(zhì)疑，可全部識別并有效回答。,測試代表現(xiàn)場撥測一次，并按指定話術進行詢問，甲方測試組對機器人應答情況進行判斷。,評價項。,A、應答通用型的客戶問題，比如:閑聊寒暄，身份質(zhì)疑，可全部識別并有效回答。（）

,,,,,B、測試過程中出現(xiàn)跳轉錯誤（）

10,投訴意向識別,客戶表現(xiàn)有投訴意愿時，系