【導(dǎo)讀】在2026年上海世界移動(dòng)通信大會(huì)（MWC上海）期間，羅德與施瓦茨（以下簡(jiǎn)稱'R&S'）與中國(guó)移動(dòng)研究院聯(lián)合展示了基于生成式AI的創(chuàng)新測(cè)試解決方案。該方案依托 CMX500一體化信令測(cè)試儀，首次實(shí)現(xiàn)了在不同網(wǎng)絡(luò)條件下對(duì)端側(cè)生成式AI用戶體驗(yàn)的量化測(cè)量，開(kāi)創(chuàng)了生成式AI用戶體驗(yàn)測(cè)試領(lǐng)域的先河。
生成式AI，顧名思義就是利用大語(yǔ)言模型生成用戶所需的內(nèi)容包括文字，圖片，視頻等。隨著大語(yǔ)言模型以及相關(guān)算力和應(yīng)用的迭代發(fā)展，網(wǎng)絡(luò)中各種終端，例如手機(jī)、AI眼鏡、機(jī)器人使用生成式AI的業(yè)務(wù)越來(lái)越多，但是對(duì)于生成式AI方面的測(cè)試系統(tǒng)目前較為缺乏，業(yè)內(nèi)還沒(méi)有一套成熟的指標(biāo)和測(cè)試標(biāo)準(zhǔn)體系評(píng)估用戶體驗(yàn)。3GPP、GTI等組織正在展開(kāi)相關(guān)的研究工作。
此次聯(lián)合展示的生成式AI用戶體驗(yàn)測(cè)試床正是為解決上述挑戰(zhàn)而設(shè)計(jì)。在測(cè)試系統(tǒng)架構(gòu)中，大語(yǔ)言模型部署于服務(wù)器端（或者云端），CMX500一體化信令測(cè)試儀與裝載了客戶端測(cè)試應(yīng)用的智能終端建立無(wú)線連接。CMX500可靈活配置網(wǎng)絡(luò)參數(shù)、信道衰落模型、時(shí)延抖動(dòng)、射頻損傷等，真實(shí)模擬從理想覆蓋到弱場(chǎng)邊緣的各類無(wú)線環(huán)境。通過(guò)終端側(cè)應(yīng)用軟件輸入問(wèn)題并接收大模型的推理響應(yīng)，計(jì)算首Token到達(dá)時(shí)間（TTFT）、每秒Token生成數(shù)（TPS）等核心指標(biāo)，并通過(guò)上位機(jī)軟件采集分析測(cè)量數(shù)據(jù)，生成相應(yīng)的圖表。這一方法使得端側(cè)的生成式AI應(yīng)用在不同網(wǎng)絡(luò)條件下的用戶體驗(yàn)可被量化、比較，可以用來(lái)優(yōu)化端側(cè)生成式AI的應(yīng)用設(shè)計(jì)，也為將來(lái)的網(wǎng)絡(luò)優(yōu)化提供了參考。
圖：生成式AI測(cè)試床系統(tǒng)框架
作為本次測(cè)試方案的核心平臺(tái)，CMX500是一款一體化信令測(cè)試儀，支持SA/NSA雙模架構(gòu)、FR1至FR3頻段覆蓋（最高18 GHz），內(nèi)建IMS服務(wù)器，可一站式完成射頻一致性、協(xié)議棧驗(yàn)證、VoNR聲學(xué)及載波聚合測(cè)試，是面向5G-Advanced和6G研發(fā)的核心測(cè)試平臺(tái)。
中國(guó)移動(dòng)集團(tuán)級(jí)首席專家、中關(guān)村泛聯(lián)院首席科學(xué)家劉光毅表示：“面向6G智慧泛在愿景，移動(dòng)通信網(wǎng)絡(luò)正超越傳統(tǒng)通信范疇，通過(guò)網(wǎng)絡(luò)內(nèi)生算力，為用戶提供無(wú)處不在、超低時(shí)延的智能服務(wù)。這一網(wǎng)絡(luò)服務(wù)范式的轉(zhuǎn)變，也對(duì)新型網(wǎng)絡(luò)AI服務(wù)指標(biāo)體系和測(cè)試方案提出了更高要求。在此背景下，R&S與中國(guó)移動(dòng)研究院聯(lián)合共建測(cè)試床，已成功實(shí)現(xiàn)生成式AI用戶體驗(yàn)在不同無(wú)線環(huán)境下的測(cè)試驗(yàn)證。未來(lái)，雙方計(jì)劃進(jìn)一步擴(kuò)展測(cè)試指標(biāo)與應(yīng)用場(chǎng)景，為6G賦能AI技術(shù)的演進(jìn)與驗(yàn)證，以及測(cè)試標(biāo)準(zhǔn)的制定等提供有力支撐。”
羅德與施瓦茨產(chǎn)品與系統(tǒng)部高級(jí)總監(jiān)金海良表示：'在大語(yǔ)言模型的高速發(fā)展時(shí)代，R&S和中國(guó)移動(dòng)研究院聯(lián)合開(kāi)發(fā)的測(cè)試床，為業(yè)內(nèi)大家關(guān)注的生成式AI的用戶體驗(yàn)測(cè)試方法樹(shù)立了標(biāo)桿。我們很高興此次能夠與中國(guó)移動(dòng)研究院聯(lián)合展示這一成果。相信未來(lái)基于這一測(cè)試架構(gòu)，雙方能夠衍生出更多的測(cè)試場(chǎng)景和行業(yè)范式，進(jìn)一步推動(dòng)生成式AI用戶體驗(yàn)測(cè)試的標(biāo)準(zhǔn)化，為6G AI時(shí)代的到來(lái)做好充分的技術(shù)儲(chǔ)備。
