智能家用電器的語音交互技術(shù) 第2部分:測試方法 征求意見稿_第1頁
智能家用電器的語音交互技術(shù) 第2部分:測試方法 征求意見稿_第2頁
智能家用電器的語音交互技術(shù) 第2部分:測試方法 征求意見稿_第3頁
智能家用電器的語音交互技術(shù) 第2部分:測試方法 征求意見稿_第4頁
智能家用電器的語音交互技術(shù) 第2部分:測試方法 征求意見稿_第5頁
已閱讀5頁,還剩19頁未讀, 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡介

1本文件規(guī)定了具有語音交互功能智能家用電器(以下簡稱“智能家電”)的測試方法。本文件適用于具有語音交互功能智能家電的測試。2規(guī)范性引用文件下列文件中的內(nèi)容通過文中的規(guī)范性引用而構(gòu)成本文件必不可少的條款。其中,注日期的引用文件,僅該日期對應(yīng)的版本適用于本文件;不注日期的引用文件,其最新版本(包括所有的修改單)適用于本文件。GB/T21023—2007中文語音識別系統(tǒng)通用技術(shù)規(guī)范GB/T21024中文語音合成系統(tǒng)通用技術(shù)規(guī)范GB/T34145—2017中文語音合成互聯(lián)網(wǎng)服務(wù)接口規(guī)范GB/T36464.2—2018智能語音交互系統(tǒng)第2部分:智能家居GB/T41807信息安全技術(shù)聲紋識別數(shù)據(jù)安全要求GB/T45354.1—2025智能家用電器的語音交互技術(shù)第1部分:通用要求SJ/T11540—2015有源揚(yáng)聲器通用規(guī)范ETSITS103224:2022語音和多媒體傳輸質(zhì)量(STQ);一種用于終端測試的聲場再現(xiàn)方法,包括背景噪聲數(shù)據(jù)庫(SpeechandmultimediaTransmissionQuality(STQ);Asoundfieldreproductionmethodforterminaltestingincludingabackgroundnoisedatabase)3術(shù)語和定義GB/T45354.1界定的以及下列術(shù)語和定義適用于本文件。3.1人工嘴artificialmouth 一種裝置,包括安裝在封閉空間中的揚(yáng)聲器,其指向性和輻射模式類似于普通人的嘴。3.2測試語料集speechtestcorpus用于語音交互測試的音頻語料總合。4總則本部分給出了智能家電語音交互的安全、功能、性能、可靠性通用測試方法,針對不同類型智能家電語音交互測試方法的特殊要求見附錄A。5測試環(huán)境和條件5.1測試房間配置測試房間配置要求如下:a)環(huán)境溫度:15℃~25℃;b)測試房間尺寸應(yīng)在4.0m×3.6m×2.7m至8m×9m×4.5m(長×寬×高)之間,為避免減少駐波問題,房間的長、寬、高尺寸不宜相等且彼此不是倍數(shù)關(guān)系;c)測試房間的本底噪聲聲壓級≤35dB(A),房間混響時間在200ms~600ms之間;d)測試房間應(yīng)配備被測家電能正常工作的相關(guān)水、電、網(wǎng)絡(luò)等配套設(shè)施。5.2網(wǎng)絡(luò)環(huán)境要求2在線語音家電的測試應(yīng)配置滿足產(chǎn)品正常使用的網(wǎng)絡(luò)環(huán)境,相關(guān)連接步驟按照制造商提供的說明進(jìn)行設(shè)置,被測家電正確進(jìn)行網(wǎng)絡(luò)連接后,可實(shí)現(xiàn)在線語音功能。被測家電接入的網(wǎng)絡(luò)應(yīng)保持穩(wěn)定的連通狀態(tài),應(yīng)滿足上行帶寬不低于1Mbps、下行帶寬不低于1Mbps,雙向網(wǎng)絡(luò)延時不大于300ms的要求。5.3測試布局5.3.1被測家電的安裝被測家電應(yīng)按照品類、技術(shù)要求和實(shí)際使用場景進(jìn)行安裝和擺放,被測家電的安裝位置應(yīng)滿足:a)頂置類被測家電應(yīng)放置在不低于1.8m的架子上進(jìn)行測試;b)掛高類被測家電應(yīng)放置在不低于1.8m的架子上進(jìn)行測試;c)臺面放置類被測家電應(yīng)擺放在高度為80cm的臺面上進(jìn)行測試;d)地面放置靠墻被測應(yīng)放置在地面且家電后背板距離墻面不超過10cm的位置進(jìn)行測試;e)地面放置不靠墻類被測家電應(yīng)放置在地面且家電后背板距離墻面超過2m的位置進(jìn)行測試;f)櫥柜內(nèi)封裝類被測家電應(yīng)放置在櫥柜內(nèi)進(jìn)行測試,且家電面板距離櫥柜不超過5cm;g)地面自由移動類被測家電應(yīng)放置在地面且家電能夠自由移動的位置進(jìn)行測試;h)手持類被測家電應(yīng)放置在不低于1m的架子上進(jìn)行測試。注3:臺面放置類家電擺放在臺面使用,家電前部、頂面和四周接注6:櫥柜內(nèi)封裝類家電安裝在櫥柜內(nèi),家電前部接收語音注7:地面自由移動類家電在地面上可自行移動,家電除底面以外的所有面5.3.2背景噪音播放器布局背景噪音由背景噪音播放設(shè)備按照背景噪音語料集中的內(nèi)容進(jìn)行播放,背景噪音播放設(shè)備應(yīng)放置在距任一聲音反射面至少0.5m以上、距離地面1.2m高度處,2個背景噪音播放設(shè)備之間的距離不小于2m。背景噪音播放設(shè)備根據(jù)被測家電的安裝位置分類選擇擺放布局。被測家電居中布局時,背景噪音播放設(shè)備示意圖見圖1。被測家電靠墻布局時,背景噪音播放設(shè)備布局示意圖見圖2。被測家電角落布局時,背景噪音播放設(shè)備布局示意圖見圖3。有更多背景噪音播放需求的背景噪音播放設(shè)備布局宜符合ETSITS103224:2022中第6.0章的要求。注1:居中布局的家電包括:臺面放置類家電、地注2:靠墻布局的家電包括:掛高類家電、地面放置靠墻類家電、3圖1家電居中布局背景噪音播放設(shè)備布局示意圖圖2家電靠墻布局背景噪音播放設(shè)備布局示意圖圖3家電角落布局背景噪音播放設(shè)備布局示意圖5.3.3被測家電的測試布局根據(jù)被測家電的品類、技術(shù)要求和實(shí)際使用場景,選擇被測家電的測試布局。以被測家電拾音孔中軸線(或拾音孔陣列中心點(diǎn))與地面的交點(diǎn)為原點(diǎn),調(diào)節(jié)音箱或人工嘴的高度、角度及水平距離,高度應(yīng)選擇1m和1.6m,角度應(yīng)根據(jù)家電品類進(jìn)行選擇,至少應(yīng)選擇0°或180°、45°或135°、90°,水平距離直線距離根據(jù)家電拾音距離分類進(jìn)行選擇。待測家電與音箱或人工嘴的測試角度示意圖見圖5,家電拾音孔中軸線位置示意圖見圖6,拾音孔陣列中心點(diǎn)位置示意圖見圖7。4圖4掛機(jī)空調(diào)器測試布局示意圖圖5待測家電與音箱或人工嘴的測試角度示意圖5圖62個麥克風(fēng)拾音孔的中軸線位置示意圖圖74個麥克風(fēng)拾音孔陣列中心點(diǎn)位置示意圖5.4測試環(huán)境級別測試環(huán)境級別根據(jù)家電拾音孔中軸線(或拾音孔陣列中心點(diǎn))處的背景噪音聲壓級分為低噪環(huán)境和高噪環(huán)境,根據(jù)不同的測試環(huán)境選擇信噪比并配置測試音箱或人工嘴的測試音量,測試環(huán)境應(yīng)符合表1要求。背景噪音和測試語料聲壓級使用聲壓計(jì)進(jìn)行測量,測量方法采用多次測量平均計(jì)算的方式,測量測試不少于10次,測量時間不少于3min。根據(jù)背景噪音聲壓級標(biāo)定測試語料播放的聲壓級。在測試過程中,應(yīng)對背景噪音聲壓級進(jìn)行監(jiān)測。表1背景噪音的測試環(huán)境級別125.5測試語料集5.5.1通用要求測試語料集中所錄制的測試語料應(yīng)覆蓋被測家電的語音交互功能,測試語料集包括:喚醒語料集、誤喚醒測試語料集、本機(jī)功能操作語料集、泛化的本機(jī)功能操作語料集、自然交互式語音測試語料集、背景噪音測試語料集、語音交互綜合測試語料集、語義拒識測試語料集、容錯性測試語料集以及特殊場景語料測試集。測試語料集根據(jù)被測家電的品類和功能不同而不同。測試語料集可以通過語音合成、真人錄音等方式轉(zhuǎn)化為音頻測試語料集。其中,真人錄音的語料應(yīng)覆蓋本機(jī)功能操作語料集。6在進(jìn)行泛化的本機(jī)功能操作測試、自然交互式語音測試、語音交互綜合測試、語音拒識測試、容錯性測試時,可全程采用現(xiàn)場口呼的方式進(jìn)行測試,其中現(xiàn)場口呼應(yīng)符合的要求。5.5.2測試語料集的要求語音交互功能的限制測試語料集根據(jù)智能家電語音交互功能的限制,針對性的配置一組測試語料集。喚醒測試語料集智能家電的喚醒測試語料,根據(jù)制造商提供的喚醒詞按照5.5.3的要求進(jìn)行制作。誤喚醒測試語料集引起智能家電誤喚醒的噪聲主要來源于電視、人聲談話等。一條喚醒詞測試語料應(yīng)不少于3個音節(jié)。誤喚醒測試語料集應(yīng)大于24h的錄音,其中至少應(yīng)包含:12h的電視節(jié)目、11h的環(huán)境噪音、1h的非被測家電喚醒詞。其中12h的電視節(jié)目可包括:3h影視節(jié)目、3h的新聞節(jié)目、3h的人聲對話(可選擇談話節(jié)目模擬)、3h的音樂播放。本機(jī)功能操作測試語料集本機(jī)功能操作測試語料集用于評估通過語音操作家電功能的范圍和能力。本機(jī)功能操作測試語料集范圍應(yīng)涵蓋被測家電設(shè)計(jì)支持的所有語音操作功能。本機(jī)功能操作測試語料集的錄制數(shù)量應(yīng)符合5.3.3的要求。泛化的本機(jī)功能操作測試語料集泛化的本機(jī)功能操作測試語料集用于評估通過泛化語音操作家電功能的范圍和能力。泛化控制指令的方法將本機(jī)功能操作指令泛化為接近日常用語,泛化控制指令可采用句法分析、同義詞擴(kuò)展和基于規(guī)則的擴(kuò)展-篩選技術(shù)等方式,比如“打開空調(diào)”指令,應(yīng)泛化為“開空調(diào)”、“我要開空調(diào)”等接近于日常用語的指令。泛化的本機(jī)功能操作語料集數(shù)量應(yīng)滿足(家電功能控制測試語料數(shù)):(家電控制功能數(shù))≥5:1。語音交互組合測試語料集語音交互組合測試語料集包括:互斥性語音交互組合測試語料、引導(dǎo)式語音交互組合測試語料、內(nèi)容交互測試語料。其中,互斥性語音交互組合測試語料內(nèi)容交互測試語料應(yīng)覆蓋制造商聲明智能家電實(shí)現(xiàn)的語音內(nèi)容交互功能,可包括:天氣、菜譜、常識等信息查詢、意圖理解或多輪交互。示例1:空調(diào)器的互斥語音交互組合測試語料,打開空語音打斷測試語料集根據(jù)智能家電語音打斷測試要求,針對性的錄制一組時長不低于30min的音頻文件測試語料,其音頻格式應(yīng)符合家電支持的音頻播放格式。語義拒識測試語料集根據(jù)智能家電的類型和語音交互功能,配置一組針對語音拒識測試的語料。語義拒識測試語料集包括但不限于:電視談話節(jié)目、非目標(biāo)人聲、無效指令音頻文件等。注1:電視談話節(jié)目中包含家電的控制指令詞,家電注2:家電能識別出特定人員的聲音并執(zhí)行操作,而對于其他注3:無效指令根據(jù)家電品類定制,不同品類的家電對應(yīng)不同的無效指令,如:電冰容錯性測試語料集7根據(jù)智能家電的類型和語音交互功能,針對性的配置一組容錯性測試語料。其中測試語料應(yīng)包括:檢查該家電是否具備錯誤檢查能力的語料、有輸入偏差的語料、不規(guī)范語音輸入的語料。示例2:用戶設(shè)置空調(diào)溫度為21.5度,如空0背景噪音測試語料集背景噪音測試語料集包含智能家電使用環(huán)境中的各種背景噪音可包括:a)戶外車輛環(huán)境噪音;b)鄰里產(chǎn)生的噪音,如:裝修聲、吵架聲、孩子跑跳聲等;c)音樂播放;d)家電使用過程中產(chǎn)生的各種噪聲,如:馬桶沖水聲、烹飪器具、洗衣機(jī)的甩干噪音、油煙機(jī)聲、空調(diào)出風(fēng)口噪音、排氣扇噪音;e)家庭生活的噪音,如:水龍頭流水聲、切菜聲、炒菜聲、走路聲、說話聲、孩子哭鬧聲、寵物聲、杯碟摔碎聲、咳嗽聲、噴嚏聲、桌椅拖動聲等。1測試語料集的選取原則測試語料集的選取需遵守以下原則:a)測試語料集應(yīng)按照.2、.3、.4中年齡、性別、區(qū)域的劃分進(jìn)行等比例選?。籦)本機(jī)功能操作測試,應(yīng)覆蓋家電本機(jī)控制的全部語音功能;c)泛化的本機(jī)功能操作測試,應(yīng)覆蓋家電本機(jī)控制的全部語音功能,并采取隨機(jī)抽樣的原則從語料庫中選取泛化測試的語料集,且每條功能指令應(yīng)至少選取泛化語料5條;d)語音交互組合測試,采取隨機(jī)抽樣的原則從語料庫中選取;e)語音拒識測試,應(yīng)覆蓋家電的全部語音功能,采取隨機(jī)抽樣的原則從語料庫中選取,電視談話節(jié)目測試語料數(shù):非目標(biāo)人聲測試語料數(shù):無效指令音頻文件測試語料數(shù)=2:3:5;f)容錯性測試,根據(jù)產(chǎn)品類型,針對性的從語料庫中選取,應(yīng)能覆蓋家電的功能,且錯誤檢查能力的語料數(shù):有輸入偏差的語料數(shù):不規(guī)范語音輸入的語料數(shù)=2:2:1;g)內(nèi)容交互測試,采取隨機(jī)抽樣的原則從語料庫中選取,家電的每個內(nèi)容交互功能應(yīng)至少選取50條內(nèi)容交互語料;h)方言和多語種根據(jù)制造商的聲明進(jìn)行測試集的選取;i)背景噪音測試語料集的選取應(yīng)符合被測家電的產(chǎn)品類型、使用場所和場景,且應(yīng)確保不包含被測的喚醒詞或命令詞,背景噪音舉例:1)廚房背景噪音應(yīng)至少包含油煙機(jī)聲、炒菜聲、切菜聲、水龍頭沖水聲;2)客廳背景噪音應(yīng)至少包含電視播放聲音、談話聲音;3)臥室背景噪音應(yīng)至少包含打鼾聲、談話聲音和空調(diào)噪音;4)衛(wèi)生間背景噪音應(yīng)至少包含水龍頭沖水聲、淋浴聲、馬桶沖水聲,排氣扇聲。5.5.3測試語料集錄音要求錄音環(huán)境語料集錄音應(yīng)在本底噪聲值≤30dB(A)的環(huán)境中錄制,混響時間應(yīng)低于400ms。音頻采樣設(shè)備要求音頻采樣設(shè)備應(yīng)符合GB/T36464.2—2018表1的要求,傳聲器的參數(shù)要求應(yīng)符合表2的要求。8表2傳聲器的參數(shù)要求123錄音方式測試語料集可以采用人員錄音、語音合成兩種方式進(jìn)行。語音合成要求采用語音合成方法錄制系統(tǒng)應(yīng)符合GB/T21024要求,輸出數(shù)據(jù)應(yīng)符合GB/T34145—2017第6.1條要求。錄音或現(xiàn)場口呼人員配置要求.1錄音或現(xiàn)場口呼人員語言水平要求普通話錄音或現(xiàn)場進(jìn)行普通話口呼測試人員應(yīng)達(dá)到國家普通話二級乙等水平,應(yīng)符合GB/T21023—2007的要求。.2錄音或現(xiàn)場口呼人員的年齡和性別要求參與錄音或現(xiàn)場口呼人員的年齡和性別要求應(yīng)符合表3要求。表3參與錄音或現(xiàn)場口呼人員的年齡和性別要求男女1234.3錄音或現(xiàn)場口呼人員數(shù)量要求參與普通話錄音的人員各年齡段都應(yīng)能覆蓋中國北方,中國南方,中國西北,中國西南4個區(qū)域,參與普通話錄制人員各年齡段不少于8名。參與方言錄音的人員各年齡段都宜有不少于4名參與者進(jìn)行錄音。方言可包括:北方方言、吳方言、湘方言、贛方言、客家方言、閩南方言、閩東方言和粵方言。參與多語種錄音的人員各年齡段都應(yīng)有不少于4名參與者進(jìn)行錄音。參與多語種錄音的人員,針對兒童、青少年、老年人,每類人員應(yīng)有不少于4名參與者進(jìn)行錄音,男女比例為1:1。針對中青年人,應(yīng)有不少于4名參與者進(jìn)行錄音,男女比例為1:1,其中18~40周歲應(yīng)選擇至少2名參與者,男女各不少于1名,40~60周歲應(yīng)選擇至少2名參與者,男女各不少于1名。.4語料錄制或現(xiàn)場口呼人員的語速要求語音錄制或現(xiàn)場口呼人員的語速要求見表4。表4錄音錄制或現(xiàn)場口呼人員的語速要求91234其中,漢語語速按每分鐘發(fā)音的字?jǐn)?shù)進(jìn)行分類:a)正常語速:151~250字/min;b)慢語速:80~150字/min;c)快語速:251~350字/min。音頻數(shù)據(jù)質(zhì)量要求音頻數(shù)據(jù)質(zhì)量要求如下:a)前后預(yù)留靜音時間在500ms~1000ms內(nèi);b)應(yīng)能完整表達(dá)錄音語料的內(nèi)容,操作類錄音數(shù)據(jù)中應(yīng)包含語料中所有的字信息;c)音頻數(shù)據(jù)中不應(yīng)出現(xiàn)截幅和丟幀;d)音頻數(shù)據(jù)中說話聲音應(yīng)自然流暢,不應(yīng)出現(xiàn)結(jié)巴、破音等現(xiàn)象;e)單次功能操作類語音輸入時長不宜超過30s,特殊情況下不超過60s;f)發(fā)音單元的持續(xù)時間不應(yīng)小于0.2s,發(fā)音單元間的間隔不應(yīng)超過2s;停頓時間超過2s,則認(rèn)為一次語音輸入結(jié)束;g)對于文本中的分漢字字符,包括數(shù)字、電話號碼、標(biāo)點(diǎn)符號,其朗讀方法應(yīng)符合GB/T21023—2007中附錄A要求。測試語料播放設(shè)備要求測試語料播放設(shè)備(音箱或人工嘴)應(yīng)符合GB/T36464.2—2018表3要求。6測試方法6.1安全測試方法6.1.1對語音交互功能的限制測試將測試環(huán)境設(shè)置為低噪環(huán)境,針對不同品類的被測家電從語音交互功能的限制測試語料中選取測試語料進(jìn)行測試,測試結(jié)果符合GB/T45354.1中6.3.1條要求為合格。測試人員檢查被測家電是否存在采集與產(chǎn)品功能無關(guān)的數(shù)據(jù)并進(jìn)行存儲或用于其他用途的情況,并能夠?yàn)橛脩籼峁┫鄳?yīng)的數(shù)據(jù)信息收集、存儲、使用、處理、共享、轉(zhuǎn)讓的相關(guān)說明。測試人員檢查被測家電是否能夠根據(jù)不同用戶設(shè)置語音交互功能的管理權(quán)限。6.1.2具有聲紋識別功能智能家電的數(shù)據(jù)安全測試對于具有聲紋識別功能的被測家電,對其數(shù)據(jù)安全性按照GB/T41807的要求進(jìn)行檢查,或者對家電生產(chǎn)商提供針對聲紋識別數(shù)據(jù)安全的第三方檢測報(bào)告進(jìn)行確認(rèn)。6.2功能測試方法按照被測制造商提供的功能書進(jìn)行測試,應(yīng)符合GB/T45354.1中6.4條的要求,其中必選功能必須實(shí)現(xiàn),可選功能根據(jù)被測家電是否具備功能進(jìn)行測試。6.3性能測試方法6.3.1揚(yáng)聲器性能按照SJ/T11540—2015中第5.4和5.5的要求進(jìn)行測試。6.3.2拾音距離根據(jù)被測家電制造商提供的拾音距離分類選擇測試距離,本機(jī)功能操作指令播放設(shè)備放置在被測家電的正前方,播放設(shè)備和被測家電拾音孔中軸線(或拾音孔陣列中心點(diǎn))處于同一高度,播放設(shè)備揚(yáng)聲器中心點(diǎn)和被測家電拾音孔中軸線(或拾音孔陣列中心點(diǎn))處的距離為被測家電的拾音距離的測試距離處,測試喚醒成功率和交互成功率。6.3.3喚醒成功率測試方法如下:a)將測試環(huán)境設(shè)置為低噪環(huán)境;b)將音箱或人工嘴放置于被測家電的正前方,距離設(shè)置為被測家電標(biāo)稱的最大拾音距離;c)背景噪音播放設(shè)備按照被測家電的品類和應(yīng)用場景,從背景噪音測試語料集中隨機(jī)選取并播放背景噪音語料;d)使用音箱或人工嘴播放從喚醒語料集中選取的喚醒詞音頻;e)單個拾音角度測試喚醒詞不少于100次,并記錄測試結(jié)果;f)統(tǒng)計(jì)低噪環(huán)境下的喚醒成功率;g)更換測試環(huán)境為高噪音環(huán)境,重復(fù)d)~e)步驟;h)統(tǒng)計(jì)高噪聲環(huán)境下的喚醒成功率;i)對于支持自定義喚醒詞的被測家電,現(xiàn)場設(shè)置自定義喚醒詞后,按照a)~h)步驟進(jìn)行測試。6.3.4誤喚醒頻度測試方法如下:a)將測試環(huán)境設(shè)置為低噪環(huán)境;b)背景噪音播放設(shè)備從誤喚醒測試語料集中選取并播放背景噪音語料,背景噪音語料應(yīng)包括:3h影視節(jié)目、3h新聞節(jié)目、3h人聲對話(可選擇談話節(jié)目模擬)、3h音樂,12h無人聲的環(huán)境噪音。背景噪音語料宜包括常見制造商和其他非目標(biāo)喚醒詞,每個喚醒詞播放次數(shù)不少于5次,播放時間計(jì)入到12h無人聲的環(huán)境噪音播放時長中。背景噪音語料中應(yīng)不包括被測家電喚醒詞以及喚醒詞韻母相同的喚醒詞;c)被測家電拾音孔處的背景噪音聲壓級調(diào)整到50dB(A)~60dB(A);d)背景噪音連續(xù)播放24h;e)記錄被測家電的誤喚醒次數(shù)。6.3.5喚醒響應(yīng)時間按照6.3.3的測試方法,統(tǒng)計(jì)所有喚醒成功情況下的喚醒響應(yīng)時間,取其平均值作為喚醒響應(yīng)時間。6.3.6交互成功率測試方法如下:a)將測試環(huán)境設(shè)置為低噪環(huán)境;b)背景噪音播放設(shè)備按照被測家電的品類和應(yīng)用場景,從背景噪音測試語料集中隨機(jī)選取并播放背景噪音語料;c)使用音箱或人工嘴播放喚醒詞和本機(jī)功能操作測試語料集、泛化的本機(jī)功能測試語料集或語音交互組合測試語料集中的交互指令;d)將音箱或人工嘴與被測家電的距離設(shè)置為標(biāo)稱的最大拾音距離,測試語料集應(yīng)覆蓋所有的本機(jī)功能操作指令,測試次數(shù)至少為指令數(shù)的5倍,總測試次數(shù)不少于1000次,并記錄測試結(jié)果;e)更換拾音角度,重復(fù)d)步驟,并記錄測試結(jié)果;f)統(tǒng)計(jì)低噪環(huán)境下的交互成功率;g)更換測試環(huán)境為高噪環(huán)境,重復(fù)d)~e)步驟進(jìn)行測試;h)統(tǒng)計(jì)高噪環(huán)境下的交互成功率;i)更換語料集,按照a)~h)步驟進(jìn)行測試。6.3.7交互響應(yīng)時間按照6.3.6的測試方法,統(tǒng)計(jì)所有交互成功情況下的交互響應(yīng)時間,取平均值得到平均交互響應(yīng)時6.3.8語音打斷成功率測試方法如下:a)將測試環(huán)境設(shè)置為低噪環(huán)境;b)將音箱或人工嘴與被測家電的距離設(shè)置為被測家電標(biāo)稱的最大拾音距離;c)被測家電開啟音頻播放功能,按照最大系統(tǒng)最大音量進(jìn)行播放,從語音打斷測試語料集中選取音頻文件并播放;d)使用音箱或人工嘴播放語音喚醒詞,家電停止播放音頻并喚醒家電,能正確接收并執(zhí)行操作指令,操作指令執(zhí)行結(jié)束后家電可繼續(xù)播放音頻文件,測試次數(shù)至少為100次;e)更換拾音角度,重復(fù)d)步驟,并記錄測試結(jié)果;f)統(tǒng)計(jì)低噪環(huán)境下的語音打斷成功率;g)更換測試環(huán)境為高噪環(huán)境,重復(fù)c)~d)步驟進(jìn)行測試;h)統(tǒng)計(jì)高噪環(huán)境下的語音打斷成功率。6.3.9語義拒識率測試方法如下:a)將測試環(huán)境設(shè)置為低噪環(huán)境;b)背景噪音播放設(shè)備按照被測家電的品類和應(yīng)用場景,從語義拒識測試語料集中選取測試語料,測試語料應(yīng)大于100條,其中電視談話節(jié)目測試語料數(shù):非目標(biāo)人聲測試語料數(shù):無效指令音頻文件測試語料數(shù)為2:3:5;c)將音箱或人工嘴與待測設(shè)備的距離設(shè)置為被測家電標(biāo)稱的最大拾音距離;d)被測家電按照功能進(jìn)行本機(jī)操控;e)使用音箱或人工嘴播放針對該被測家電品類的語義拒識測試語料;f)改變被測家電工作狀態(tài);g)統(tǒng)計(jì)低噪環(huán)境下的語義拒識率。6.3.10聲紋驗(yàn)證基本性能測試方法如下:a)將測試環(huán)境設(shè)置為低噪環(huán)境;b)將音箱或人工嘴與待測設(shè)備的距離設(shè)置為被測家電標(biāo)稱的最大拾音距離,拾音角度為90°;c)被測家電進(jìn)行測試人員的聲紋錄制;d)背景噪音播放設(shè)備按照被測家電的品類和應(yīng)用場景,從背景噪音測試語料集中隨機(jī)選取并播放背景噪音語料;e)使用音箱或人工嘴播放已錄制聲紋測試人員的本機(jī)功能操作測試語料;f)改變被測家電工作狀態(tài);g)測試次數(shù)不少于200次,統(tǒng)計(jì)并計(jì)算低噪環(huán)境下的聲紋識別的正確識別率、錯誤接受率和錯誤拒絕率。6.4可靠性測試方法6.4.1無故障運(yùn)行測試方法在72h內(nèi),根據(jù)被測家電的類型從本機(jī)功能操作測試語料集、泛化的本機(jī)功能操作測試語料集、語音交互組合測試語料集中選擇適合該品類家電的測試語料,測試周期內(nèi)累計(jì)交互操控次數(shù)不少于100006.4.2容錯性測試方法根據(jù)被測家電的類型從容錯性測試語料集中選擇適合該品類家電的測試語料,對被測家電進(jìn)行錯誤的語音輸入或輸入有偏差的語音操控指令,檢查被測家電是否符合GB/T45354.1中6.6.2條的要求,按表5的測試方法進(jìn)行測試,每項(xiàng)測試為100次。表5容錯性測試方法123在被測家電的語音交互過程中打斷語音交互,不引起4進(jìn)行不規(guī)范的語音輸入,檢查被測家電是否能6.4.3易恢復(fù)性測試方法根據(jù)表6的測試方法,對被測家電進(jìn)行本機(jī)功能操作,檢查其是否符合GB/T45354.1中6.6.3條的要求。表6易恢復(fù)性測試方法1制造被測家電故障,通過自身修復(fù)或簡單操作可重新恢復(fù)語音236.4.4環(huán)境適應(yīng)性測試方法

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論