Testin總裁徐琨演講

為了降低測(cè)試人員的使用門(mén)檻，提升測(cè)試腳本錄制的效率，iTestin 推出了首款基于自然語(yǔ)言的腳本錄制功能，支持用自然語(yǔ)言的交互方式，完成測(cè)試自動(dòng)化操作。

例如，用戶只需要輸入“點(diǎn)擊搜索”，iTestin 就能自動(dòng)在App當(dāng)前頁(yè)面中檢測(cè)并識(shí)別出搜索圖標(biāo)，并完成該圖標(biāo)的點(diǎn)擊操作。傳統(tǒng)的測(cè)試腳本需要大量的人工介入，通過(guò)手工框選目標(biāo)控件來(lái)實(shí)現(xiàn)腳本錄制和維護(hù)，而 iTestin 這種全新的自然語(yǔ)言腳本大幅降低了腳本錄制的難度，也極大提升了產(chǎn)品易用性和腳本維護(hù)效率。

為了解決傳統(tǒng)基于UI控件樹(shù)獲取文字、圖標(biāo)方法兼容性差、穩(wěn)定性差的問(wèn)題，Testin 打造了基于深度學(xué)習(xí)的OCR文字識(shí)別和圖標(biāo)識(shí)別引擎。

在1000張具有代表性的App截圖評(píng)測(cè)數(shù)據(jù)集上，Testin OCR模型文字識(shí)別精度超過(guò)了97%，全面超越了其他互聯(lián)網(wǎng)公司提供的高精度OCR服務(wù)，并在文字識(shí)別正確率、算法運(yùn)行速度等關(guān)鍵性能指標(biāo)上都達(dá)到了業(yè)界最高水平。除此之外，Testin 的圖標(biāo)識(shí)別引擎對(duì)常見(jiàn)的“搜索、分享、返回、菜單”等類(lèi)型圖標(biāo)實(shí)現(xiàn)了95%以上的識(shí)別精度。針對(duì)自定義圖標(biāo)，Testin實(shí)現(xiàn)了基于深度學(xué)習(xí)的“以圖找圖”算法，通過(guò)圖標(biāo)智能匹配實(shí)現(xiàn)了95%以上的自定義圖標(biāo)識(shí)別精度。

據(jù)Testin CTO陳冠誠(chéng)介紹，針對(duì)App的場(chǎng)景特點(diǎn)，Testin采集了20余萬(wàn)張App UI截圖，基于Testin數(shù)據(jù)的數(shù)據(jù)標(biāo)注服務(wù)，標(biāo)注了百萬(wàn)級(jí)別的文字和圖標(biāo)，再結(jié)合數(shù)據(jù)增強(qiáng)技術(shù)，構(gòu)建了測(cè)試業(yè)界最大規(guī)模的千萬(wàn)級(jí)數(shù)據(jù)集用于模型訓(xùn)練。隨著iTestin的推出，Testin會(huì)繼續(xù)推進(jìn)AI在各類(lèi)測(cè)試產(chǎn)品上的應(yīng)用落地，進(jìn)一步提升產(chǎn)品的智能化水平，不斷提升產(chǎn)品和服務(wù)的易用性和工作效率。

徐琨強(qiáng)調(diào)，“這只是AI測(cè)試新時(shí)代的一個(gè)開(kāi)始，未來(lái)的測(cè)試產(chǎn)品會(huì)更智能，更簡(jiǎn)單，更易用。Testin會(huì)不斷推進(jìn)AI測(cè)試的演進(jìn)，為客戶創(chuàng)造更大的價(jià)值。”

崔歡歡