本公(gong)(gong)開涉(she)(she)及用于在用戶(hu)界面(mian)中重(zhong)新識別(bie)的(de)(de)(de)方法和系統(tong)。更具體地，本公(gong)(gong)開涉(she)(she)及用于執行概念的(de)(de)(de)描述挖掘以及用于執行對(dui)當前用戶(hu)界面(mian)中的(de)(de)(de)用戶(hu)界面(mian)元素(su)的(de)(de)(de)重(zhong)新識別(bie)檢(jian)查(cha)的(de)(de)(de)系統(tong)和計算(suan)機實現的(de)(de)(de)方法。

背景技術：

1、人(ren)(ren)類引導的計(ji)算機(ji)過程在許(xu)多技(ji)術和活動(dong)領域中無(wu)(wu)處不在。現代圖形用(yong)戶(hu)界面(gui)已被證明在允許(xu)人(ren)(ren)類操(cao)作者使(shi)用(yong)計(ji)算機(ji)系(xi)統來執(zhi)行通常復(fu)雜的數(shu)據處理和/或系(xi)統控(kong)制任(ren)務(wu)(wu)方(fang)面是無(wu)(wu)可估量的。然而(er)，雖然gui通常允許(xu)操(cao)作人(ren)(ren)員迅(xun)速地(di)習慣于執(zhi)行新任(ren)務(wu)(wu)，但是它們對(dui)任(ren)務(wu)(wu)的任(ren)何進一(yi)步自動(dong)化提供了高障礙。

2、傳(chuan)統的(de)(de)(de)工作流(liu)自(zi)(zi)動化旨在使(shi)(shi)用gui來獲取通常由操作員(yuan)執(zhi)行的(de)(de)(de)任(ren)務并(bing)使(shi)(shi)它們自(zi)(zi)動化，以使(shi)(shi)得計算(suan)機系統可以執(zhi)行相同的(de)(de)(de)任(ren)務，而(er)無(wu)需(xu)對用于執(zhi)行該(gai)任(ren)務的(de)(de)(de)底層軟件進行大量的(de)(de)(de)重新工程(cheng)設計。最初，這需(xu)要展(zhan)示軟件的(de)(de)(de)應用編程(cheng)接口(api)，使(shi)(shi)得腳本可以被手動地設計以執(zhi)行軟件的(de)(de)(de)所(suo)(suo)需(xu)功能以便(bian)執(zhi)行所(suo)(suo)需(xu)任(ren)務。

3、機(ji)器人(ren)(ren)過(guo)(guo)(guo)程自動(dong)(dong)化(hua)(hua)(hua)(rpa)是一種(zhong)利用(yong)軟(ruan)件(jian)(jian)機(ji)器人(ren)(ren)或人(ren)(ren)工(gong)智能(al)工(gong)作者的(de)新興形式的(de)商業(ye)過(guo)(guo)(guo)程自動(dong)(dong)化(hua)(hua)(hua)技術。在(zai)傳統(tong)的(de)工(gong)作流(liu)自動(dong)(dong)化(hua)(hua)(hua)工(gong)具中(zhong)(zhong)，軟(ruan)件(jian)(jian)開(kai)發者使(shi)(shi)用(yong)內部應(ying)用(yong)程序(xu)接口產生(sheng)動(dong)(dong)作列(lie)表以(yi)使(shi)(shi)任務(wu)自動(dong)(dong)化(hua)(hua)(hua)。相反，rpa系(xi)統(tong)通過(guo)(guo)(guo)觀察用(yong)戶在(zai)應(ying)用(yong)程序(xu)的(de)圖形用(yong)戶界(jie)面中(zhong)(zhong)執(zhi)行(xing)任務(wu)來(lai)開(kai)發動(dong)(dong)作列(lie)表，然后通過(guo)(guo)(guo)直接在(zai)圖形用(yong)戶界(jie)面上(shang)重(zhong)復這(zhe)些(xie)任務(wu)來(lai)執(zhi)行(xing)自動(dong)(dong)化(hua)(hua)(hua)。rpa機(ji)器人(ren)(ren)然后可(ke)以(yi)生(sheng)成用(yong)于gui的(de)適當輸入(ru)命令，以(yi)使(shi)(shi)得(de)計算機(ji)系(xi)統(tong)執(zhi)行(xing)給定過(guo)(guo)(guo)程。這(zhe)使(shi)(shi)得(de)過(guo)(guo)(guo)程自動(dong)(dong)化(hua)(hua)(hua)，將有(you)人(ren)(ren)值守過(guo)(guo)(guo)程變(bian)成無人(ren)(ren)值守過(guo)(guo)(guo)程。這(zhe)種(zhong)方法的(de)優點是眾多(duo)的(de)，并且(qie)包括(kuo)允許多(duo)個(ge)rpa機(ji)器人(ren)(ren)跨多(duo)個(ge)計算機(ji)系(xi)統(tong)執(zhi)行(xing)相同任務(wu)的(de)更大的(de)可(ke)擴展性，以(yi)及(ji)更高的(de)可(ke)重(zhong)復性，因為(wei)在(zai)給定過(guo)(guo)(guo)程中(zhong)(zhong)減少甚至消除了人(ren)(ren)為(wei)錯誤的(de)可(ke)能性。

技術實現思路

1、現有(you)的(de)(de)自動化(hua)方法通(tong)常依賴于提取用(yong)(yong)(yong)戶界面(ui)元(yuan)素的(de)(de)唯(wei)(wei)一標(biao)(biao)識(shi)符(fu)以(yi)及(ji)基于這(zhe)些(xie)標(biao)(biao)識(shi)符(fu)構建自動化(hua)。基于web的(de)(de)應(ying)用(yong)(yong)(yong)的(de)(de)這(zhe)種(zhong)標(biao)(biao)識(shi)符(fu)的(de)(de)示例是可(ke)(ke)擴展標(biao)(biao)記語言路徑(jing)語言(xpath)表達式和層疊樣(yang)式表(css)選擇器，它(ta)們也可(ke)(ke)以(yi)與ui元(yuan)素的(de)(de)各種(zhong)屬性組合。唯(wei)(wei)一標(biao)(biao)識(shi)符(fu)通(tong)常由rpa開(kai)發者(zhe)在應(ying)用(yong)(yong)(yong)建模或(huo)工(gong)作(zuo)流開(kai)發期間手(shou)動定義。然(ran)而(er)，這(zhe)些(xie)唯(wei)(wei)一標(biao)(biao)識(shi)符(fu)可(ke)(ke)能容易受(shou)到(dao)ui中的(de)(de)改變(bian)影響。例如，xpath表達式可(ke)(ke)能通(tong)過添加(jia)新源(yuan)始(例如，對用(yong)(yong)(yong)戶不可(ke)(ke)見的(de)(de)容器)或(huo)改變(bian)現有(you)源(yuan)始元(yuan)素的(de)(de)標(biao)(biao)識(shi)符(fu)而(er)被無效。

2、ui元(yuan)素(su)的(de)(de)一些(xie)標識(shi)符對于(yu)ui中的(de)(de)改(gai)變更(geng)魯棒，并且(qie)領(ling)(ling)域專(zhuan)家可(ke)以(yi)(yi)使(shi)(shi)用(yong)這樣(yang)的(de)(de)標識(shi)符來識(shi)別ui元(yuan)素(su)。在(zai)這樣(yang)做(zuo)時(shi)，專(zhuan)家可(ke)以(yi)(yi)在(zai)領(ling)(ling)域知識(shi)之外(wai)使(shi)(shi)用(yong)試(shi)錯法(fa)。本(ben)文(wen)提出的(de)(de)方(fang)法(fa)和系統從此(ci)啟發(fa)-它們基于(yu)這種(zhong)構想，即隨著時(shi)間的(de)(de)推移保持(chi)ui的(de)(de)表示，并且(qie)利用(yong)ui的(de)(de)這些(xie)可(ke)能不同版本(ben)以(yi)(yi)使(shi)(shi)用(yong)模式(shi)挖(wa)掘技術自動提取(qu)更(geng)魯棒和一致的(de)(de)標識(shi)符。此(ci)外(wai)，根(gen)據本(ben)文(wen)描述(shu)的(de)(de)一些(xie)實施例(li)，領(ling)(ling)域知識(shi)可(ke)以(yi)(yi)被部分地捕獲(huo)為(wei)(wei)概念層級，其可(ke)以(yi)(yi)被理解為(wei)(wei)ui元(yuan)素(su)的(de)(de)存在(zai)論。

3、本文描述的(de)實施(shi)例針對用(yong)于執行概念的(de)描述挖掘以及用(yong)于執行對當前(qian)ui中的(de)ui元素的(de)重新識(shi)別(bie)檢查的(de)方法和系(xi)統。

4、根據本公(gong)開的(de)(de)一(yi)個方(fang)面，提(ti)供了一(yi)種用于(yu)執行概(gai)(gai)念(nian)(nian)的(de)(de)描(miao)(miao)(miao)述(shu)(shu)(shu)(shu)挖掘的(de)(de)計算機實現的(de)(de)方(fang)法(fa)。該方(fang)法(fa)包括：獲取多(duo)個參(can)考(kao)描(miao)(miao)(miao)述(shu)(shu)(shu)(shu)，其(qi)(qi)中(zhong)所(suo)(suo)(suo)(suo)述(shu)(shu)(shu)(shu)多(duo)個參(can)考(kao)描(miao)(miao)(miao)述(shu)(shu)(shu)(shu)中(zhong)的(de)(de)每一(yi)個與用戶界面(ui)元(yuan)(yuan)素相(xiang)(xiang)關(guan)聯(lian)，所(suo)(suo)(suo)(suo)述(shu)(shu)(shu)(shu)ui元(yuan)(yuan)素對應(ying)于(yu)由所(suo)(suo)(suo)(suo)述(shu)(shu)(shu)(shu)概(gai)(gai)念(nian)(nian)表示(shi)的(de)(de)ui元(yuan)(yuan)素的(de)(de)類(lei)型；基于(yu)所(suo)(suo)(suo)(suo)述(shu)(shu)(shu)(shu)多(duo)個參(can)考(kao)描(miao)(miao)(miao)述(shu)(shu)(shu)(shu)，生成(cheng)所(suo)(suo)(suo)(suo)述(shu)(shu)(shu)(shu)概(gai)(gai)念(nian)(nian)的(de)(de)局(ju)(ju)部(bu)描(miao)(miao)(miao)述(shu)(shu)(shu)(shu)和所(suo)(suo)(suo)(suo)述(shu)(shu)(shu)(shu)概(gai)(gai)念(nian)(nian)的(de)(de)全(quan)局(ju)(ju)描(miao)(miao)(miao)述(shu)(shu)(shu)(shu)中(zhong)的(de)(de)至少一(yi)者(zhe)，其(qi)(qi)中(zhong)，所(suo)(suo)(suo)(suo)述(shu)(shu)(shu)(shu)概(gai)(gai)念(nian)(nian)的(de)(de)所(suo)(suo)(suo)(suo)述(shu)(shu)(shu)(shu)局(ju)(ju)部(bu)描(miao)(miao)(miao)述(shu)(shu)(shu)(shu)包括特定于(yu)相(xiang)(xiang)應(ying)ui的(de)(de)描(miao)(miao)(miao)述(shu)(shu)(shu)(shu)分(fen)量(liang)，并且其(qi)(qi)中(zhong)，所(suo)(suo)(suo)(suo)述(shu)(shu)(shu)(shu)概(gai)(gai)念(nian)(nian)的(de)(de)所(suo)(suo)(suo)(suo)述(shu)(shu)(shu)(shu)全(quan)局(ju)(ju)描(miao)(miao)(miao)述(shu)(shu)(shu)(shu)包括不(bu)特定于(yu)ui的(de)(de)描(miao)(miao)(miao)述(shu)(shu)(shu)(shu)分(fen)量(liang)；以及(ji)存儲生成(cheng)的(de)(de)局(ju)(ju)部(bu)描(miao)(miao)(miao)述(shu)(shu)(shu)(shu)和全(quan)局(ju)(ju)描(miao)(miao)(miao)述(shu)(shu)(shu)(shu)中(zhong)的(de)(de)所(suo)(suo)(suo)(suo)述(shu)(shu)(shu)(shu)至少一(yi)者(zhe)，使得其(qi)(qi)與跟所(suo)(suo)(suo)(suo)述(shu)(shu)(shu)(shu)概(gai)(gai)念(nian)(nian)對應(ying)的(de)(de)概(gai)(gai)念(nian)(nian)標識符相(xiang)(xiang)關(guan)聯(lian)。

5、根據(ju)本(ben)公(gong)開(kai)的(de)(de)另(ling)一(yi)方(fang)面(mian)，提供(gong)了(le)一(yi)種用(yong)(yong)于執(zhi)行對當前用(yong)(yong)戶界(jie)面(mian)(ui)中的(de)(de)ui元素(su)的(de)(de)重新識別檢查的(de)(de)計算機實現的(de)(de)方(fang)法。該方(fang)法包括(kuo)：基(ji)于表(biao)示所述(shu)ui元素(su)的(de)(de)概念(nian)標識符，針對所述(shu)ui元素(su)，檢索(suo)存(cun)儲(chu)的(de)(de)第一(yi)局部(bu)(bu)描(miao)述(shu)和存(cun)儲(chu)的(de)(de)第一(yi)全局描(miao)述(shu)中的(de)(de)至少一(yi)者；以及使用(yong)(yong)存(cun)儲(chu)的(de)(de)第一(yi)局部(bu)(bu)描(miao)述(shu)和存(cun)儲(chu)的(de)(de)第一(yi)全局描(miao)中的(de)(de)所述(shu)至少一(yi)者述(shu)來(lai)查詢(xun)當前ui的(de)(de)表(biao)示，以確定是否能夠使用(yong)(yong)相應描(miao)述(shu)重新識別所述(shu)ui元素(su)。

6、根據本公(gong)開的(de)(de)另(ling)一(yi)方面，提供了一(yi)種用(yong)于對(dui)概(gai)(gai)(gai)念執行描(miao)(miao)(miao)(miao)(miao)述(shu)(shu)(shu)(shu)挖掘的(de)(de)系統(tong)。該系統(tong)包括：獲(huo)取單元(yuan)(yuan)(yuan)，其(qi)(qi)構(gou)造(zao)為(wei)獲(huo)取多(duo)個(ge)(ge)(ge)參(can)考描(miao)(miao)(miao)(miao)(miao)述(shu)(shu)(shu)(shu)，其(qi)(qi)中(zhong)(zhong)(zhong)，所(suo)(suo)(suo)述(shu)(shu)(shu)(shu)多(duo)個(ge)(ge)(ge)參(can)考描(miao)(miao)(miao)(miao)(miao)述(shu)(shu)(shu)(shu)中(zhong)(zhong)(zhong)的(de)(de)每一(yi)個(ge)(ge)(ge)與(yu)用(yong)戶界(jie)面(ui)元(yuan)(yuan)(yuan)素相(xiang)關聯(lian)，所(suo)(suo)(suo)述(shu)(shu)(shu)(shu)ui元(yuan)(yuan)(yuan)素對(dui)應(ying)于由所(suo)(suo)(suo)述(shu)(shu)(shu)(shu)概(gai)(gai)(gai)念表示的(de)(de)ui元(yuan)(yuan)(yuan)素的(de)(de)類(lei)型；生成(cheng)單元(yuan)(yuan)(yuan)，其(qi)(qi)構(gou)造(zao)為(wei)基于所(suo)(suo)(suo)述(shu)(shu)(shu)(shu)多(duo)個(ge)(ge)(ge)參(can)考描(miao)(miao)(miao)(miao)(miao)述(shu)(shu)(shu)(shu)，生成(cheng)所(suo)(suo)(suo)述(shu)(shu)(shu)(shu)概(gai)(gai)(gai)念的(de)(de)局部(bu)描(miao)(miao)(miao)(miao)(miao)述(shu)(shu)(shu)(shu)和(he)(he)所(suo)(suo)(suo)述(shu)(shu)(shu)(shu)概(gai)(gai)(gai)念的(de)(de)全局描(miao)(miao)(miao)(miao)(miao)述(shu)(shu)(shu)(shu)中(zhong)(zhong)(zhong)的(de)(de)至(zhi)少一(yi)者，其(qi)(qi)中(zhong)(zhong)(zhong)，所(suo)(suo)(suo)述(shu)(shu)(shu)(shu)概(gai)(gai)(gai)念的(de)(de)所(suo)(suo)(suo)述(shu)(shu)(shu)(shu)局部(bu)描(miao)(miao)(miao)(miao)(miao)述(shu)(shu)(shu)(shu)包括特(te)定于相(xiang)應(ying)ui的(de)(de)描(miao)(miao)(miao)(miao)(miao)述(shu)(shu)(shu)(shu)分量，并且其(qi)(qi)中(zhong)(zhong)(zhong)，所(suo)(suo)(suo)述(shu)(shu)(shu)(shu)概(gai)(gai)(gai)念的(de)(de)所(suo)(suo)(suo)述(shu)(shu)(shu)(shu)全局描(miao)(miao)(miao)(miao)(miao)述(shu)(shu)(shu)(shu)包括不特(te)定于ui的(de)(de)描(miao)(miao)(miao)(miao)(miao)述(shu)(shu)(shu)(shu)分量；以及(ji)存(cun)儲單元(yuan)(yuan)(yuan)，其(qi)(qi)構(gou)造(zao)為(wei)存(cun)儲生成(cheng)的(de)(de)局部(bu)描(miao)(miao)(miao)(miao)(miao)述(shu)(shu)(shu)(shu)和(he)(he)全局描(miao)(miao)(miao)(miao)(miao)述(shu)(shu)(shu)(shu)中(zhong)(zhong)(zhong)的(de)(de)所(suo)(suo)(suo)述(shu)(shu)(shu)(shu)至(zhi)少一(yi)者，使得其(qi)(qi)與(yu)跟所(suo)(suo)(suo)述(shu)(shu)(shu)(shu)概(gai)(gai)(gai)念對(dui)應(ying)的(de)(de)概(gai)(gai)(gai)念標識符相(xiang)關聯(lian)。

7、根據本公開的(de)(de)(de)另(ling)一(yi)方面，提供了一(yi)種(zhong)用于執行對當前用戶界(jie)面(ui)中的(de)(de)(de)ui元(yuan)素的(de)(de)(de)重新識(shi)(shi)別(bie)檢查的(de)(de)(de)系(xi)統(tong)(tong)。該系(xi)統(tong)(tong)包括(kuo)：檢索(suo)單元(yuan)，其(qi)構造(zao)為基于表(biao)示所(suo)述(shu)(shu)ui元(yuan)素的(de)(de)(de)概念標識(shi)(shi)符(fu)，針(zhen)對所(suo)述(shu)(shu)ui元(yuan)素檢索(suo)存儲的(de)(de)(de)第一(yi)局部描述(shu)(shu)和存儲的(de)(de)(de)第一(yi)全(quan)局描述(shu)(shu)中的(de)(de)(de)至少一(yi)者；以(yi)及查詢(xun)單元(yuan)，其(qi)構造(zao)為使用存儲的(de)(de)(de)第一(yi)局部描述(shu)(shu)和存儲的(de)(de)(de)第一(yi)全(quan)局描述(shu)(shu)中的(de)(de)(de)所(suo)述(shu)(shu)至少一(yi)者來查詢(xun)所(suo)述(shu)(shu)當前ui的(de)(de)(de)表(biao)示，以(yi)確定是否能夠使用相應描述(shu)(shu)重新識(shi)(shi)別(bie)所(suo)述(shu)(shu)ui元(yuan)素。

8、在所(suo)附從(cong)屬權利要求中(zhong)闡述了可選特征。

9、當結合(he)以(yi)下描(miao)述和(he)附圖(tu)考慮時，將更好地認識和(he)理解本公(gong)開的(de)這些和(he)其它方(fang)面。以(yi)下描(miao)述雖然指示本公(gong)開的(de)各種實施(shi)例及其許(xu)多(duo)具體細節，但是以(yi)說明而非限(xian)制的(de)方(fang)式給出(chu)。在(zai)本公(gong)開的(de)范圍(wei)內可以(yi)進行許(xu)多(duo)替(ti)(ti)換(huan)(huan)、修(xiu)改、添(tian)加(jia)或(huo)重新布置，并且本公(gong)開包(bao)括所有(you)這樣的(de)替(ti)(ti)換(huan)(huan)、修(xiu)改、添(tian)加(jia)或(huo)重新布置。

技術特征：

1.一(yi)種用于執行概念的描述挖掘的計(ji)算機實現的方法(fa)(fa)(100)，所述方法(fa)(fa)包括：

2.根據權(quan)利要求1所述(shu)的(de)方法(fa)(100)，其中，所述(shu)概(gai)念標(biao)識符唯一(yi)地識別概(gai)念集合中的(de)所述(shu)概(gai)念，所述(shu)概(gai)念集合是多個不(bu)同類型的(de)ui元(yuan)素的(de)存在(zai)論(lun)。

3.根據前述(shu)權利要(yao)求(qiu)中(zhong)任一(yi)項(xiang)所述(shu)的方法(100)，其中(zhong)，所述(shu)多個(ge)參考描(miao)述(shu)中(zhong)的每一(yi)個(ge)呈以下中(zhong)的一(yi)個(ge)的形式(shi)：層疊(die)樣式(shi)表css選擇(ze)器(qi)、可(ke)擴展標記語言路徑語言xpath表達式(shi)以及圖像和/或音(yin)頻描(miao)述(shu)。

4.根據前述權利要求中任一項所(suo)述的(de)方(fang)法(fa)(100)，還(huan)包括：針對所(suo)述多個(ge)參(can)考描述中的(de)每一個(ge)獲取對應的(de)ui表(biao)示，其(qi)中，生成所(suo)述概(gai)念的(de)局部描述或所(suo)述概(gai)念的(de)全局描述還(huan)基于參(can)考描述與所(suo)述對應的(de)ui表(biao)示之間的(de)相(xiang)互(hu)關系。

5.根據權利要(yao)求4所述的(de)方法(100)，還包括，在獲取相應參考描述的(de)對應ui的(de)表示之前：

6.根據前述(shu)(shu)權利要求中任(ren)一項(xiang)所(suo)述(shu)(shu)的方法(100)，其中，生成所(suo)述(shu)(shu)概念(nian)的局(ju)部(bu)描(miao)(miao)述(shu)(shu)包括根據多(duo)個局(ju)部(bu)歷史(shi)參考描(miao)(miao)述(shu)(shu)確定共同描(miao)(miao)述(shu)(shu)分(fen)量(liang)，和/或其中，生成所(suo)述(shu)(shu)概念(nian)的全局(ju)描(miao)(miao)述(shu)(shu)包括根據多(duo)個非局(ju)部(bu)參考描(miao)(miao)述(shu)(shu)確定共同描(miao)(miao)述(shu)(shu)分(fen)量(liang)。

7.根據(ju)前述(shu)(shu)權利要求中(zhong)任一項所述(shu)(shu)的方(fang)法(100)，還包括，在生成所述(shu)(shu)概念的局部描述(shu)(shu)和全局描述(shu)(shu)中(zhong)的至少一者之前：

8.根據權利要求7所述的方(fang)法(fa)(100)，還包括：

9.根據前述權利(li)要求中任一項(xiang)所述的方(fang)法(100)，還包括：

10.一種用于對(dui)當前用戶界面(mian)ui中的ui元素執行(xing)重(zhong)新識(shi)別(bie)檢查(cha)的計算機實現的方(fang)法(200)，所述(shu)方(fang)法包括：

11.根據權利要求(qiu)10所(suo)(suo)(suo)述(shu)(shu)的方(fang)法(200)，還(huan)包括，如果確(que)定能(neng)夠(gou)使(shi)用所(suo)(suo)(suo)述(shu)(shu)第(di)一局(ju)部(bu)(bu)描述(shu)(shu)和/或(huo)所(suo)(suo)(suo)述(shu)(shu)第(di)一全局(ju)描述(shu)(shu)重新識別所(suo)(suo)(suo)述(shu)(shu)ui元素，則(ze)存儲所(suo)(suo)(suo)述(shu)(shu)當前(qian)ui的表示以及所(suo)(suo)(suo)述(shu)(shu)第(di)一局(ju)部(bu)(bu)描述(shu)(shu)和/或(huo)所(suo)(suo)(suo)述(shu)(shu)第(di)一全局(ju)描述(shu)(shu)，使(shi)得它們與所(suo)(suo)(suo)述(shu)(shu)概念標識符相關(guan)聯。

12.根據(ju)權利(li)要求10所(suo)(suo)述(shu)(shu)的方法(200)，還包括，如(ru)果確定(ding)不能使用(yong)所(suo)(suo)述(shu)(shu)第一(yi)局部描(miao)述(shu)(shu)和/或(huo)所(suo)(suo)述(shu)(shu)第一(yi)全局描(miao)述(shu)(shu)重新識(shi)別(bie)所(suo)(suo)述(shu)(shu)ui元素：

13.根據權利(li)要求10所述(shu)的方法(200)，還包括，如果確定不能使用所述(shu)第(di)一局部描述(shu)和/或所述(shu)第(di)一全局描述(shu)重新識別所述(shu)ui元素(su)，則執行以下中的至少一者(zhe)：

14.一種用于(yu)執行概(gai)念的描(miao)述挖掘的系統(300)，所述系統包括：

15.一種(zhong)用于對當(dang)前用戶界面ui中的(de)ui元素執行重新識別檢查的(de)系(xi)統(tong)(400)，所述系(xi)統(tong)包括：

16.一(yi)種計(ji)算(suan)(suan)機可讀存儲介質，包括指(zhi)令(ling)，所(suo)述(shu)(shu)指(zhi)令(ling)在由計(ji)算(suan)(suan)機執(zhi)行時使所(suo)述(shu)(shu)計(ji)算(suan)(suan)機執(zhi)行根據權(quan)利要求1至13中任一(yi)項所(suo)述(shu)(shu)的方法的步驟。

技術總結
提供了一種用于執行概念的描述挖掘的計算機實現的方法(100)。所述方法包括：獲取(S110)多個參考描述，其中，所述多個參考描述中的每一個與用戶界面(UI)元素相關聯，所述用戶界面元素對應于由所述概念表示的UI元素的類型；基于所述多個參考描述生成(S120)所述概念的局部描述和所述概念的全局描述中的至少一者，其中，所述概念的所述局部描述包括特定于相應UI的描述分量，并且其中，所述概念的所述全局描述包括不特定于UI的描述分量；以及存儲(S130)生成的局部描述和全局描述中的所述至少一者，使得其與跟所述概念對應的概念標識符相關聯。

技術研發人員：穆拉特·森索伊
受保護的技術使用者：藍色棱鏡有限公司
技術研發日：
技術公布日：2024/9/19