應用程序的測試方法、設備及系統的制作方法

            文檔序號:6639661閱讀:229來源:國知局
            應用程序的測試方法、設備及系統的制作方法
            【專利摘要】本發明公開了一種應用程序的測試方法、設備及系統。所述應用程序的測試方法包括:向待測試設備發送啟動指令,使所述待測試設備運行待測試應用程序;循環獲取所述待測試應用程序的顯示界面的圖片;識別所述顯示界面圖片,獲得所述顯示界面圖片相應的操作指令;向所述待測試設備發送所述操作指令,使所述待測試應用程序的顯示界面跳轉。采用本發明實施例,能夠提高待測試設備上應用程序的測試效率。
            【專利說明】應用程序的測試方法、設備及系統

            【技術領域】
            [0001]本發明涉及移動通信【技術領域】,尤其涉及一種應用程序的測試方法、設備及系統。

            【背景技術】
            [0002]在現有技術中,測試應用程序采用的是Monkey工具。Monkey工具是Android中的一個命令行工具,可以運行在模擬器或實際設備中。Monkey工具的測試方法是向手機系統發送偽隨機的用戶事件流(如按鍵輸入、觸摸屏輸入、手勢輸入等),實現對應用程序的壓力測試。但是,Monkey工具測試時使用的用戶事件流數據流是隨機的,不能進行自定義。而由于其用戶事件流的隨機性,可能導致測試聚集在應用程序的單個顯示界面上,使其測試效率不高。
            [0003]還有一些應用程序的測試采用的是MonkeyRunner工具。MonkeyRunner工具提供一個API,使用該API寫出的程序可以在Android代碼之外控制測試設備和模擬器。MonkeyRunner工具還可以執行測試人員編寫的測試腳本,從而達到對應用程序進行安裝、運行、發送模擬擊鍵、截取顯示界面圖片的操作。但是,MonkeyRunner工具測試時,需要測試人員編寫測試腳本,測試過程較為繁瑣。同時,測試腳本的執行過程是固定的,當應用程序的結構發生變化或測試設備發生變化時,測試腳本往往不能適應新的測試環境,從而需要針對不同的測試設備定制不同的測試腳本,使得測試腳本的可重用性較低。而且,MonkeyRunner工具提供的多設備支持功能在具有不同分辨率的測試設備中,表現差強人意,沒有從真正意義上支持多設備。


            【發明內容】

            [0004]本發明實施例提出一種應用程序的測試方法、設備及系統,能夠提高待測試設備上應用程序的測試效率。
            [0005]本發明實施例提供一種應用程序的測試方法,包括:
            [0006]向待測試設備發送啟動指令,使所述待測試設備運行待測試應用程序;
            [0007]循環獲取所述待測試應用程序的顯示界面的圖片;
            [0008]識別所述顯示界面圖片,獲得所述顯示界面圖片相應的操作指令;
            [0009]向所述待測試設備發送所述操作指令,使所述待測試應用程序的顯示界面跳轉。
            [0010]進一步地,所述識別所述顯示界面圖片,獲得所述顯示界面圖片相應的操作指令,具體包括:
            [0011]根據圖片識別算法,判斷預先生成的層次結構圖中是否存在與所述顯示界面圖片相似的控件視圖;所述層次結構圖為具有跳轉關系的各個顯示界面的控件視圖;
            [0012]若所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖,則根據所述控件視圖中的控件,獲得所述顯示界面圖片相應的操作指令;
            [0013]若所述層次結構圖中不存在與所述顯示界面圖片相似的控件視圖,則查詢預先建立的彈窗庫,獲得與所述顯示界面圖片相似的彈窗特征圖;所述彈窗庫為存儲各個彈窗特征圖及其處理邏輯的數據庫;
            [0014]根據所述彈窗特征圖的處理邏輯,獲得所述顯示界面圖片相應的操作指令。
            [0015]優選地,所述控件視圖包括控件的位置、圖片和類型;
            [0016]所述若所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖,則根據所述控件視圖中的控件,獲得所述顯示界面圖片相應的操作指令,具體包括:
            [0017]若所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖,則根據所述控件視圖中控件的位置和圖片,識別出所述顯示界面圖片中的控件;
            [0018]根據所述控件視圖中控件的類型,獲得觸發所述顯示界面圖片中的控件的操作指令。
            [0019]進一步地,在所述向待測試設備發送啟動指令,使所述待測試設備運行待測試應用程序之前,還包括:
            [0020]接收客戶端發送的所述待測試應用程序的圖片素材;所述圖片素材包括顯示界面圖片素材和控件圖片素材;
            [0021]根據控件圖片素材,識別出每個顯示界面圖片素材上控件的位置、圖片和類型;
            [0022]將每個顯示界面圖片素材轉換為每個顯示界面的控件視圖;
            [0023]向運行設備發送啟動指令,使所述運行設備運行所述待測試應用程序;
            [0024]根據所述待測試應用程序運行時顯示界面的跳轉關系,建立各個顯示界面的控件視圖的跳轉關系,獲得具有跳轉關系的控件視圖;所述具有跳轉關系的控件視圖即為層次結構圖。
            [0025]進一步地,在所述向待測試設備發送啟動指令,使所述待測試設備運行待測試應用程序之前,還包括:
            [0026]接收客戶端發送的待測試應用程序的安裝包,以及待測試設備列表;
            [0027]向所述待測試設備列表中的待測試設備發送所述安裝包,使所述待測試設備安裝所述待測試應用程序。
            [0028]進一步地,所述應用程序的測試方法還包括:
            [0029]實時獲取所述待測試設備的性能數據;
            [0030]在所述待測試應用程序運行結束時,根據獲取的所述顯示界面圖片和所述性能數據,生成測試報告;
            [0031]將所述測試報告發送給客戶端。
            [0032]本發明還提供了另外一種測試設備,包括:
            [0033]第一啟動模塊,用于向待測試設備發送啟動指令,使所述待測試設備運行待測試應用程序;
            [0034]顯示界面圖片獲取模塊,用于循環獲取所述待測試應用程序的顯示界面的圖片;
            [0035]顯示界面圖片識別模塊,用于識別所述顯示界面圖片,獲得所述顯示界面圖片相應的操作指令;以及,
            [0036]操作指令發送模塊,用于向所述待測試設備發送所述操作指令,使所述待測試應用程序的顯示界面跳轉。
            [0037]進一步地,所述顯示界面圖片識別模塊具體包括:
            [0038]判斷單元,用于根據圖片識別算法,判斷預先生成的層次結構圖中是否存在與所述顯示界面圖片相似的控件視圖;所述層次結構圖為具有跳轉關系的各個顯示界面的控件視圖;
            [0039]第一操作指令獲取單元,用于在所述判斷單元判定所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖時,根據所述控件視圖中的控件,獲得所述顯示界面圖片相應的操作指令;
            [0040]彈窗特征圖獲取單元,用于在所述層次結構圖中不存在與所述顯示界面圖片相似的控件視圖時,查詢預先建立的彈窗庫,獲得與所述顯示界面圖片相似的彈窗特征圖;所述彈窗庫為存儲各個彈窗特征圖及其處理邏輯的數據庫;以及,
            [0041]第二操作指令獲取單元,用于根據所述彈窗特征圖的處理邏輯,獲得所述顯示界面圖片相應的操作指令。
            [0042]優選地,所述控件視圖包括控件的位置、圖片和類型;
            [0043]所述第一操作指令獲取單元具體包括:
            [0044]控件識別子單元,用于在所述判斷單元判定所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖時,根據所述控件視圖中控件的位置和圖片,識別出所述顯示界面圖片中的控件;以及,
            [0045]操作指令獲取子單元,用于根據所述控件視圖中控件的類型,獲得觸發所述顯示界面圖片中的控件的操作指令。
            [0046]進一步地,所述測試設備還包括:
            [0047]第一接收模塊,用于接收客戶端發送的所述待測試應用程序的圖片素材;所述圖片素材包括顯示界面圖片素材和控件圖片素材;
            [0048]控件識別模塊,用于根據所述控件圖片素材,識別出每個顯示界面圖片素材上控件的位置、圖片和類型;
            [0049]轉換模塊,用于將每個顯示界面圖片素材轉換為每個顯示界面的控件視圖;
            [0050]第二啟動模塊,用于向運行設備發送啟動指令,使所述運行設備運行所述待測試應用程序;以及,
            [0051]層次結構圖獲取模塊,用于根據所述待測試應用程序運行時顯示界面的跳轉關系,建立各個顯示界面的控件視圖的跳轉關系,獲得具有跳轉關系的控件視圖;所述具有跳轉關系的控件視圖即為層次結構圖。
            [0052]進一步地,所述測試設備還包括:
            [0053]第二接收模塊,用于接收客戶端發送的待測試應用程序的安裝包,以及待測試設備列表;以及,
            [0054]安裝包發送模塊,用于向所述待測試設備列表中的待測試設備發送所述安裝包,使所述待測試設備安裝所述待測試應用程序。
            [0055]進一步地,所述測試設備還包括:
            [0056]性能數據獲取模塊,用于實時獲取所述待測試設備的性能數據;
            [0057]測試報告生成模塊,用于在所述待測試應用程序運行結束時,根據獲取的所述顯示界面圖片和所述性能數據,生成測試報告;以及,
            [0058]測試報告發送模塊,用于將所述測試報告發送給客戶端。
            [0059]本發明還提供了一種應用程序的測試系統,包括客戶端、測試設備和待測試設備;
            [0060]所述測試設備是上述測試設備。
            [0061]實施本發明實施例,具有如下有益效果:
            [0062]本發明實施例提供的應用程序的測試方法、設備及系統,能夠獲取待測試應用程序的顯示界面的圖片,識別其相應的操作指令,使待測試應用程序的顯示界面自動跳轉,適用于各種類型的應用程序的測試,同時,提高應用程序的測試效率;根據待測試應用程序顯示界面的控件視圖和跳轉關系,自動生成層次結構圖,并利用該層次結構圖使各種類型的應用程序的測試統一化,有效提高測試效率;建立彈窗庫,設置彈窗特征圖及其處理邏輯,用于處理應用程序中的彈窗事件,提高測試的成功率;客戶端只需提供待測試應用程序的圖片素材,無需測試人員編寫測試腳本,即可進行全自動化的測試,節約人力資源,降低學習成本;支持多設備并發測試,有效提高測試效率,節省測試時間。

            【專利附圖】

            【附圖說明】
            [0063]圖1是本發明提供的應用程序的測試方法的第一個實施例的流程示意圖;
            [0064]圖2是本發明提供的顯示界面的一個實施例的結構示意圖;
            [0065]圖3是本發明提供的具有彈窗事件的顯示界面的一個實施例的結構示意圖;
            [0066]圖4是本發明提供的應用程序的測試方法的第二個實施例的部分流程示意圖;
            [0067]圖5是本發明提供的圖片素材的一個實施例的結構示意圖;
            [0068]圖6是本發明提供的層次結構圖的一個實施例的結構示意圖;
            [0069]圖7是本發明提供的任務調度表的一個實施例的結構示意圖;
            [0070]圖8是本發明提供的應用程序的測試設備的第一個實施例的結構示意圖;
            [0071]圖9是本發明提供的應用程序的測試設備的第二個實施例的部分結構示意圖;
            [0072]圖10是本發明提供的應用程序的測試系統的第一個實施例的結構示意圖;
            [0073]圖11是本發明提供的應用程序的測試系統的第二個實施例的結構示意圖。

            【具體實施方式】
            [0074]下面將結合本發明實施例中的附圖,對本發明實施例中的技術方案進行清楚、完整地描述,顯然,所描述的實施例僅僅是本發明一部分實施例,而不是全部的實施例。基于本發明中的實施例,本領域普通技術人員在沒有作出創造性勞動前提下所獲得的所有其他實施例,都屬于本發明保護的范圍。
            [0075]參見圖1,是本發明提供的應用程序的測試方法的第一個實施例的流程示意圖。
            [0076]本發明實施例提供的應用程序的測試方法包括步驟S101至S104,具體如下:
            [0077]S101、向待測試設備發送啟動指令,使所述待測試設備運行待測試應用程序。
            [0078]具體的,通過ADB命令使待測試設備啟動所述待測試應用程序。
            [0079]S102、循環獲取所述待測試應用程序的顯示界面的圖片。
            [0080]具體的,待測試應用程序的顯示界面每跳轉一次,都會對顯示界面進行截圖,獲取顯不界面圖片。
            [0081]S103、識別所述顯示界面圖片,獲得所述顯示界面圖片相應的操作指令。
            [0082]S104、向所述待測試設備發送所述操作指令,使所述待測試應用程序的顯示界面跳轉。
            [0083]其中,在步驟S103中,所述識別所述顯示界面圖片,獲得所述顯示界面圖片相應的操作指令,具體包括:
            [0084]根據圖片識別算法,判斷預先生成的層次結構圖中是否存在與所述顯示界面圖片相似的控件視圖;所述層次結構圖為具有跳轉關系的各個顯示界面的控件視圖;
            [0085]若所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖,則根據所述控件視圖中的控件,獲得所述顯示界面圖片相應的操作指令;
            [0086]若所述層次結構圖中不存在與所述顯示界面圖片相似的控件視圖,則查詢預先建立的彈窗庫,獲得與所述顯示界面圖片相似的彈窗特征圖;所述彈窗庫為存儲各個彈窗特征圖及其處理邏輯的數據庫;
            [0087]根據所述彈窗特征圖的處理邏輯,獲得所述顯示界面圖片相應的操作指令。
            [0088]優選地,所述控件視圖包括控件的位置、圖片和類型。
            [0089]具體的,所述若所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖,則根據所述控件視圖中的控件,獲得所述顯示界面圖片相應的操作指令,具體包括:
            [0090]若所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖,則根據所述控件視圖中控件的位置和圖片,識別出所述顯示界面圖片中的控件;
            [0091]根據所述控件視圖中控件的類型,獲得觸發所述顯示界面圖片中的控件的操作指令。
            [0092]需要說明的是,在識別顯示界面中的控件時,先根據控件視圖中控件的坐標來進行識別,若坐標錯位,則采用圖片識別技術,根據控件的圖片來進行識別,使測試具有較高的執行效率和兼容性。
            [0093]具體的,控件的類型包括圖像(Image)控件、文本(Textarea)控件和按鈕(Button)控件。在識別出顯示界面中的按鈕控件時,根據該按鈕控件,獲得觸發該按鈕控件所需的操作指令,如點擊指令、滑動指令等。其中,操作指令是根據層次結構圖中控件視圖的跳轉關系進行發送的,使待測試應用程序的顯示界面按照層次結構圖中控件視圖的跳轉關系進行跳轉。若顯示界面圖片上具有多個按鈕控件,查詢該顯示界面圖片在層次結構圖中的狀態信息,根據該狀態信息,獲取觸發相應按鈕控件所需的操作指令,從而使測試過程更具規劃性和可控性,避免盲目地向顯示界面圖片中不同的按鈕控件發送操作指令,使測試的效率更高。
            [0094]如圖2所示,在識別出顯示界面圖片中的按鈕控件時,根據層次結構圖,向顯示界面21中的按鈕控件22發送點擊指令,顯示界面21中按鈕控件22處出現手指形狀圖標23,使手指形狀圖標23點擊按鈕控件22,顯示界面21跳轉,從而實現全自動化的測試。
            [0095]另外,在根據層次結構圖進行顯示界面跳轉的同時,記錄所有跳轉節點的訪問狀態和正在訪問的路徑信息,在測試遍歷到一個已訪問的跳轉節點時,執行回溯操作,使測試最終遍歷所有可以到達的跳轉節點,提高測試的執行效率。
            [0096]在測試過程中,還會出現一些特殊的彈窗事件,而彈窗事件是難以預測的,如在游戲應用程序的測試過程中,會出現臨時活動的推送界面,消息提示界面等。當出現這些彈窗事件時,如果不對其進行處理,則會對測試造成阻礙,甚至導致測試的失敗。因此,可預先建立彈窗庫,用來存儲各個彈窗特征圖及其處理邏輯,同時還存儲有各個彈窗特征圖處理后的目標顯示界面圖片。其中,彈窗特征圖為特殊的顯示界面圖片,處理邏輯為客戶端自定義處理過程,如輸入、點擊、等待等。
            [0097]若測試中獲得未知的顯示界面圖片,即層次結構圖中不存在與顯示界面圖片相似的控件視圖,則說明測試中出現了彈窗事件。測試設備查詢彈窗庫中的彈窗特征圖,找到與顯示界面相近似的彈窗特征圖,從而獲得該彈窗特征圖的處理邏輯,使待測試應用程序執行該處理邏輯,將顯示界面跳轉到目標顯示界面,并繼續進行正常測試。
            [0098]如圖3所示,在測試過程中,顯示界面31中出現彈窗事件32,測試設備在獲得該顯示界面31的圖片時,未從層次結構圖中找出與該圖片相似的控件視圖,則調用彈窗庫,從彈窗庫中找到與該圖片相似的彈窗特征圖,并根據彈窗特征圖的處理邏輯,向顯示界面31發送點擊指令,使顯示界面31跳轉到目標顯示界面。
            [0099]需要說明的是,本實施例的應用程序的測試方法由測試設備實現,所述測試設備部署在計算機上,通過與待測試設備連接,實現對待測試設備上應用程序的測試。所述待測試設備為移動終端。
            [0100]參見圖4,是本發明提供的應用程序的測試方法的第二個實施例的流程示意圖。
            [0101]與上述第一實施例相比,第二實施例提供的應用程序的測試方法的不同點在于:
            [0102]在所述向待測試設備發送啟動指令,使所述待測試設備運行待測試應用程序之前,還包括步驟S401至步驟S405,具體如下:
            [0103]S401、接收客戶端發送的所述待測試應用程序的圖片素材;所述圖片素材包括顯示界面圖片素材和控件圖片素材。
            [0104]需要說明的是,在接收待測試應用程序的圖片素材的同時,還接收客戶端發送的待測試應用程序安裝包,并向運行設備發送安裝包,通過ADB (Android Debug Bridge)命令使該運行設備安裝所述待測試應用程序。其中,運行設備是用于生成層次結構圖的任意一個移動終端。
            [0105]在接收到的圖片素材中,顯示界面圖片素材為待測試應用程序各個顯示界面的截圖。控件圖片素材為各個顯示界面中的按鈕圖片素材、圖像圖片素材和文本圖片素材。
            [0106]S402、根據所述控件圖片素材,識別出每個顯示界面圖片素材上控件的位置、圖片和類型。
            [0107]具體的,米用SIFT (Scale-1nvariant feature transform,尺度不變特征變換匹配算法)圖片識別技術,根據按鈕圖片素材、圖像圖片素材和文本圖片素材分別識別出每個顯示界面圖片素材上的按鈕控件、圖像控件和文本控件,并記錄每個顯示界面圖片素材上的每個控件的位置、圖片和類型。其中,控件的位置為控件的坐標。
            [0108]S403、將每個顯示界面圖片素材轉換為每個顯示界面的控件視圖。
            [0109]具體的,測試設備循環識別每個顯示界面圖片素材中的控件,從而將每個顯示界面圖片素材轉換為其對應的控件視圖。
            [0110]如圖5所示,根據控件圖片素材中的按鈕圖片素材51、圖像圖片素材52和文本圖片素材53分別識別出顯示界面圖片素材54上的按鈕控件55、圖像控件56和文本控件57,從而將顯示界面圖片素材54轉換為控件視圖。測試設備不斷循環轉換,直到將所有顯示界面圖片素材轉換為控件視圖為止。
            [0111]S404、向運行設備發送啟動指令,使所述運行設備運行所述待測試應用程序。
            [0112]具體的,通過ADB命令使安裝有待測試應用程序的運行設備啟動所述待測試應用程序。
            [0113]S405、根據所述待測試應用程序運行時顯示界面的跳轉關系,建立各個顯示界面的控件視圖的跳轉關系,獲得具有跳轉關系的控件視圖;所述具有跳轉關系的控件視圖即為層次結構圖。
            [0114]具體的,在待測試應用程序運行時,測試設備對當前顯示界面進行截圖,識別出當前顯示界面的控件視圖,并根據該控件視圖,向運行設備發送操作指令,如點擊或滑動等,使運行設備中的待測試應用程序執行操作。測試設備對運行設備執行操作后的顯示界面再進行截圖、識別和發送操作指令,不斷循環獲得待測試應用程序各個顯示界面之間完整的跳轉關系。根據該跳轉關系,建立各個顯示界面的控件視圖的跳轉關系,輸出具有跳轉關系的控件視圖,從而獲得層次結構圖。其中,層次結構圖為待測試應用程序的測試用例。
            [0115]如圖6所示,待測試應用程序的顯示界面具有第一控件視圖61、第二控件視圖62和第三控件視圖63。對待測試應用程序的當前顯示界面進行截圖,并識別出該截圖相似的控件視圖為第一控件視圖61,根據第一控件視圖61中的第一按鈕控件611向待測試應用程序發送操作指令,使待測試應用程序的顯示界面跳轉。測試設備繼續對跳轉后的顯示界面截圖,識別出跳轉后的顯示界面截圖相似的控件視圖為第二控件視圖62,再根據第二控件視圖62中的第三按鈕控件621向待測試應用程序發送操作指令,使待測試應用程序的顯示界面繼續跳轉。如此循環,使待測試應用程序的顯示界面完成全部跳轉,獲得各個控件視圖的完整跳轉關系:觸發第一控件視圖61上的第一按鈕控件611,第一控件視圖61跳轉到第二控件視圖62 ;觸發第二控件視圖62上的第三按鈕控件621,第二控件視圖62跳轉到第三控件視圖63 ;觸發第三控件視圖63的第五按鈕控件631,第三控件視圖63跳轉到第二控件視圖62 ;觸發第二控件視圖62上的第四按鈕控件622,第二控件視圖62跳轉到第一控件視圖61 ;觸發第一控件視圖61上的第二按鈕控件612,第一控件視圖61跳轉到第三控件視圖63。輸出具有跳轉關系的控件視圖,即可獲得層次結構圖。其中,層次結構圖以文件的形式保存,例如可保存為xml文件。
            [0116]另外,待測試應用程序的層次結構圖只需生成一次,測試設備將生成的層次結構圖分發到不同的測試設備上,使不同的測試設備能夠直接測試待測試設備上的該應用程序,從而減少網絡數據傳輸量,且可避免重復計算。
            [0117]需要說明的是,在1S和Android系統的原生應用中,現有的測試設備可以直接從應用程序的顯示界面中獲取控件的位置和類型,但是對于使用了第三方引擎(如C0C0S2dX、Unity3D等)的應用程序,其顯示界面被渲染成了一張完整的圖片,現有的測試設備不能直接從顯示界面中獲取控件。因此,本發明提供的實施例采用預先生成待測試應用程序的層次結構圖的方法來進行測試,適用于各種類型的應用程序的測試,有效提高測試效率。
            [0118]本發明還提供應用程序的測試方法的第三個實施例。
            [0119]與上述第一實施例和第二實施例相比,第三實施例提供的應用程序的測試方法的不同點在于:
            [0120]在所述向待測試設備發送啟動指令,使所述待測試設備運行待測試應用程序之前,還包括:
            [0121]接收客戶端發送的待測試應用程序的安裝包,以及待測試設備列表;
            [0122]向所述待測試設備列表中的待測試設備發送所述安裝包,使所述待測試設備安裝所述待測試應用程序。
            [0123]需要說明的是,客戶端還可以通過服務器向測試設備發送測試請求。其中,測試請求包括待測試應用程序的安裝包和待測試設備列表。具體的,客戶端將測試請求發送給服務器,服務器根據待測試設備列表中的待測試設備,向不同測試設備分發測試任務。若待測試設備處于本地局域網中,則服務器將測試任務標識為本地任務,并將其發送給連接該待測試設備的本地測試設備上;若待測試設備不在本地局域網中,則服務器將該測試任務標識為遠程任務,并將其發送到連接該待測試設備的遠程測試設備上。其中,服務器與遠程測試設備通過Socket進行通訊。
            [0124]其中,待測試列表中可包含多個待測試設備,測試設備可多線程并發執行多個測試任務。優選地,一個測試設備上最多啟動與其CPU核心數相同的測試任務。如果測試設備當前的測試任務較多,則將測試任務放入任務隊列中,并生成待測試設備的狀態表,記錄待測試設備的狀態信息,在待測試設備空閑時進行測試。
            [0125]如圖7所示,測試設備同時在待測試設備A1、待測試設備A2……和待測試設備An上對待測試應用程序進行測試時,生成任務調度表71,將測試設備具有的測試任務B1、測試任務B2……和測試任務Bn放入任務調度表71中的任務隊列72中。其中,測試設備可以為本地測試設備或遠程測試設備,待測試應用程序可以為待測試應用程序C1、待測試應用程序C2……和待測試應用程序Cn。在任務隊列72中,測試任務B1包含待測試設備A1和待測試應用程序C1的信息;測試任務B2包含待測試設備A2和待測試應用程序C1的信息;測試任務Bn包含待測試設備An和待測試應用程序Cn的信息。同時,任務調度表71中還具有待測試設備狀態表73,用于記錄待測試設備A1、待測試設備A2……和待測試設備An的狀態信息,在待測試設備空閑時對其進行測試。
            [0126]本發明還提供應用程序的測試方法的第四個實施例。
            [0127]與上述第一實施例、第二實施例和第三實施例相比,第四實施例提供的應用程序的測試方法的不同點在于:
            [0128]所述應用程序的測試方法還包括:
            [0129]實時獲取所述待測試設備的性能數據;
            [0130]在所述待測試應用程序運行結束時,根據獲取的所述顯示界面圖片和所述性能數據,生成測試報告;
            [0131]將所述測試報告發送給客戶端。
            [0132]具體的,在待測試應用程序運行過程中,實時獲取待測試設備的性能數據,如CPU、內存的占用信息等。在所述待測試應用程序運行結束時,將每張顯示界面圖片與獲取每張顯示界面圖片時的待測試設備性能數據相對應的生成測試報告,使測試人員能夠查看測試過程中出現的問題,且方便發現應用程序的性能瓶頸。同時,實時監控測試過程,使測試人員可實時查詢測試進度,也使測試過程可以重現。
            [0133]本發明實施例提供的應用程序的測試方法,能夠獲取待測試應用程序的顯示界面的圖片,識別其相應的操作指令,使待測試應用程序的顯示界面自動跳轉,適用于各種類型的應用程序的測試,同時,提高應用程序的測試效率;根據待測試應用程序顯示界面的控件視圖和跳轉關系,自動生成層次結構圖,并利用該層次結構圖使各種類型的應用程序的測試統一化,有效提高測試效率;建立彈窗庫,設置彈窗特征圖及其處理邏輯,用于處理應用程序中的彈窗事件,提高測試的成功率;客戶端只需提供待測試應用程序的圖片素材,無需測試人員編寫測試腳本,即可進行全自動化的測試,節約人力資源,降低學習成本;支持多設備并發測試,有效提高測試效率,節省測試時間。
            [0134]相應地,本發明還提供一種應用程序的測試設備和測試系統,能夠實現上述實施例中的應用程序的測試方法的所有流程。
            [0135]參見圖8,是本發明提供的應用程序的測試設備的第一個實施例的結構示意圖,包括:
            [0136]第一啟動模塊81,用于向待測試設備發送啟動指令,使所述待測試設備運行待測試應用程序;
            [0137]顯示界面圖片獲取模塊82,用于循環獲取所述待測試應用程序的顯示界面的圖片;
            [0138]顯示界面圖片識別模塊83,用于識別所述顯示界面圖片,獲得所述顯示界面圖片相應的操作指令;以及,
            [0139]操作指令發送模塊84,用于向所述待測試設備發送所述操作指令,使所述待測試應用程序的顯示界面跳轉。
            [0140]其中,所述顯示界面圖片識別模塊83具體包括:
            [0141]判斷單元,用于根據圖片識別算法,判斷預先生成的層次結構圖中是否存在與所述顯示界面圖片相似的控件視圖;所述層次結構圖為具有跳轉關系的各個顯示界面的控件視圖;
            [0142]第一操作指令獲取單元,用于在所述判斷單元判定所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖時,根據所述控件視圖中的控件,獲得所述顯示界面圖片相應的操作指令;
            [0143]彈窗特征圖獲取單元,用于在所述層次結構圖中不存在與所述顯示界面圖片相似的控件視圖時,查詢預先建立的彈窗庫,獲得與所述顯示界面圖片相似的彈窗特征圖;所述彈窗庫為存儲各個彈窗特征圖及其處理邏輯的數據庫;以及,
            [0144]第二操作指令獲取單元,用于根據所述彈窗特征圖的處理邏輯,獲得所述顯示界面圖片相應的操作指令。
            [0145]優選地,所述控件視圖包括控件的位置、圖片和類型。
            [0146]具體的,所述第一操作指令獲取單元具體包括:
            [0147]控件識別子單元,用于在所述判斷單元判定所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖時,根據所述控件視圖中控件的位置和圖片,識別出所述顯示界面圖片中的控件;以及,
            [0148]操作指令獲取子單元,用于根據所述控件視圖中控件的類型,獲得觸發所述顯示界面圖片中的控件的操作指令。
            [0149]參見圖9,是本發明提供的應用程序的測試設備的第二個實施例。
            [0150]與上述第一實施例相比,第二實施例提供的應用程序的測試設備的不同點在于:
            [0151]所述應用程序的測試設備還包括:
            [0152]第一接收模塊91,用于接收客戶端發送的所述待測試應用程序的圖片素材;所述圖片素材包括顯示界面圖片素材和控件圖片素材;
            [0153]控件識別模塊92,用于根據所述控件圖片素材,識別出每個顯示界面圖片素材上控件的位置、圖片和類型;
            [0154]轉換模塊93,用于將每個顯示界面圖片素材轉換為每個顯示界面的控件視圖;
            [0155]第二啟動模塊94,用于向運行設備發送啟動指令,使所述運行設備運行所述待測試應用程序;以及,
            [0156]層次結構圖獲取模塊95,用于根據所述待測試應用程序運行時顯示界面的跳轉關系,建立各個顯示界面的控件視圖的跳轉關系,獲得具有跳轉關系的控件視圖;所述具有跳轉關系的控件視圖即為層次結構圖。
            [0157]本發明還提供應用程序的測試設備的第三個實施例。
            [0158]與上述第一實施例和第二實施例相比,第三實施例提供的應用程序的測試設備的不同點在于:
            [0159]所述應用程序的測試設備還包括:
            [0160]第二接收模塊,用于接收客戶端發送的待測試應用程序的安裝包,以及待測試設備列表;以及,
            [0161]安裝包發送模塊,用于向所述待測試設備列表中的待測試設備發送所述安裝包,使所述待測試設備安裝所述待測試應用程序。
            [0162]本發明還提供應用程序的測試設備的第四個實施例。
            [0163]與上述第一實施例、第二實施例和第三實施例相比,第四實施例提供的應用程序的測試設備的不同點在于:
            [0164]所述應用程序的測試設備還包括:
            [0165]性能數據獲取模塊,用于實時獲取所述待測試設備的性能數據;
            [0166]測試報告生成模塊,用于在所述待測試應用程序運行結束時,根據獲取的所述顯示界面圖片和所述性能數據,生成測試報告;以及,
            [0167]測試報告發送模塊,用于將所述測試報告發送給客戶端。
            [0168]本發明實施例提供的應用程序的測試設備,能夠獲取待測試應用程序的顯示界面的圖片,識別其相應的操作指令,使待測試應用程序的顯示界面自動跳轉,適用于各種類型的應用程序的測試,同時,提高應用程序的測試效率;根據待測試應用程序顯示界面的控件視圖和跳轉關系,自動生成層次結構圖,并利用該層次結構圖使各種類型的應用程序的測試統一化,有效提高測試效率;建立彈窗庫,設置彈窗特征圖及其處理邏輯,用于處理應用程序中的彈窗事件,提高測試的成功率;客戶端只需提供待測試應用程序的圖片素材,無需測試人員編寫測試腳本,即可進行全自動化的測試,節約人力資源,降低學習成本;支持多設備并發測試,有效提高測試效率,節省測試時間。
            [0169]參見圖10,是本發明提供的應用程序的測試系統的第一個實施例的結構示意圖,包括客戶端101、測試設備102和待測試設備103 ;
            [0170]所述測試設備102是上述應用程序的測試設備,在此不再詳細描述。
            [0171]參見圖11,是本發明提供的應用程序的測試系統的第二個實施例的結構示意圖。
            [0172]本實施例提供的應用程序的測試系統包括客戶端111、服務器112、第一測試設備113、第二測試設備114、第三測試設備115和多個待測試設備。其中,測試設備配置在計算機上,待測試設備為移動終端。客戶端111接入服務器112,向服務器112發送測試請求;第一測試設備113和第二測試設備114為本地測試設備,分別接入服務器112,接收服務器112發送的本地測試任務;第三測試設備115為遠程測試設備,通過Socket與服務器112進行通訊,接收服務器112發送的遠程任務;每個測試設備接入待測試設備A1、待測試設備A2……和待測試設備An,實現在待測試設備A1、待測試設備A2……和待測試設備An上對待測試應用程序的測試。本發明實施例通過服務器來分發任務,提高測試設備的使用率。
            [0173]服務器分別與本地測試設備和遠程測試設備連接,可以將本地測試任務分發給本地測試設備,將遠程測試任務分發給遠程測試設備進行測試,提高測試設備的使用率,同時降低測試設備的購置成本。每個測試設備分別與待測試設備A1、待測試設備A2……和待測試設備An連接,支持多個待測試設備的并發測試,節約測試時間,同時,測試設備可適應對不同分辨率的待測試設備的測試。
            [0174]需要說明的是,本發明實施例僅以測試系統包括一個服務器,且該服務器分別與兩個本地測試設備和一個遠程測試設備連接為例進行描述,但在具體實施當中,測試設備可以包括一個或多個服務器,每個服務器可與一個或多個本地測試設備連接,也可與一個或多個遠程測試設備連接,其服務器和測試設備的數量可以根據實際應用來配置。
            [0175]本發明實施例提供的應用程序的測試系統,能夠獲取待測試應用程序的顯示界面的圖片,識別其相應的操作指令,使待測試應用程序的顯示界面自動跳轉,適用于各種類型的應用程序的測試,同時,提高應用程序的測試效率;根據待測試應用程序顯示界面的控件視圖和跳轉關系,自動生成層次結構圖,并利用該層次結構圖使各種類型的應用程序的測試統一化,有效提高測試效率;建立彈窗庫,設置彈窗特征圖及其處理邏輯,用于處理應用程序中的彈窗事件,提高測試的成功率;客戶端只需提供待測試應用程序的圖片素材,無需測試人員編寫測試腳本,即可進行全自動化的測試,節約人力資源,降低學習成本;支持多設備并發測試,有效提高測試效率,節省測試時間。
            [0176]需要說明的是,在本文中,術語“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含,從而使得包括一系列要素的過程、方法、物品或者裝置不僅包括那些要素,而且還包括沒有明確列出的其他要素,或者是還包括為這種過程、方法、物品或者裝置所固有的要素。在沒有更多限制的情況下,由語句“包括一個……”限定的要素,并不排除在包括該要素的過程、方法、物品或者裝置中還存在另外的相同要素。
            [0177]上述本發明實施例序號僅僅為了描述,不代表實施例的優劣。
            [0178]在本申請所提供的幾個實施例中,應該理解到,所揭露的系統和方法可以通過其它的方式實現。例如,以上所描述的系統實施例僅僅是示意性的,例如,所述單元的劃分,僅僅為一種邏輯功能劃分,實際實現時可以有另外的劃分方式,例如多個單元或組件可以結合或者可以集成到另一個系統,或一些特征可以忽略,或不執行。另一點,所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過一些接口,裝置或單元的間接耦合或通信連接,可以是電性,機械或其它的形式。
            [0179]專業人員還可以進一步意識到,結合本文中所公開的實施例描述的各示例的單元及算法步驟,能夠以電子硬件、計算機軟件或者二者的結合來實現,為了清楚地說明硬件和軟件的可互換性,在上述說明中已經按照功能一般性地描述了各示例的組成及步驟。這些功能宄竟以硬件還是軟件方式來執行,取決于技術方案的特定應用和設計約束條件。專業技術人員可以對每個特定的應用來使用不同方法來實現所描述的功能,但是這種實現不應認為超出本發明的范圍。
            [0180]結合本文中所公開的實施例描述的方法或算法的步驟可以直接用硬件、處理器執行的軟件模塊,或者二者的結合來實施。軟件模塊可以置于隨機存儲器(RAM)、內存、只讀存儲器(ROM)、電可編程ROM、電可擦除可編程ROM、寄存器、硬盤、可移動磁盤、CD-ROM、或【技術領域】內所公知的任意其它形式的存儲介質中。
            [0181]對所公開的實施例的上述說明,使本領域專業技術人員能夠實現或使用本發明。對這些實施例的多種修改對本領域的專業技術人員來說將是顯而易見的,本文中所定義的一般原理可以在不脫離本發明的精神或范圍的情況下,在其它實施例中實現。因此,本發明將不會被限制于本文所示的這些實施例,而是要符合與本文所公開的原理和新穎特點相一致的最寬的范圍。
            【權利要求】
            1.一種應用程序的測試方法,其特征在于,包括: 向待測試設備發送啟動指令,使所述待測試設備運行待測試應用程序; 循環獲取所述待測試應用程序的顯示界面的圖片; 識別所述顯示界面圖片,獲得所述顯示界面圖片相應的操作指令; 向所述待測試設備發送所述操作指令,使所述待測試應用程序的顯示界面跳轉。
            2.如權利要求1所述的應用程序的測試方法,其特征在于,所述識別所述顯示界面圖片,獲得所述顯示界面圖片相應的操作指令,具體包括: 根據圖片識別算法,判斷預先生成的層次結構圖中是否存在與所述顯示界面圖片相似的控件視圖;所述層次結構圖為具有跳轉關系的各個顯示界面的控件視圖; 若所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖,則根據所述控件視圖中的控件,獲得所述顯示界面圖片相應的操作指令; 若所述層次結構圖中不存在與所述顯示界面圖片相似的控件視圖,則查詢預先建立的彈窗庫,獲得與所述顯示界面圖片相似的彈窗特征圖;所述彈窗庫為存儲各個彈窗特征圖及其處理邏輯的數據庫; 根據所述彈窗特征圖的處理邏輯,獲得所述顯示界面圖片相應的操作指令。
            3.如權利要求2所述的應用程序的測試方法,其特征在于,所述控件視圖包括控件的位置、圖片和類型; 所述若所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖,則根據所述控件視圖中的控件,獲得所述顯示界面圖片相應的操作指令,具體包括: 若所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖,則根據所述控件視圖中控件的位置和圖片,識別出所述顯示界面圖片中的控件; 根據所述控件視圖中控件的類型,獲得觸發所述顯示界面圖片中的控件的操作指令。
            4.如權利要求2或3所述的應用程序的測試方法,其特征在于,在所述向待測試設備發送啟動指令,使所述待測試設備運行待測試應用程序之前,還包括: 接收客戶端發送的所述待測試應用程序的圖片素材;所述圖片素材包括顯示界面圖片素材和控件圖片素材; 根據所述控件圖片素材,識別出每個顯示界面圖片素材上控件的位置、圖片和類型; 將每個顯示界面圖片素材轉換為每個顯示界面的控件視圖; 向運行設備發送啟動指令,使所述運行設備運行所述待測試應用程序; 根據所述待測試應用程序運行時顯示界面的跳轉關系,建立各個顯示界面的控件視圖的跳轉關系,獲得具有跳轉關系的控件視圖;所述具有跳轉關系的控件視圖即為層次結構圖。
            5.如權利要求1所述的應用程序的測試方法,其特征在于,在所述向待測試設備發送啟動指令,使所述待測試設備運行待測試應用程序之前,還包括: 接收客戶端發送的待測試應用程序的安裝包,以及待測試設備列表; 向所述待測試設備列表中的待測試設備發送所述安裝包,使所述待測試設備安裝所述待測試應用程序。
            6.如權利要求1所述的應用程序的測試方法,其特征在于,所述應用程序的測試方法還包括: 實時獲取所述待測試設備的性能數據; 在所述待測試應用程序運行結束時,根據獲取的所述顯示界面圖片和所述性能數據,生成測試報告; 將所述測試報告發送給客戶端。
            7.—種應用程序的測試設備,其特征在于,包括: 第一啟動模塊,用于向待測試設備發送啟動指令,使所述待測試設備運行待測試應用程序; 顯示界面圖片獲取模塊,用于循環獲取所述待測試應用程序的顯示界面的圖片; 顯示界面圖片識別模塊,用于識別所述顯示界面圖片,獲得所述顯示界面圖片相應的操作指令;以及, 操作指令發送模塊,用于向所述待測試設備發送所述操作指令,使所述待測試應用程序的顯示界面跳轉。
            8.如權利要求7所述的應用程序的測試設備,其特征在于,所述顯示界面圖片識別模塊具體包括: 判斷單元,用于根據圖片識別算法,判斷預先生成的層次結構圖中是否存在與所述顯示界面圖片相似的控件視圖;所述層次結構圖為具有跳轉關系的各個顯示界面的控件視圖; 第一操作指令獲取單元,用于在所述判斷單元判定所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖時,根據所述控件視圖中的控件,獲得所述顯示界面圖片相應的操作指令; 彈窗特征圖獲取單元,用于在所述層次結構圖中不存在與所述顯示界面圖片相似的控件視圖時,查詢預先建立的彈窗庫,獲得與所述顯示界面圖片相似的彈窗特征圖;所述彈窗庫為存儲各個彈窗特征圖及其處理邏輯的數據庫;以及, 第二操作指令獲取單元,用于根據所述彈窗特征圖的處理邏輯,獲得所述顯示界面圖片相應的操作指令。
            9.如權利要求8所述的應用程序的測試設備,其特征在于,所述控件視圖包括控件的位置、圖片和類型; 所述第一操作指令獲取單元具體包括: 控件識別子單元,用于在所述判斷單元判定所述層次結構圖中存在與所述顯示界面圖片相似的控件視圖時,根據所述控件視圖中控件的位置和圖片,識別出所述顯示界面圖片中的控件;以及, 操作指令獲取子單元,用于根據所述控件視圖中控件的類型,獲得觸發所述顯示界面圖片中的控件的操作指令。
            10.如權利要求8或9所述的應用程序的測試設備,其特征在于,所述應用程序的測試設備還包括: 第一接收模塊,用于接收客戶端發送的所述待測試應用程序的圖片素材;所述圖片素材包括顯示界面圖片素材和控件圖片素材; 控件識別模塊,用于根據所述控件圖片素材,識別出每個顯示界面圖片素材上控件的位置、圖片和類型; 轉換模塊,用于將每個顯示界面圖片素材轉換為每個顯示界面的控件視圖; 第二啟動模塊,用于向運行設備發送啟動指令,使所述運行設備運行所述待測試應用程序;以及, 層次結構圖獲取模塊,用于根據所述待測試應用程序運行時顯示界面的跳轉關系,建立各個顯示界面的控件視圖的跳轉關系,獲得具有跳轉關系的控件視圖;所述具有跳轉關系的控件視圖即為層次結構圖。
            11.如權利要求7所述的應用程序的測試設備,其特征在于,所述應用程序的測試設備還包括: 第二接收模塊,用于接收客戶端發送的待測試應用程序的安裝包,以及待測試設備列表;以及, 安裝包發送模塊,用于向所述待測試設備列表中的待測試設備發送所述安裝包,使所述待測試設備安裝所述待測試應用程序。
            12.如權利要求7所述的應用程序的測試設備,其特征在于,所述應用程序的測試設備還包括: 性能數據獲取模塊,用于實時獲取所述待測試設備的性能數據; 測試報告生成模塊,用于在所述待測試應用程序運行結束時,根據獲取的所述顯示界面圖片和所述性能數據,生成測試報告;以及, 測試報告發送模塊,用于將所述測試報告發送給客戶端。
            13.—種應用程序的測試系統,其特征在于,包括客戶端、測試設備和待測試設備; 所述測試設備是如權利要求7至12中任一項所述的應用程序的測試設備。
            【文檔編號】G06F11/36GK104484273SQ201410805289
            【公開日】2015年4月1日 申請日期:2014年12月19日 優先權日:2014年12月19日
            【發明者】翟煦 申請人:廣州博冠信息科技有限公司
            網友詢問留言 已有0條留言
            • 還沒有人留言評論。精彩留言會獲得點贊!
            1
            婷婷六月激情在线综合激情,亚洲国产大片,久久中文字幕综合婷婷,精品久久久久久中文字幕,亚洲一区二区三区高清不卡,99国产精品热久久久久久夜夜嗨 ,欧美日韩亚洲综合在线一区二区,99国产精品电影,伊人精品线视天天综合,精品伊人久久久大香线蕉欧美
            亚洲精品1区 国产成人一级 91精品国产欧美一区二区 亚洲精品乱码久久久久久下载 国产精品久久久久久久伊一 九色国产 国产精品九九视频 伊人久久成人爱综合网 欧美日韩亚洲区久久综合 欧美日本一道免费一区三区 夜夜爽一区二区三区精品 欧美日韩高清一区二区三区 国产成人av在线 国产精品对白交换绿帽视频 国产视频亚洲 国产在线欧美精品 国产精品综合网 国产日韩精品欧美一区色 国产日韩精品欧美一区喷 欧美日韩在线观看区一二 国产区精品 欧美视频日韩视频 中文字幕天天躁日日躁狠狠躁97 视频一二三区 欧美高清在线精品一区二区不卡 国产精品揄拍一区二区久久 99久久综合狠狠综合久久aⅴ 亚洲乱码视频在线观看 日韩在线第二页 亚洲精品无码专区在线播放 成人亚洲网站www在线观看 欧美三级一区二区 99久久精品免费看国产高清 91麻豆国产在线观看 最新日韩欧美不卡一二三区 成人在线观看不卡 日韩国产在线 在线亚洲精品 亚洲午夜久久久久中文字幕 国产精品成人久久久久久久 精品国产一区二区在线观看 欧美精品国产一区二区三区 中文在线播放 亚洲第一页在线视频 国产午夜精品福利久久 九色国产 精品国产九九 国产永久视频 久久精品人人做人人综合试看 国产一区二区三区免费观看 亚洲精品国产电影 9999热视频 国产精品资源在线 麻豆久久婷婷国产综合五月 国产精品免费一级在线观看 亚洲国产一区二区三区青草影视 中文在线播放 国产成人综合在线 国产在线观看色 国产亚洲三级 国产片一区二区三区 久久99精品久久久久久牛牛影视 亚洲欧美日韩国产 四虎永久免费网站 国产一毛片 国产精品视频在 九九热在线精品 99精品福利视频 色婷婷色99国产综合精品 97成人精品视频在线播放 精品久久久久久中文字幕 亚洲欧美一区二区三区孕妇 亚洲欧美成人网 日韩高清在线二区 国产尤物在线观看 在线不卡一区二区 91网站在线看 韩国精品福利一区二区 欧美日韩国产成人精品 99热精品久久 国产精品免费视频一区 高清视频一区 精品九九久久 欧美日韩在线观看免费 91欧美激情一区二区三区成人 99福利视频 亚洲国产精品91 久热国产在线 精品久久久久久中文字幕女 国产精品久久久久久久久99热 成人自拍视频网 国产精品视频久久久久久 久久影院国产 国产玖玖在线观看 99精品在线免费 亚洲欧美一区二区三区导航 久久久久久久综合 国产欧美日韩精品高清二区综合区 国产精品视频自拍 亚洲一级片免费 久久久久久九九 国产欧美自拍视频 视频一区二区在线观看 欧美日韩一区二区三区久久 中文在线亚洲 伊人热人久久中文字幕 日韩欧美亚洲国产一区二区三区 欧美亚洲国产成人高清在线 欧美日韩国产码高清综合人成 国产性大片免费播放网站 亚洲午夜综合网 91精品久久一区二区三区 国产无套在线播放 国产精品视频网站 国产成人亚洲精品老王 91在线网站 国产视频97 欧美黑人欧美精品刺激 国产一区二区三区免费在线视频 久久久国产精品免费看 99re6久精品国产首页 久久精品91 国产成人一级 国产成人精品曰本亚洲 日本福利在线观看 伊人成综合网 久久综合一本 国产综合久久久久久 久久精品成人免费看 久久福利 91精品国产91久久久久久麻豆 亚洲精品成人在线 亚洲伊人久久精品 欧美日本二区 国产永久视频 国产一区二 一区二区福利 国产一毛片 亚洲精品1区 毛片一区二区三区 伊人久久大香线蕉综合影 国产欧美在线观看一区 亚洲国产欧洲综合997久久 国产一区二区免费视频 国产91精品对白露脸全集观看 久久亚洲国产伦理 欧美成人伊人久久综合网 亚洲性久久久影院 久久99国产精一区二区三区! 91精品国产欧美一区二区 欧美日韩亚洲区久久综合 日韩精品一二三区 久久久夜色精品国产噜噜 国产在线精品福利91香蕉 久久久久久久亚洲精品 97se色综合一区二区二区 91国语精品自产拍在线观看性色 91久久国产综合精品女同我 日韩中文字幕a 国产成人亚洲日本精品 久久国产精品-国产精品 久久国产经典视频 久久国产精品伦理 亚洲第一页在线视频 国产精品久久久久三级 日韩毛片网 久久免费高清视频 麻豆国产在线观看一区二区 91麻豆国产福利在线观看 国产成人精品男人的天堂538 一区二区三区中文字幕 免费在线视频一区 欧美日韩国产成人精品 国产综合网站 国产资源免费观看 亚洲精品亚洲人成在线播放 精品久久久久久中文字幕专区 亚洲人成人毛片无遮挡 国产一起色一起爱 国产香蕉精品视频在 九九热免费观看 日韩亚洲欧美一区 九九热精品在线观看 精品久久久久久中文字幕专区 亚洲欧美自拍偷拍 国产精品每日更新 久久久久国产一级毛片高清板 久久天天躁狠狠躁夜夜中文字幕 久久精品片 日韩在线毛片 国产成人精品本亚洲 国产成人精品一区二区三区 九九热在线观看 国产r级在线观看 国产欧美日韩精品高清二区综合区 韩国电影一区二区 国产精品毛片va一区二区三区 五月婷婷伊人网 久久一区二区三区免费 一本色道久久综合狠狠躁篇 亚洲综合色站 国产尤物在线观看 亚洲一区亚洲二区 免费在线视频一区 欧洲精品视频在线观看 日韩中文字幕a 中文字幕日本在线mv视频精品 91精品在线免费视频 精品国产免费人成在线观看 精品a级片 中文字幕日本在线mv视频精品 日韩在线精品视频 婷婷丁香色 91精品国产高清久久久久 国产成人精品日本亚洲直接 五月综合视频 欧美日韩在线亚洲国产人 精液呈暗黄色 亚洲乱码一区 久久精品中文字幕不卡一二区 亚洲天堂精品在线 激情婷婷综合 国产免费久久精品久久久 国产精品亚洲二区在线 久久免费播放视频 五月婷婷丁香综合 在线亚洲欧美日韩 久久免费精品高清麻豆 精品久久久久久中文字幕 亚洲一区网站 国产精品福利社 日韩中文字幕免费 亚洲综合丝袜 91精品在线播放 国产精品18 亚洲日日夜夜 伊人久久大香线蕉综合影 亚洲精品中文字幕乱码影院 亚洲一区二区黄色 亚洲第一页在线视频 一区二区在线观看视频 国产成人福利精品视频 亚洲高清二区 国内成人免费视频 精品亚洲性xxx久久久 国产精品合集一区二区三区 97av免费视频 国产一起色一起爱 国产区久久 国产资源免费观看 99精品视频免费 国产成人一级 国产精品九九免费视频 欧美91精品久久久久网免费 99热国产免费 久久精品色 98精品国产综合久久 久久精品播放 中文字幕视频免费 国产欧美日韩一区二区三区在线 精品久久蜜桃 国产小视频精品 一本色道久久综合狠狠躁篇 91在线免费观看 亚洲精品区 伊人成综合网 伊人热人久久中文字幕 伊人黄色片 99国产精品热久久久久久夜夜嗨 久久免费精品视频 亚洲一区二区三区高清不卡 久久久久国产一级毛片高清板 国产片一区二区三区 久久狠狠干 99久久婷婷国产综合精品电影 国产99区 国产精品成人久久久久 久久狠狠干 青青国产在线观看 亚洲高清国产拍精品影院 国产精品一区二区av 九九热在线免费视频 伊人久久国产 国产精品久久久久久久久久一区 在线观看免费视频一区 国产精品自在在线午夜区app 国产精品综合色区在线观看 国产毛片久久久久久国产毛片 97国产免费全部免费观看 国产精品每日更新 国产尤物视频在线 九九视频这里只有精品99 一本一道久久a久久精品综合 久久综合给会久久狠狠狠 国产成人精品男人的天堂538 欧美一区二区高清 毛片一区二区三区 国产欧美日韩在线观看一区二区三区 在线国产二区 欧美不卡网 91在线精品中文字幕 在线国产福利 国内精品91久久久久 91亚洲福利 日韩欧美国产中文字幕 91久久精品国产性色也91久久 亚洲性久久久影院 欧美精品1区 国产热re99久久6国产精品 九九热免费观看 国产精品欧美日韩 久久久久国产一级毛片高清板 久久国产经典视频 日韩欧美亚洲国产一区二区三区 欧美亚洲综合另类在线观看 国产精品自在在线午夜区app 97中文字幕在线观看 视频一二三区 精品国产一区在线观看 国产欧美日韩在线一区二区不卡 欧美一区二三区 伊人成人在线观看 国内精品91久久久久 97在线亚洲 国产在线不卡一区 久久久全免费全集一级全黄片 国产精品v欧美精品∨日韩 亚洲毛片网站 在线不卡一区二区 99re热在线视频 久久激情网 国产毛片一区二区三区精品 久久亚洲综合色 中文字幕视频免费 国产视频亚洲 婷婷伊人久久 国产一区二区免费播放 久久99国产精品成人欧美 99国产在线视频 国产成人免费视频精品一区二区 国产不卡一区二区三区免费视 国产码欧美日韩高清综合一区 久久精品国产主播一区二区 国产一区电影 久久精品国产夜色 国产精品国产三级国产 日韩一区二区三区在线 久久97久久97精品免视看 久久国产免费一区二区三区 伊人久久大香线蕉综合电影网 99re6久精品国产首页 久久激情网 亚洲成人高清在线 国产精品网址 国产成人精品男人的天堂538 香蕉国产综合久久猫咪 国产专区中文字幕 91麻豆精品国产高清在线 久久国产经典视频 国产精品成人va在线观看 国产精品爱啪在线线免费观看 日本精品久久久久久久久免费 亚洲综合一区二区三区 久久五月网 精品国产网红福利在线观看 久久综合亚洲伊人色 亚洲国产精品久久久久久网站 在线日韩国产 99国产精品热久久久久久夜夜嗨 国产综合精品在线 国产区福利 精品亚洲综合久久中文字幕 国产制服丝袜在线 毛片在线播放网站 在线观看免费视频一区 国产精品久久久精品三级 亚洲国产电影在线观看 最新日韩欧美不卡一二三区 狠狠综合久久综合鬼色 日本精品1在线区 国产日韩一区二区三区在线播放 欧美日韩精品在线播放 亚洲欧美日韩国产一区二区三区精品 久久综合久久网 婷婷六月激情在线综合激情 亚洲乱码一区 国产专区91 97av视频在线观看 精品久久久久久中文字幕 久久五月视频 国产成人福利精品视频 国产精品网址 中文字幕视频在线 精品一区二区三区免费视频 伊人手机在线视频 亚洲精品中文字幕乱码 国产在线视频www色 色噜噜国产精品视频一区二区 精品亚洲成a人在线观看 国产香蕉尹人综合在线 成人免费一区二区三区在线观看 国产不卡一区二区三区免费视 欧美精品久久天天躁 国产专区中文字幕 久久精品国产免费中文 久久精品国产免费一区 久久无码精品一区二区三区 国产欧美另类久久久精品免费 欧美精品久久天天躁 亚洲精品在线视频 国产视频91在线 91精品福利一区二区三区野战 日韩中文字幕免费 国产精品99一区二区三区 欧美成人高清性色生活 国产精品系列在线观看 亚洲国产福利精品一区二区 国产成人在线小视频 国产精品久久久久免费 99re热在线视频 久久久久久久综合 一区二区国产在线播放 成人国产在线视频 亚洲精品乱码久久久久 欧美日韩一区二区综合 精品久久久久免费极品大片 中文字幕视频二区 激情粉嫩精品国产尤物 国产成人精品一区二区视频 久久精品中文字幕首页 亚洲高清在线 国产精品亚洲一区二区三区 伊人久久艹 中文在线亚洲 国产精品一区二区在线播放 国产精品九九免费视频 亚洲二区在线播放 亚洲狠狠婷婷综合久久久久网站 亚洲欧美日韩网站 日韩成人精品 亚洲国产一区二区三区青草影视 91精品国产福利在线观看 国产精品久久久久久久久99热 国产一区二区精品尤物 久碰香蕉精品视频在线观看 亚洲日日夜夜 在线不卡一区二区 国产午夜亚洲精品 九九热在线视频观看这里只有精品 伊人手机在线视频 91免费国产精品 日韩欧美中字 91精品国产91久久久久 国产全黄三级播放 视频一区二区三区免费观看 国产开裆丝袜高跟在线观看 国产成人欧美 激情综合丝袜美女一区二区 国产成人亚洲综合无 欧美精品一区二区三区免费观看 欧美亚洲国产日韩 日韩亚州 国产欧美日韩精品高清二区综合区 亚洲午夜国产片在线观看 精品久久久久久中文字幕 欧美精品1区 久久伊人久久亚洲综合 亚洲欧美日韩精品 国产成人精品久久亚洲高清不卡 久久福利影视 国产精品99精品久久免费 久久久久免费精品视频 国产日产亚洲精品 亚洲国产午夜电影在线入口 精品无码一区在线观看 午夜国产精品视频 亚洲一级片免费 伊人久久大香线蕉综合影 国产精品久久影院 久碰香蕉精品视频在线观看 www.欧美精品 在线小视频国产 亚洲国产天堂久久综合图区 欧美一区二区三区不卡 日韩美女福利视频 九九精品免视频国产成人 不卡国产00高中生在线视频 亚洲第一页在线视频 欧美日韩在线播放成人 99re视频这里只有精品 国产精品91在线 精品乱码一区二区三区在线 国产区久久 91麻豆精品国产自产在线观看一区 日韩精品成人在线 九九热在线观看 国产精品久久不卡日韩美女 欧美一区二区三区综合色视频 欧美精品免费一区欧美久久优播 国产精品网址 国产专区中文字幕 国产精品欧美亚洲韩国日本久久 日韩美香港a一级毛片 久久精品123 欧美一区二区三区免费看 99r在线视频 亚洲精品国产字幕久久vr 国产综合激情在线亚洲第一页 91免费国产精品 日韩免费小视频 亚洲国产精品综合一区在线 国产亚洲第一伦理第一区 在线亚洲精品 国产精品一区二区制服丝袜 国产在线成人精品 九九精品免视频国产成人 亚洲国产网 欧美日韩亚洲一区二区三区在线观看 在线亚洲精品 欧美一区二区三区高清视频 国产成人精品男人的天堂538 欧美日韩在线观看区一二 亚洲欧美一区二区久久 久久精品中文字幕首页 日本高清www午夜视频 久久精品国产免费 久久999精品 亚洲国产精品欧美综合 88国产精品视频一区二区三区 91久久偷偷做嫩草影院免费看 国产精品夜色视频一区二区 欧美日韩导航 国产成人啪精品午夜在线播放 一区二区视频在线免费观看 99久久精品国产自免费 精液呈暗黄色 久久99国产精品 日本精品久久久久久久久免费 精品国产97在线观看 99re视频这里只有精品 国产视频91在线 999av视频 亚洲美女视频一区二区三区 久久97久久97精品免视看 亚洲国产成人久久三区 99久久亚洲国产高清观看 日韩毛片在线视频 综合激情在线 91福利一区二区在线观看 一区二区视频在线免费观看 激情粉嫩精品国产尤物 国产成人精品曰本亚洲78 国产成人精品本亚洲 国产精品成人免费视频 国产成人啪精品视频免费软件 久久精品国产亚洲妲己影院 国产精品成人久久久久久久 久久大香线蕉综合爱 欧美一区二区三区高清视频 99热国产免费 在线观看欧美国产 91精品视频在线播放 国产精品福利社 欧美精品一区二区三区免费观看 国产一区二区免费视频 国产午夜精品一区二区 精品视频在线观看97 91精品福利久久久 国产一区福利 国产综合激情在线亚洲第一页 国产精品久久久久久久久久久不卡 九色国产 在线日韩国产 黄网在线观看 亚洲一区小说区中文字幕 中文字幕丝袜 日本二区在线观看 日本国产一区在线观看 欧美日韩一区二区三区久久 欧美精品亚洲精品日韩专 国产日产亚洲精品 久久综合九色综合欧美播 亚洲国产欧美无圣光一区 欧美视频区 亚洲乱码视频在线观看 久久无码精品一区二区三区 九九热精品免费视频 久久99精品久久久久久牛牛影视 国产精品成久久久久三级 国产一区福利 午夜国产精品视频 日本二区在线观看 99久久网站 国产亚洲天堂 精品国产一区二区三区不卡 亚洲国产日韩在线一区 国产成人综合在线观看网站 久久免费高清视频 欧美在线导航 午夜精品久久久久久99热7777 欧美久久综合网 国产小视频精品 国产尤物在线观看 亚洲国产精品综合一区在线 欧美一区二区三区不卡视频 欧美黑人欧美精品刺激 日本福利在线观看 久久国产偷 国产手机精品一区二区 国产热re99久久6国产精品 国产高清啪啪 欧美亚洲国产成人高清在线 国产在线第三页 亚洲综合一区二区三区 99r在线视频 99精品久久久久久久婷婷 国产精品乱码免费一区二区 国产在线精品福利91香蕉 国产尤物视频在线 五月婷婷亚洲 中文字幕久久综合伊人 亚洲精品一级毛片 99国产精品电影 在线视频第一页 久久99国产精品成人欧美 国产白白视频在线观看2 成人精品一区二区www 亚洲成人网在线观看 麻豆91在线视频 色综合合久久天天综合绕视看 久久精品国产免费高清 国产不卡一区二区三区免费视 欧美国产中文 99精品欧美 九九在线精品 国产中文字幕在线免费观看 国产一区中文字幕在线观看 国产成人一级 国产精品一区二区制服丝袜 国产一起色一起爱 亚洲精品成人在线 亚洲欧美精品在线 国产欧美自拍视频 99精品久久久久久久婷婷 久99视频 国产热re99久久6国产精品 视频一区亚洲 国产精品视频分类 国产精品成在线观看 99re6久精品国产首页 亚洲在成人网在线看 亚洲国产日韩在线一区 久久国产三级 日韩国产欧美 欧美在线一区二区三区 国产精品美女一级在线观看 成人午夜免费福利视频 亚洲天堂精品在线 91精品国产手机 欧美日韩视频在线播放 狠狠综合久久综合鬼色 九一色视频 青青视频国产 亚洲欧美自拍一区 中文字幕天天躁日日躁狠狠躁97 日韩免费大片 996热视频 伊人成综合网 亚洲天堂欧美 日韩精品亚洲人成在线观看 久久综合给会久久狠狠狠 日韩精品亚洲人成在线观看 日韩国产欧美 亚洲成aⅴ人片在线影院八 亚洲精品1区 99久久精品免费 国产精品高清在线观看 国产精品久久久免费视频 在线亚洲欧美日韩 91在线看视频 国产精品96久久久久久久 欧美日韩国产成人精品 91在线亚洲 热久久亚洲 国产精品美女免费视频观看 日韩在线毛片 亚洲永久免费视频 九九免费在线视频 亚洲一区网站 日本高清二区视频久二区 精品国产美女福利在线 伊人久久艹 国产精品久久久久三级 欧美成人精品第一区二区三区 99久久精品国产自免费 在线观看日韩一区 国产中文字幕一区 成人免费午夜视频 欧美日韩另类在线 久久99国产精品成人欧美 色婷婷中文网 久久天天躁夜夜躁狠狠躁2020 欧美成人伊人久久综合网 国产精品福利资源在线 国产伦精品一区二区三区高清 国产精品亚洲综合色区韩国 亚洲一区欧美日韩 色综合视频 国语自产精品视频在线区 国产高清a 成人国内精品久久久久影 国产在线精品香蕉综合网一区 国产不卡在线看 国产成人精品精品欧美 国产欧美日韩综合精品一区二区三区 韩国电影一区二区 国产在线视频www色 91中文字幕在线一区 国产人成午夜免视频网站 亚洲综合一区二区三区 色综合视频一区二区观看 久久五月网 九九热精品在线观看 国产一区二区三区国产精品 99久热re在线精品996热视频 亚洲国产网 在线视频亚洲一区 日韩字幕一中文在线综合 国产高清一级毛片在线不卡 精品国产色在线 国产高清视频一区二区 精品日本久久久久久久久久 亚洲国产午夜精品乱码 成人免费国产gav视频在线 日韩欧美一区二区在线观看 欧美曰批人成在线观看 韩国电影一区二区 99re这里只有精品6 日韩精品一区二区三区视频 99re6久精品国产首页 亚洲欧美一区二区三区导航 欧美色图一区二区三区 午夜精品视频在线观看 欧美激情在线观看一区二区三区 亚洲热在线 成人国产精品一区二区网站 亚洲一级毛片在线播放 亚洲一区小说区中文字幕 亚洲午夜久久久久影院 国产自产v一区二区三区c 国产精品视频免费 久久调教视频 国产成人91激情在线播放 国产精品欧美亚洲韩国日本久久 久久亚洲日本不卡一区二区 91中文字幕网 成人国产在线视频 国产视频91在线 欧美成人精品第一区二区三区 国产精品福利在线 久久综合九色综合精品 欧美一区二区三区精品 久久国产综合尤物免费观看 久久99青青久久99久久 日韩精品免费 久久国产精品999 91亚洲视频在线观看 国产精品igao视频 色综合区 在线亚洲欧国产精品专区 国产一区二区三区在线观看视频 亚洲精品成人在线 一区二区国产在线播放 中文在线亚洲 亚洲精品第一国产综合野 国产一区二区精品久久 一区二区三区四区精品视频 99热精品久久 中文字幕视频二区 国产成人精品男人的天堂538 99精品影视 美女福利视频一区二区 久久午夜夜伦伦鲁鲁片 综合久久久久久久综合网 国产精品国产欧美综合一区 国产99视频在线观看 国产亚洲女在线精品 婷婷影院在线综合免费视频 国产亚洲3p一区二区三区 91成人爽a毛片一区二区 亚洲一区二区高清 国产欧美亚洲精品第二区首页 欧美日韩导航 亚洲高清二区 欧美激情观看一区二区久久 日韩毛片在线播放 亚洲欧美日韩高清中文在线 亚洲日本在线播放 国产精品一区二区制服丝袜 精品国产一区二区三区不卡 国产不卡在线看 国产欧美网站 四虎永久在线观看视频精品 国产黄色片在线观看 夜夜综合 一本色道久久综合狠狠躁篇 欧美亚洲综合另类在线观看 国产91在线看 伊人久久国产 欧美一区二区在线观看免费网站 国产精品久久久久三级 久久福利 日韩中文字幕a 亚洲午夜久久久久影院 91在线高清视频 国产亚洲一区二区三区啪 久久人精品 国产精品亚洲午夜一区二区三区 综合久久久久久 久久伊人一区二区三区四区 国产综合久久久久久 日韩一区精品视频在线看 国产精品日韩欧美制服 日本精品1在线区 99re视频 无码av免费一区二区三区试看 国产视频1区 日韩欧美中文字幕一区 日本高清中文字幕一区二区三区a 亚洲国产欧美无圣光一区 国产在线视频一区二区三区 欧美国产第一页 在线亚洲欧美日韩 日韩中文字幕第一页 在线不卡一区二区 伊人久久青青 国产精品一区二区在线播放 www.五月婷婷 麻豆久久婷婷国产综合五月 亚洲精品区 久久国产欧美另类久久久 99在线视频免费 伊人久久中文字幕久久cm 久久精品成人免费看 久久这里只有精品首页 88国产精品视频一区二区三区 中文字幕日本在线mv视频精品 国产在线精品成人一区二区三区 伊人精品线视天天综合 亚洲一区二区黄色 国产尤物视频在线 亚洲精品99久久久久中文字幕 国产一区二区三区免费观看 伊人久久大香线蕉综合电影网 国产成人精品区在线观看 日本精品一区二区三区视频 日韩高清在线二区 久久免费播放视频 一区二区成人国产精品 国产精品免费精品自在线观看 亚洲精品视频二区 麻豆国产精品有码在线观看 精品日本一区二区 亚洲欧洲久久 久久中文字幕综合婷婷 中文字幕视频在线 国产成人精品综合在线观看 91精品国产91久久久久福利 精液呈暗黄色 香蕉国产综合久久猫咪 国产专区精品 亚洲精品无码不卡 国产永久视频 亚洲成a人片在线播放观看国产 一区二区国产在线播放 亚洲一区二区黄色 欧美日韩在线观看视频 亚洲精品另类 久久国产综合尤物免费观看 国产一区二区三区国产精品 高清视频一区 国产精品igao视频 国产精品资源在线 久久综合精品国产一区二区三区 www.五月婷婷 精品色综合 99热国产免费 麻豆福利影院 亚洲伊人久久大香线蕉苏妲己 久久电影院久久国产 久久精品伊人 在线日韩理论午夜中文电影 亚洲国产欧洲综合997久久 伊人国产精品 久草国产精品 欧美一区精品二区三区 亚洲成人高清在线 91免费国产精品 日韩精品福利在线 国产一线在线观看 国产不卡在线看 久久99青青久久99久久 亚洲精品亚洲人成在线播放 99久久免费看国产精品 国产日本在线观看 青草国产在线视频 麻豆久久婷婷国产综合五月 国产中文字幕一区 91久久精品国产性色也91久久 国产一区a 国产欧美日韩成人 国产亚洲女在线精品 一区二区美女 中文字幕在线2021一区 在线小视频国产 久久这里只有精品首页 国产在线第三页 欧美日韩中文字幕 在线亚洲+欧美+日本专区 精品国产一区二区三区不卡 久久这里精品 欧美在线va在线播放 精液呈暗黄色 91精品国产手机 91在线免费播放 欧美视频亚洲色图 欧美国产日韩精品 日韩高清不卡在线 精品视频免费观看 欧美日韩一区二区三区四区 国产欧美亚洲精品第二区首页 亚洲韩精品欧美一区二区三区 国产精品视频免费 在线精品小视频 久久午夜夜伦伦鲁鲁片 国产无套在线播放 久热这里只精品99re8久 欧美久久久久 久久香蕉国产线看观看精品蕉 国产成人精品男人的天堂538 亚洲人成网站色7799在线观看 日韩在线第二页 一本色道久久综合狠狠躁篇 国产一区二区三区不卡在线观看 亚洲乱码在线 在线观看欧美国产 久久福利青草精品资源站免费 国产玖玖在线观看 在线亚洲精品 亚洲成aⅴ人在线观看 精品91在线 欧美一区二三区 日韩中文字幕视频在线 日本成人一区二区 日韩免费专区 国内精品在线观看视频 久久国产综合尤物免费观看 国产精品系列在线观看 一本一道久久a久久精品综合 亚洲免费播放 久久精品国产免费 久久人精品 亚洲毛片网站 亚洲成a人一区二区三区 韩国福利一区二区三区高清视频 亚洲精品天堂在线 一区二区三区中文字幕 亚洲国产色婷婷精品综合在线观看 亚洲国产成人久久笫一页 999国产视频 国产精品香港三级在线电影 欧美日韩一区二区三区四区 日韩国产欧美 国产精品99一区二区三区 午夜国产精品理论片久久影院 亚洲精品中文字幕麻豆 亚洲国产高清视频 久久免费手机视频 日韩a在线观看 五月婷婷亚洲 亚洲精品中文字幕麻豆 中文字幕丝袜 www国产精品 亚洲天堂精品在线 亚洲乱码一区 国产日韩欧美三级 久久999精品 伊人热人久久中文字幕 久热国产在线视频 国产欧美日韩在线观看一区二区三区 国产一二三区在线 日韩国产欧美 91精品国产91久久久久 亚洲一区小说区中文字幕 精品一区二区免费视频 国产精品视频免费 国产精品亚洲综合色区韩国 亚洲国产精品成人午夜在线观看 欧美国产日韩精品 中文字幕精品一区二区精品