運(yùn)用蟻群算法優(yōu)化多QoS網(wǎng)格工作流的方法

            文檔序號(hào):7684597閱讀:236來(lái)源:國(guó)知局
            專利名稱:運(yùn)用蟻群算法優(yōu)化多QoS網(wǎng)格工作流的方法
            技術(shù)領(lǐng)域
            本發(fā)明涉及網(wǎng)格計(jì)算以及智能算法兩大領(lǐng)域,主要涉及一種運(yùn)用蟻群算法優(yōu)化多QoS網(wǎng)格工作流的方法。 技術(shù)背景網(wǎng)格計(jì)算可以支持大范圍的并行和分布式計(jì)算,被認(rèn)為是有潛力的下一代 計(jì)算平臺(tái)。與電網(wǎng)(electrical power grid)類似,計(jì)算網(wǎng)格使得分布于不同地理 位置的各種不同計(jì)算資源的共享、選擇和協(xié)同運(yùn)作成為可能。網(wǎng)格技術(shù)可以滿 足科學(xué)和商業(yè)上的計(jì)算需求,并且提供了解決計(jì)算密集型問(wèn)題的可行方法。在網(wǎng)格中處理的計(jì)算應(yīng)用通常稱為工作流。在網(wǎng)格的環(huán)境中,工作流定義 是 一個(gè)完成復(fù)雜目標(biāo)的特定的任務(wù)序列。在網(wǎng)格計(jì)算中,如何調(diào)度工作流以 達(dá)到更高的性能是一個(gè)十分重要的問(wèn)題。通常,工作流以有向無(wú)環(huán)圖(DAG) 的形式給出,其中節(jié)點(diǎn)表示單個(gè)任務(wù)而有向的箭線表示任務(wù)間的優(yōu)先關(guān)系。任 務(wù)調(diào)度程序需要把任務(wù)分配給不同的分布式計(jì)算站點(diǎn)進(jìn)行處理,以滿足用戶對(duì) 服務(wù)質(zhì)量(QoS)的要求并優(yōu)化計(jì)算性能??偟膩?lái)說(shuō),在DAG中的調(diào)度問(wèn)題是 NP-完全的,因此工作流調(diào)度是一個(gè)十分復(fù)雜的問(wèn)題。對(duì)網(wǎng)格中的工作流調(diào)度問(wèn)題的現(xiàn)有研究大部分集中于只帶有一個(gè)QoS參數(shù) (總工期)的問(wèn)題。其中,最常用的方法是基于不同啟發(fā)式信息的動(dòng)態(tài)或靜態(tài) 的表調(diào)度算法,例如OLB算法,MET算法,MCT算法,Min-min算法,Max-min 算法,Duplex算法,Sufferage算法和HEFT算法等。這些算法的基本思想是根 據(jù)啟發(fā)式信息來(lái)依次調(diào)度任務(wù)。此外,還有一些亞啟發(fā)式(meta-heuristic)算法, 例如遺傳算法(GA),模擬退火(SA)和遺傳模擬退火(GSA)等。總的來(lái)說(shuō), 亞啟發(fā)式算法具有更好的性能,但卻需要更長(zhǎng)的計(jì)算時(shí)間。最近,開(kāi)放式網(wǎng)格服務(wù)體系結(jié)構(gòu)(OGSA)的提出使得網(wǎng)格計(jì)算技術(shù)得到了 加強(qiáng)。OGSA將網(wǎng)絡(luò)服務(wù)引入到網(wǎng)格模型中,并且迅速成為了占主導(dǎo)地位的技 術(shù)。在新的結(jié)構(gòu)體系下,以上給出的傳統(tǒng)調(diào)度算法已經(jīng)不再適用。這是因?yàn)?第一,OGSA的一大趨勢(shì)是出現(xiàn)各種不同的提供計(jì)算資源的網(wǎng)格服務(wù)工作站(GSPs)。因此,任務(wù)的執(zhí)行已不再受限于計(jì)算資源的數(shù)量。在新的體系下可以 由不同工作站提供的一系列服務(wù)進(jìn)程來(lái)完成。于是,調(diào)度程序就需要將每個(gè)任 務(wù)和其相應(yīng)的服務(wù)進(jìn)程聯(lián)系起來(lái)。第二,總工期已不再是用戶關(guān)心的唯一 QoS 參數(shù)。相應(yīng)的,其它的QoS參數(shù),例如費(fèi)用,可靠性和安全性等,在網(wǎng)格性能 中顯得越來(lái)越重要。因此,調(diào)度程序需要考慮不同QoS參數(shù)之間的平衡,以滿 足用戶的需求并優(yōu)化整個(gè)應(yīng)用程序的性能。為了解決這一更困難的調(diào)度問(wèn)題,Yuan等提出了一個(gè)動(dòng)態(tài)格點(diǎn)調(diào)度算法以 考慮費(fèi)用和時(shí)間之間的平衡[l]。但是,這種算法只能進(jìn)行工期的優(yōu)化而忽略了 用戶對(duì)其它參數(shù)的選擇。Yu等提出了一種稱為Deadline-MDP的工作流調(diào)度算 法[2]。在這種算法中,工作流中的任務(wù)被劃分為不同的分支,每個(gè)分支被賦予 一個(gè)子期限。然后運(yùn)用Markov決策過(guò)程(MDP)尋找每個(gè)分支帶有最小費(fèi)用而且 滿足時(shí)間約束的調(diào)度,但是該算法仍然只能用于解決帶期限約束的費(fèi)用優(yōu)化問(wèn) 題。隨著網(wǎng)格計(jì)算的不斷發(fā)展,工作流問(wèn)題的規(guī)模越變?cè)酱?。而用戶也?huì)根據(jù) 自身的需求為工作流應(yīng)用程序設(shè)定一系列的QoS約束。因此, 一個(gè)好的調(diào)度程 序應(yīng)該有能力找出最優(yōu)的調(diào)度方案,滿足用戶定義的約束條件并最優(yōu)化用戶需 求的QoS參數(shù)。為了解決這個(gè)復(fù)雜的調(diào)度問(wèn)題,本文提出了一種運(yùn)用蟻群算法 優(yōu)化多QoS網(wǎng)格工作流的方法。蟻群算法是一種由Dorigo提出的亞啟發(fā)式算法。 它通過(guò)模仿真實(shí)螞蟻的覓食行為而工作,并且成功地運(yùn)用到了各種復(fù)雜組合問(wèn) 題的優(yōu)化中。蟻群算法用于工作流調(diào)度問(wèn)題的主要優(yōu)勢(shì)在于它可以充分利用基 于進(jìn)程的啟發(fā)式信息。 參考文獻(xiàn)[1] Y. Yuan, X. Li, and Q. Wang: Time-cost trade-off dynamic scheduling algorithm for workflows in grids. Proceedings of the 10th International Conference on Computer Supported Cooperative Work in Design, 2006.[2] J. Yu, R. Buyya, and C.K. Tham: Cost-based scheduling of scientific workflow applications on utility grids. Proceedings of the 1st International Conference on e-Science and Grid Computing (e隱Science, 05), pp. 140-147, 2005.

            發(fā)明內(nèi)容
            本發(fā)明主要集中于解決大規(guī)模的多QoS工作流調(diào)度問(wèn)題。在建立的模型中主要考慮三個(gè)基本的QoS參數(shù)可靠性、時(shí)間和費(fèi)用。這些參數(shù)在網(wǎng)格應(yīng)用中是十分重要的,而它們的特性也各不相同。用戶在遞交工作流應(yīng)用程序的時(shí)候會(huì)指定對(duì)QoS的要求可靠性的下界,工作期限和費(fèi)用預(yù)算等。此外,用戶還可能需要優(yōu)化其中一個(gè)QoS參數(shù)。因此,提出的方法的目標(biāo)是找出一個(gè)可行的 調(diào)度方法,滿足用戶定義的所有QoS參數(shù),并且對(duì)其中一個(gè)進(jìn)行優(yōu)化。為了完 成這一任務(wù),設(shè)計(jì)了七種基于進(jìn)程的啟發(fā)式信息用于引導(dǎo)螞蟻的搜索行為。在 發(fā)明的算法中,運(yùn)用自適應(yīng)的方法處理這些啟發(fā)式信息,在構(gòu)造解的時(shí)候讓螞 蟻根據(jù)信息素來(lái)選擇啟發(fā)式信息。算法的具體步驟包括-(1)初始化參數(shù)。對(duì)于不同的QoS需求,信息素的初始值^根據(jù)以下公式給出<formula>formula see original document page 7</formula>可靠性優(yōu)化 工期優(yōu)化 費(fèi)用優(yōu)化<formula>formula see original document page 7</formula>其中,w/"J e/z'flM/^表示所有服務(wù)進(jìn)程的最低可靠性,而wax—i e//^///0^100。 是估計(jì)的工作流最小工期,而w欲—M"fespaw是估計(jì)的最大工期。 這兩個(gè)估計(jì)值可以通過(guò)將每個(gè)任務(wù)映射到帶有最小(或者最大)執(zhí)行時(shí)間的服 務(wù)進(jìn)程中而計(jì)算得出。同樣的,mZ^O^和max—a^是工作流估計(jì)的最小費(fèi)用 和最大費(fèi)用。它們可以通過(guò)將每個(gè)任務(wù)映射到帶有最小(或者最大)執(zhí)行費(fèi)用 的服務(wù)進(jìn)程中而計(jì)算得出。(2) 初始化所有的螞蟻。在每一次循環(huán)開(kāi)始時(shí),每只螞蟻都會(huì)隨機(jī)選擇一 個(gè)構(gòu)造方向(前向或者后向)。前向螞蟻會(huì)根據(jù)給定的優(yōu)先關(guān)系在工作流網(wǎng)絡(luò)中 構(gòu)造解。相反的,后向螞蟻將從結(jié)束節(jié)點(diǎn)開(kāi)始搜索,并將所有的箭線反向。從 兩種方向開(kāi)始的調(diào)度策略使算法可以搜索更多不同的解。此外,每只螞蟻都要 建立一個(gè)符合優(yōu)先約束的任務(wù)序列。并基于此任務(wù)序列將任務(wù)依次映射到服務(wù)進(jìn)程中。任務(wù)序列是通過(guò)隨機(jī)選擇滿足優(yōu)先約束的任務(wù)而建立的。(3) 每只螞蟻首先基于信息素運(yùn)用輪盤賭的選擇方法選擇一種啟發(fā)式信 息。當(dāng)螞蟻選擇了一種啟發(fā)式信息后,例如啟發(fā)式信息A,在該啟發(fā)式信息上 的信息素將進(jìn)行局部的更新其中,戶e(O,l)是一個(gè)參數(shù)。(4) 選定了一種啟發(fā)式信息后,螞蟻就可以開(kāi)始構(gòu)造調(diào)度問(wèn)題的解。在構(gòu) 造解的每一步中,螞蟻會(huì)基于信息素和啟發(fā)式信息選擇一個(gè)服務(wù)進(jìn)程,并將任務(wù)隊(duì)列中第一個(gè)未映射的任務(wù)映射到這個(gè)服務(wù)進(jìn)程中。選擇將任務(wù)r,映射到s/ 的方法為''一l執(zhí)行輪盤賭, 否則在這種選擇方法中,生成一個(gè)隨機(jī)數(shù)《e
            ,并將其與一參數(shù)《。e
            比較。 如果《S&,那么螞蟻就會(huì)將7;映射到含有最大r^^"值的服務(wù)進(jìn)程中。否則, 將運(yùn)用輪盤賭的選擇方法,也就是選擇《的可能性與^^^大小成正比。其中、和^.分別表示r,映射到進(jìn)程s/的信息素和啟發(fā)式信息,p^i是決定信息素和啟發(fā)式信息相對(duì)影響的參數(shù)。當(dāng)螞蟻將一個(gè)任務(wù)7}映射到一個(gè)服務(wù)進(jìn)程<后,馬 上執(zhí)行局部信息素的更新。局部信息素更新的方法由以下公式給出在每一次循環(huán)中,每只螞蟻循環(huán)使用w次這種選擇方式,將w個(gè)任務(wù)映射到w 個(gè)服務(wù)進(jìn)程中從而形成一個(gè)完整的調(diào)度解。(5) 當(dāng)所有螞蟻都完成解的構(gòu)造后,對(duì)每個(gè)調(diào)度解進(jìn)行評(píng)價(jià)。(6) 執(zhí)行全局信息素的更新。只有帶有最高評(píng)價(jià)值的全局最優(yōu)解才會(huì)進(jìn)行 全局信息素的更新。假設(shè)全局最優(yōu)解為^(^,…,K。),全局更新策略給定如下r汰.=(1 _/ ) t汰.+ yC score, / = 1,2,",,"(7) 如果達(dá)到結(jié)束條件則結(jié)束程序,否則回到步驟(2)。 發(fā)明的方法具有以下優(yōu)點(diǎn)1、考慮了三種QoS參數(shù),除了滿足QoS的約束外,算法還可以對(duì)其中一個(gè)QoS參數(shù)進(jìn)行優(yōu)化。2、充分利用了蟻群算法的特點(diǎn),設(shè)計(jì)了七種啟發(fā)式信息用于引導(dǎo)螞蟻的搜索,使得搜索效率得到了有效的提高。


            圖l工作流應(yīng)用過(guò)程示意2螞蟻構(gòu)造一個(gè)完整解的過(guò)程示意3算法整體流程圖
            具體實(shí)施例方式以下結(jié)合附圖,進(jìn)一步對(duì)發(fā)明的方法進(jìn)行描述。在科學(xué)或商業(yè)上的很多計(jì)算密集型的問(wèn)題都可以被歸為工作流問(wèn)題。工作 流應(yīng)用的過(guò)程如圖1所示。用戶首先會(huì)在抽象描述層面給出工作流應(yīng)用的抽象 語(yǔ)言。然后網(wǎng)格系統(tǒng)就需要選擇并且設(shè)置應(yīng)用組件以組成抽象的工作流,在抽 象的工作流中制定任務(wù)執(zhí)行的次序。在OSGA中,工作流中的任務(wù)是由工作站 提供的網(wǎng)絡(luò)服務(wù)進(jìn)程執(zhí)行的。由不同工作站提供的不同進(jìn)程可以用于執(zhí)行同一 個(gè)任務(wù),并帶有不同的QoS參數(shù)。于是,第三個(gè)層面的任務(wù)就是將抽象工作流 中的任務(wù)映射到服務(wù)進(jìn)程中,以生成具體的工作流。例如在圖1中,在抽象工作流中的每一個(gè)任務(wù)7;.都對(duì)應(yīng)一系列的服務(wù)進(jìn)程s-w,《,…,d。 sU2,…,^在長(zhǎng)方形&中以圓表示。m,.是任務(wù)l所對(duì)應(yīng)的服務(wù)進(jìn)程的總數(shù)。用灰色圓圈表 示的服務(wù)進(jìn)程是最后選定的執(zhí)行該任務(wù)的進(jìn)程,這樣便構(gòu)成了具體的工作流。 最后,在應(yīng)用層面,不同的工作站可能會(huì)用不同的結(jié)構(gòu)來(lái)執(zhí)行同樣的程序。在 這種模型中,將抽象的工作流映射為具體的工作流是網(wǎng)格應(yīng)用中最關(guān)鍵的一步。 本發(fā)明的目標(biāo)就是提出一個(gè)有效的算法來(lái)為大規(guī)模的工作流應(yīng)用問(wèn)題生成具體 的工作流。直觀地來(lái)說(shuō),工作流調(diào)度算法的作用是將抽象工作流中的所有任務(wù)映射到 服務(wù)進(jìn)程,以生成最優(yōu)的具體工作流,并且滿足用戶定義的QoS約束和最大化 用戶需求的性能。在抽象工作流的DAG, C 氣F3)模型中,令"為工作流中任務(wù)的數(shù)量。節(jié)點(diǎn)的集合F^,r2,…,:u對(duì)應(yīng)工作流中的任務(wù)。箭線的集合^表示任 務(wù)之間的優(yōu)先次序關(guān)系。 一條箭線用(7;,7;)表示,其中7;稱為7}的父任務(wù),而7}稱為7}的子任務(wù)。在正常情況下, 一個(gè)子任務(wù)只能在其所有父任務(wù)都完成后才能開(kāi)始執(zhí)行。r'的父任務(wù)的集合用iVe《7;)表示,而7}的子任務(wù)的集合則用 iSi/cc(7))表不。每個(gè)任務(wù)7X1 &、")都有一個(gè)執(zhí)行范圍《=^a2,…,《'},其中<(1《_/《m,)表示由工作站提供的一個(gè)服務(wù)進(jìn)程,附i表示r,可用的服務(wù)進(jìn)程的數(shù)量。 一個(gè)服務(wù)進(jìn)程的屬性可以用一組四個(gè)變量來(lái)表示(s/.g,《,,s/.f, s/")。其中,s/.g表示《所屬的工作站是《.g。 <.r, ^^和(c分別代表^的可靠性、執(zhí)行時(shí)間和 費(fèi)用。優(yōu)先約束已經(jīng)包含在DAG模型中,它指定了一個(gè)可行解必須滿足的任務(wù)執(zhí) 行次序。此外,在工作流模型中還存在一些用戶定義的QoS約束。由于在本文中考 慮了三種QoS參數(shù),因此對(duì)應(yīng)有三種類型的QoS約束(1) 可靠性約束生成的具體工作流的可靠性不能小于一個(gè)用戶定義的變量 h>m'&We//aM//y。換句話說(shuō),給定一個(gè)調(diào)度方案K(《,…,iU (《表示7;由《' 執(zhí)行),如果/0^//^///^是該調(diào)度的可靠性,調(diào)度K滿足可靠性約束的條件為(2) 總工期約束工作流總的執(zhí)行時(shí)間不能大于用戶定義的一個(gè)變量£>^^// "換句話說(shuō),如 果K.mafew""是i:的總執(zhí)行時(shí)間,那么《應(yīng)該滿足(3) 費(fèi)用約束對(duì)于給定的調(diào)度方案《(《,…,i^),《的總費(fèi)用(《.②W)不能大于用戶定 義的一個(gè)變量5"^ a。也就是<formula>formula see original document page 10</formula> 除了約束條件,用戶也會(huì)定義^一i優(yōu)化的QoS參數(shù)。(1)可靠性優(yōu)化用戶傾向于優(yōu)化應(yīng)用程序的可靠性。在這種情況下,用戶往往會(huì)設(shè)置工期 和費(fèi)用的約束,而調(diào)度算法的目標(biāo)則是尋找一個(gè)滿足所有約束條件的調(diào)度方案尺,并最大化K.reliability的值。(2) 工期優(yōu)化用戶傾向于優(yōu)化應(yīng)用程序的工期。在這種情況下,用戶往往會(huì)設(shè)置可靠性 和費(fèi)用的約束,而調(diào)度算法的目標(biāo)則是尋找一個(gè)滿足所有約束條件的調(diào)度方案AT,并最小化A:.附"A:ej;7fl"的值。(3) 費(fèi)用優(yōu)化-用戶傾向于優(yōu)化應(yīng)用程序的費(fèi)用。在這種情況下,用戶往往會(huì)設(shè)置可靠性 和工期的約束,而調(diào)度算法的目標(biāo)則是尋找一個(gè)滿足所有約束條件的調(diào)度方案 《,并最小化《.co^的值。以下詳細(xì)描述用于解決這種調(diào)度問(wèn)題的蟻群算法1.信息素和啟發(fā)式信息的定義對(duì)于蟻群算法而言,信息素和啟發(fā)式信息是最重要的因素。由于調(diào)度問(wèn)題是要將抽象工作流中的所有任務(wù)映射到服務(wù)進(jìn)程中,因此設(shè)任務(wù)r,映射到進(jìn)程的信息素為、,啟發(fā)式信息為% 。在算法開(kāi)始時(shí),設(shè)所有的信息素為一個(gè)初始值r。,也就是此外,由于在考慮的模型中存在多個(gè)QoS參數(shù),因此算法中設(shè)計(jì)了七種啟 發(fā)式信息0(1) 啟發(fā)式信息A:可靠性貪婪(RG)RG啟發(fā)式信息使得人工螞蟻更傾向于選擇具有更高可靠性的進(jìn)程。假設(shè)螞 蟻使用的是RG啟發(fā)式信息,那么r,映射到s/的啟發(fā)式信息(用A(^表示)為—prT —s/.r — mz>t—re/z.aM!化.+1其中,mz' —= minls/Sw,. {sZ.r} , wox_re"a6z'〃(y,. 一 maxls)SWi。根據(jù)公 式, 一個(gè)具有更高可靠性的進(jìn)程將會(huì)帶有更高的啟發(fā)式信息。同時(shí),該公式也 保證了^.e(0,1]。(2) 啟發(fā)式信息B:時(shí)間貪婪(TG)TG啟發(fā)式信息使得人工螞蟻更傾向于選擇執(zhí)行時(shí)間更短的進(jìn)程。假設(shè)螞蟻使用的是TG啟發(fā)式信息,那么r,映射到s/的啟發(fā)式信息(用rGy表示)為<formula>formula see original document page 12</formula>其中,附z'"一ft'me,. — min化乂^,, /wox一f/附e,. — max化^"。豐艮據(jù)公式,~"個(gè)執(zhí) 行時(shí)間更短的進(jìn)程將會(huì)帶有更高的啟發(fā)式信息,并且^ e (O,l]。(3) 啟發(fā)式信息C:費(fèi)用貪婪(CG)CG啟發(fā)式信息使得人工螞蟻更傾向于選擇所需費(fèi)用更少的進(jìn)程。假設(shè)螞蟻使用的是CG啟發(fā)式信息,那么T,映射到s/的啟發(fā)式信息(用C&表示)為<formula>formula see original document page 12</formula>其中,Am'"_coW,. = miriw納 .f} , = maxls;— {■$/ 。根據(jù)公式, 一個(gè)所需費(fèi)用更少的進(jìn)程將會(huì)帶有更高的啟發(fā)式信息,并且^ e(O,l]。(4) 啟發(fā)式信息D:建議的期限(SD)在QoS參數(shù)之間總會(huì)存在取舍平衡。例如, 一個(gè)執(zhí)行時(shí)間短的進(jìn)程可能需 要較高的費(fèi)用而且可靠性較低??紤]到這樣的平衡以及期限的約束,SD啟發(fā)式 信息使得人工螞蟻更傾向于選擇剛好按時(shí)完成的服務(wù)進(jìn)程。為了達(dá)到這一目標(biāo), 基于用戶定義的期限,給在抽象工作流中的每個(gè)任務(wù)賦予一個(gè)建議的期限。為了計(jì)算每個(gè)任務(wù)的SD啟發(fā)式信息,首先需要計(jì)算每個(gè)任務(wù)的最早開(kāi)始時(shí) 間以及后向最早開(kāi)始時(shí)間。任務(wù)r,的最早開(kāi)始時(shí)間(五S7p:將每個(gè)任務(wù)r,映射到執(zhí)行時(shí)間最短的服務(wù) 進(jìn)程中,五sr,等于在這種映射下任務(wù)r,的開(kāi)始時(shí)間。此外,在這種映射方法下的工作流執(zhí)行總工期可以被看作估計(jì)的最小總工期,并用m/"—Afofe^a"表示。任務(wù)r,的后向最早開(kāi)始時(shí)間(5五sr,):通過(guò)將DAG中的開(kāi)始節(jié)點(diǎn)作為結(jié)束節(jié)點(diǎn),將結(jié)束節(jié)點(diǎn)作為開(kāi)始節(jié)點(diǎn),并將所有的箭線的方向反轉(zhuǎn),就可以將DAG轉(zhuǎn)換為一個(gè)后向網(wǎng)絡(luò)。對(duì)于每個(gè)任務(wù)r,,在后向網(wǎng)絡(luò)中的五sr,值就是5五S7;。 基于以上兩個(gè)時(shí)間,就可以計(jì)算任務(wù)r,的平均最短執(zhí)行時(shí)間. (min (。W5T》-ES ) + (min 順)朋57}—丑M7;) avg _ —=-^-^-^-根據(jù)"v^ym'"」z'me,計(jì)算的方法為ovg 一聰w 一附一 MaA:^paw假設(shè)螞蟻使用的是SD啟發(fā)式信息,那么K映射到s/的啟發(fā)式信息為 max —— //w^ — | , liSD; -附/" _ f/膨;|} — (■$■/ J — SD,.) <formula>formula see original document page 13</formula>根據(jù)公式, 一個(gè)執(zhí)行時(shí)間更接近SA的進(jìn)程將會(huì)帶有更高的啟發(fā)式信息,并且"一(o,i]。(5)啟發(fā)式信息e:建議的預(yù)算(sb)與sd啟發(fā)式信息相似,sb啟發(fā)式信息使得螞蟻更傾向于選擇剛好達(dá)到預(yù) 算費(fèi)用的服務(wù)進(jìn)程。為了達(dá)到這一目標(biāo),基于用戶定義的總預(yù)算,給在抽象工 作流中的每個(gè)任務(wù)賦予一個(gè)建議的預(yù)算。通過(guò)將所有任務(wù)映射到最低費(fèi)用的服務(wù)進(jìn)程中,得到整個(gè)工作流的最小費(fèi) 用wz'"—CoW。也就是,m/w_CoW=iw/n_m^ 。任務(wù)f的建議預(yù)算5^如下計(jì)<formula>formula see original document page 13</formula>假設(shè)螞蟻使用的是sb啟發(fā)式信息,那么將r,映射到s/的啟發(fā)式信息為max {|—cas(.—竭| , -附/w _ c。sf; |} — (s/ .c —) +1 max{jmax_co$f,. — 一 aw/w—cos^|} +1根據(jù)公式,費(fèi)用更接近S5,的服務(wù)進(jìn)程將會(huì)帶有更高的啟發(fā)式信息,而且(6)啟發(fā)式信息F:時(shí)間/費(fèi)用(TC)TC啟發(fā)式信息綜合考慮一個(gè)服務(wù)進(jìn)程的時(shí)間和費(fèi)用因素。它綜合了 TG和 CG兩種啟發(fā)式信息。假設(shè)螞蟻使用的是TC啟發(fā)式信息,那么任務(wù)7)映射到^ 的啟發(fā)式信息為根據(jù)公式,具有更短的執(zhí)行時(shí)間以及更低費(fèi)用的服務(wù)進(jìn)程將會(huì)帶有更高的啟發(fā)式信息,而且^.e(0,1]。(7)啟發(fā)式信息G:總體性能(OP)在OP啟發(fā)式信息中綜合考慮了所有的QoS參數(shù)的作用(包括可靠性、時(shí) 間和費(fèi)用)。它將TG、 CG和RG啟發(fā)式信息結(jié)合在一起。假設(shè)螞蟻使用的是 OP啟發(fā)式信息,那么任務(wù)r,映射到s/的啟發(fā)式信息為根據(jù)公式,具有更短的執(zhí)行時(shí)間,更低費(fèi)用以及更高可靠性的服務(wù)進(jìn)程將 會(huì)帶有更高的啟發(fā)式信息,而且^e(0,1]?;诓煌挠脩粜枨螅惴▽?huì)運(yùn)用不同的啟發(fā)式信息。1)如果目標(biāo)是優(yōu) 化可靠性,那么算法就會(huì)運(yùn)用所有的七種啟發(fā)式信息。其中,RG和OP啟發(fā)式 信息用于尋找高可靠性的服務(wù)進(jìn)程,而其它啟發(fā)式信息則用于保證費(fèi)用和工期 滿足QoS約束。2)如果目標(biāo)是優(yōu)化工期,那么就只使用啟發(fā)式信息TG、 CG、 SB和TC。 TG和TC啟發(fā)式信息用于尋找最短執(zhí)行時(shí)間的服務(wù)進(jìn)程,而CG和 SB則用于搜索滿足費(fèi)用約束的服務(wù)進(jìn)程。在這種情況下,可靠性的約束條件可 以通過(guò)不選擇低于可靠性約束的服務(wù)進(jìn)程而達(dá)到,因此不需要RG和OP啟發(fā)式 信息。由于算法的目標(biāo)是最小化工期,所以也不需要SD啟發(fā)式信息。3)如果 目標(biāo)是優(yōu)化費(fèi)用,基于類似的理由,所需的啟發(fā)式信息為TG、 CG、 SD和TC。運(yùn)用自適應(yīng)的方法在算法中管理這七種啟發(fā)式信息。在人工螞蟻每次開(kāi)始 構(gòu)造解之前,首先會(huì)基于信息素對(duì)本次構(gòu)造所用的啟發(fā)式信息進(jìn)行選擇。其中, 對(duì)應(yīng)啟發(fā)式信息A的信息素用^表示,對(duì)應(yīng)啟發(fā)式信息B的信息素用^表示, 以此類推。在算法開(kāi)始時(shí),所有需要的啟發(fā)式信息上的信息素將會(huì)被設(shè)置為初 值r。,而其它不用的啟發(fā)式信息的信息素則設(shè)為O。 2.解的構(gòu)造在算法的每一個(gè)循環(huán)中,都會(huì)運(yùn)用一組個(gè)數(shù)為M的螞蟻來(lái)構(gòu)造問(wèn)題解。解 的構(gòu)造程序可以分為以下兩步。 (1)螞蟻的初始化在每一次循環(huán)開(kāi)始時(shí),每只螞蟻都會(huì)隨機(jī)選擇一個(gè)構(gòu)造方向(前向或者后 向)。前向螞蟻會(huì)根據(jù)給定的優(yōu)先關(guān)系在工作流網(wǎng)絡(luò)中構(gòu)造解。相反的,后向螞蟻將從DAG的結(jié)束節(jié)點(diǎn)開(kāi)始搜索,并將所有的箭線反向,正如計(jì)算后向最早開(kāi) 始時(shí)間那樣。從兩種方向開(kāi)始的調(diào)度策略使算法可以搜索更多不同的解。此外,每只螞蟻都要建立一個(gè)符合優(yōu)先約束的任務(wù)序列。并基于此任務(wù)序 列將任務(wù)依次映射到服務(wù)進(jìn)程中。為了方便起見(jiàn),將前向螞蟻的任務(wù)序列表示為C, ;,7;,…,^,U,后向螞蟻的任務(wù)序列表示為(。,i;,7;,…,n,)。任務(wù)序列是通過(guò)隨機(jī)選擇滿足優(yōu)先約束的任務(wù)而建立的。(2)構(gòu)造調(diào)度解在這一步中,M只螞蟻分別構(gòu)造問(wèn)題的A/個(gè)解。螞蟻構(gòu)造一個(gè)完整解的過(guò) 程如圖2所示。在開(kāi)始時(shí),每個(gè)螞蟻會(huì)基于信息素運(yùn)用輪盤賭的選擇方法選擇 一種啟發(fā)式信息。也就是,選擇啟發(fā)式信息A的概率和信息素r,所占的比例成 正比。選定了一種啟發(fā)式信息后,螞蟻就開(kāi)始構(gòu)造調(diào)度問(wèn)題的解了。在構(gòu)造解的 每一步中,螞蟻會(huì)基于信息素和啟發(fā)式信息選擇一個(gè)服務(wù)進(jìn)程,并將任務(wù)隊(duì)列 中第一個(gè)未映射的任務(wù)映射到這個(gè)服務(wù)進(jìn)程中。選擇將任務(wù)K映射到S/的方法 為S、Jargmax,r,,《^。 '—i執(zhí)行輪盤賭, 否則在這種選擇方法中,生成一個(gè)隨機(jī)數(shù)ge[O,l],并將其與一參數(shù)&e
            比 較。如果《S&,那么螞蟻就會(huì)將7;映射到含有最大r^^')值的服務(wù)進(jìn)程中。否 則,將運(yùn)用輪盤賭的選擇方法,也就是選擇《的可能性與^.^^大小成正比。其 中,^kl是決定信息素和啟發(fā)式信息相對(duì)影響的參數(shù)。在每一次循環(huán)中,每只螞蟻循環(huán)使用iV次這種選擇方式,將JV個(gè)任務(wù)映射 到W個(gè)服務(wù)進(jìn)程中從而形成一個(gè)完整的調(diào)度解。 3.信息素的處理 (1)信息素初始化在本文中,對(duì)于不同的QoS需求,信息素的初始值r。根據(jù)以下公式給出<formula>formula see original document page 16</formula>,可靠性優(yōu)化 <formula>formula see original document page 16</formula> 工期優(yōu)化<formula>formula see original document page 16</formula> 費(fèi)用優(yōu)化
            其中,i ^'aZn7辦表示所有服務(wù)進(jìn)程的最低可靠性,而wax—i e//a^7z'^100。 m/w_Afo^^p"w是估計(jì)的工作流最小工期,而maxjkfa^spa77是估計(jì)的最大工期。 這兩個(gè)估計(jì)值可以通過(guò)將每個(gè)任務(wù)映射到帶有最小(或者最大)執(zhí)行時(shí)間的服 務(wù)進(jìn)程中而計(jì)算得出。同樣的,a^和mox一0^是工作流估計(jì)的最小費(fèi)用 和最大費(fèi)用。它們可以通過(guò)將每個(gè)任務(wù)映射到帶有最小(或者最大)執(zhí)行費(fèi)用 的服務(wù)進(jìn)程中而計(jì)算得出。
            (2) 局部信息素更新在發(fā)明的方法中,當(dāng)螞蟻將一個(gè)任務(wù)T,映射到一個(gè)服務(wù)進(jìn)程^后,馬上執(zhí) 行局部信息素的更新。局部信息素更新的方法由以下公式給出<formula>formula see original document page 16</formula>其中,/ e(0,l)是一個(gè)參數(shù)。由于r。同時(shí)也是信息素的最低值,因此局部信息素 更新的作用是降低、的取值以增加算法的多樣性。啟發(fā)式信息上的信息素同樣也要進(jìn)行局部信息素的更新。當(dāng)螞蟻選擇了一 種啟發(fā)式信息后,例如啟發(fā)式信息A,在該啟發(fā)式信息上的信息素將根據(jù)下式 進(jìn)行改變<formula>formula see original document page 16</formula>(3) 全局信息素更新當(dāng)所有螞蟻都構(gòu)造完解后執(zhí)行全局信息素的更新。算法首先會(huì)對(duì)當(dāng)代循環(huán) 中的所有解進(jìn)行比較。調(diào)度解《的質(zhì)量可以根據(jù)以下三個(gè)式子計(jì)算得出。對(duì)于 可靠性優(yōu)化問(wèn)題,《的評(píng)價(jià)值為<formula>formula see original document page 17</formula>maA:es7 朋 max—如果coW > 5wJgef禾口 > £>ea^//"e0.5 + 0.5-+-=-^,女口果cosf《5wd^ef禾卩> Deac "we0.1 + -如果^T.cayf > 5wdge/禾口 AT.waAras/ ""《Z)ea^///"e其中,《的評(píng)價(jià)值由兩部分組成第一是滿足QoS約束的評(píng)價(jià)值,第二是需要優(yōu)化的QoS參數(shù)的質(zhì)量的評(píng)價(jià)值。每一部分評(píng)價(jià)的取值區(qū)間均為(O,l],因此 的取值區(qū)間為(0,2]。如果尺滿足了所有的QoS約束,對(duì)應(yīng)QoS約束的 評(píng)價(jià)值就會(huì)設(shè)為1,而用戶需要優(yōu)化的QoS參數(shù)的評(píng)價(jià)值則根據(jù)《的可靠性進(jìn) 行設(shè)定。另一方面,如果《不能滿足所有的QoS約束,QoS約束的評(píng)價(jià)值就會(huì) 根據(jù)滿足約束的程度進(jìn)行設(shè)定,而用戶需要優(yōu)化的QoS參數(shù)的評(píng)價(jià)值則會(huì)被設(shè) 定為最小值。類似的,在工期優(yōu)化中,《的評(píng)價(jià)值為1 +如果K.cosf >如果〖.<%^ 2 5wc/gef對(duì)于費(fèi)用優(yōu)化,X的評(píng)價(jià)值為<formula>formula see original document page 17</formula>如果AT.maAes戸"《Z)ecw 〃we只有帶有最高評(píng)價(jià)值的全局最優(yōu)解才會(huì)進(jìn)行全局信息素的更新。假設(shè)全局 最優(yōu)解為《(《,■■ ,《 ),全局更新策略給定如下<formula>formula see original document page 17</formula>整個(gè)算法的流程圖如圖3所示。根據(jù)用戶定義的QoS約束和需求優(yōu)化大規(guī)模網(wǎng)格工作流的算法十分少見(jiàn), 在已有的文獻(xiàn)中,只有Yu等提出的Deadline-MDP算法能用于類似問(wèn)題的求解 中。因此,將發(fā)明的方法與Deadline-MDP算法進(jìn)行比較。要注意的是 Deadline-MDP算法只能用于解決帶期限約束的費(fèi)用優(yōu)化問(wèn)題。運(yùn)用網(wǎng)格工作流 應(yīng)用的10個(gè)例子來(lái)對(duì)這兩種方法進(jìn)行測(cè)試。其中,前3個(gè)例子是現(xiàn)實(shí)中的工作 流問(wèn)題,包括e-Economic應(yīng)用問(wèn)題、神經(jīng)科學(xué)應(yīng)用問(wèn)題和e-protein工作流問(wèn)題。 其余的例子則根據(jù)PSPLIB庫(kù)生成。由于Deadline-MDP是一種確定性算法,因 此它只能提供問(wèn)題的一個(gè)解。而提出的蟻群算法則是一種帶導(dǎo)向性的隨機(jī)算法。 為了進(jìn)行全面地比較,將發(fā)明的方法獨(dú)立運(yùn)行100次得到100個(gè)結(jié)果。在所有 的10個(gè)問(wèn)題中,蟻群算法得到的平均值均優(yōu)于Deadline-MDP得到的結(jié)果。此 外,在中或大規(guī)模問(wèn)題中(帶有30個(gè)以上任務(wù)的),即使是蟻群算法得到的最 差結(jié)果也要優(yōu)于Deadline-MDP的結(jié)果??偟膩?lái)說(shuō),蟻群算法可以降低工作流 10-20%的費(fèi)用,這證明了發(fā)明的方法是有效的。
            權(quán)利要求
            1、一種運(yùn)用蟻群算法優(yōu)化多QoS網(wǎng)格工作流的方法,其特征在于,該方法包括以下步驟(1)初始化參數(shù)。對(duì)于不同的QoS需求,信息素的初始值τ0根據(jù)以下公式給出其中,min_Reliability表示所有服務(wù)進(jìn)程的最低可靠性,而max_Reliability=100。min_Makespan是估計(jì)的工作流最小工期,而max_Makespan是估計(jì)的最大工期。這兩個(gè)估計(jì)值可以通過(guò)將每個(gè)任務(wù)映射到帶有最小(或者最大)執(zhí)行時(shí)間的服務(wù)進(jìn)程中而計(jì)算得出。同樣的,min_Cost和max_Cost是工作流估計(jì)的最小費(fèi)用和最大費(fèi)用。它們可以通過(guò)將每個(gè)任務(wù)映射到帶有最小(或者最大)執(zhí)行費(fèi)用的服務(wù)進(jìn)程中而計(jì)算得出。(2)初始化所有的螞蟻。在每一次循環(huán)開(kāi)始時(shí),每只螞蟻都會(huì)隨機(jī)選擇一個(gè)構(gòu)造方向(前向或者后向)。前向螞蟻會(huì)根據(jù)給定的優(yōu)先關(guān)系在工作流網(wǎng)絡(luò)中構(gòu)造解。相反的,后向螞蟻將從結(jié)束節(jié)點(diǎn)開(kāi)始搜索,并將所有的箭線反向。此外,每只螞蟻都要建立一個(gè)符合優(yōu)先約束的任務(wù)序列。并基于此任務(wù)序列將任務(wù)依次映射到服務(wù)進(jìn)程中。任務(wù)序列是通過(guò)隨機(jī)選擇滿足優(yōu)先約束的任務(wù)而建立的。(3)每只螞蟻首先基于信息素運(yùn)用輪盤賭的選擇方法選擇一種啟發(fā)式信息。當(dāng)螞蟻選擇了一種啟發(fā)式信息后,例如啟發(fā)式信息A,在該啟發(fā)式信息上的信息素將進(jìn)行局部的更新τA=(1-ρ)·τA+ρ·τ0其中,ρ∈(0,1)是一個(gè)參數(shù)。(4)選定了一種啟發(fā)式信息后,螞蟻就可以開(kāi)始構(gòu)造調(diào)度問(wèn)題的解。在構(gòu)造解的每一步中,螞蟻會(huì)基于信息素和啟發(fā)式信息選擇一個(gè)服務(wù)進(jìn)程,并將任務(wù)隊(duì)列中第一個(gè)未映射的任務(wù)映射到這個(gè)服務(wù)進(jìn)程中。選擇將任務(wù)Ti映射到Sij的方法為在這種選擇方法中,生成一個(gè)隨機(jī)數(shù)q∈
            ,并將其與一參數(shù)q0∈
            比較。如果q≤q0,那么螞蟻就會(huì)將Ti映射到含有最大τijβηij值的服務(wù)進(jìn)程中。否則,將運(yùn)用輪盤賭的選擇方法,也就是選擇Sij的可能性與τijβηij大小成正比。其中τij和ηij分別表示Ti映射到進(jìn)程sij的信息素和啟發(fā)式信息,β≥1是決定信息素和啟發(fā)式信息相對(duì)影響的參數(shù)。當(dāng)螞蟻將一個(gè)任務(wù)Ti映射到一個(gè)服務(wù)進(jìn)程sij后,馬上執(zhí)行局部信息素的更新。局部信息素更新的方法由以下公式給出 τij=(1-ρ)·τij+ρ·τ0在每一次循環(huán)中,每只螞蟻循環(huán)使用N次這種選擇方式,將N個(gè)任務(wù)映射到N個(gè)服務(wù)進(jìn)程中從而形成一個(gè)完整的調(diào)度解。(5)當(dāng)所有螞蟻都完成解的構(gòu)造后,對(duì)每個(gè)調(diào)度解進(jìn)行評(píng)價(jià)。(6)執(zhí)行全局信息素的更新。只有帶有最高評(píng)價(jià)值的全局最優(yōu)解才會(huì)進(jìn)行全局信息素的更新。假設(shè)全局最優(yōu)解為K(K1,…,Kn),全局更新策略給定如下
            全文摘要
            本發(fā)明公開(kāi)了一種運(yùn)用蟻群算法優(yōu)化多QoS網(wǎng)格工作流的方法。其中考慮了三種QoS參數(shù),該方法除了可以滿足用戶給定的QoS約束外,還可以對(duì)用戶指定的一個(gè)QoS參數(shù)進(jìn)行優(yōu)化。方法的步驟為首先,初始化螞蟻,每只螞蟻都會(huì)隨機(jī)選擇一個(gè)構(gòu)造方向,并建立一個(gè)符合優(yōu)先約束的任務(wù)序列。然后,每只螞蟻基于信息素運(yùn)用輪盤賭的選擇方法選擇一種啟發(fā)式信息,并進(jìn)行局部信息素的更新。選擇完啟發(fā)式信息后,螞蟻基于信息素和啟發(fā)式信息將所有任務(wù)隊(duì)列中的任務(wù)依次映射到服務(wù)進(jìn)程中。當(dāng)所有螞蟻都完成解的構(gòu)造后,對(duì)每個(gè)調(diào)度解進(jìn)行評(píng)價(jià),并執(zhí)行全局信息素的更新。
            文檔編號(hào)H04L29/08GK101237469SQ20081002648
            公開(kāi)日2008年8月6日 申請(qǐng)日期2008年2月27日 優(yōu)先權(quán)日2008年2月27日
            發(fā)明者軍 張, 陳偉能, 韜 黃 申請(qǐng)人:中山大學(xué)
            網(wǎng)友詢問(wèn)留言 已有0條留言
            • 還沒(méi)有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
            1
            婷婷六月激情在线综合激情,亚洲国产大片,久久中文字幕综合婷婷,精品久久久久久中文字幕,亚洲一区二区三区高清不卡,99国产精品热久久久久久夜夜嗨 ,欧美日韩亚洲综合在线一区二区,99国产精品电影,伊人精品线视天天综合,精品伊人久久久大香线蕉欧美
            亚洲精品1区 国产成人一级 91精品国产欧美一区二区 亚洲精品乱码久久久久久下载 国产精品久久久久久久伊一 九色国产 国产精品九九视频 伊人久久成人爱综合网 欧美日韩亚洲区久久综合 欧美日本一道免费一区三区 夜夜爽一区二区三区精品 欧美日韩高清一区二区三区 国产成人av在线 国产精品对白交换绿帽视频 国产视频亚洲 国产在线欧美精品 国产精品综合网 国产日韩精品欧美一区色 国产日韩精品欧美一区喷 欧美日韩在线观看区一二 国产区精品 欧美视频日韩视频 中文字幕天天躁日日躁狠狠躁97 视频一二三区 欧美高清在线精品一区二区不卡 国产精品揄拍一区二区久久 99久久综合狠狠综合久久aⅴ 亚洲乱码视频在线观看 日韩在线第二页 亚洲精品无码专区在线播放 成人亚洲网站www在线观看 欧美三级一区二区 99久久精品免费看国产高清 91麻豆国产在线观看 最新日韩欧美不卡一二三区 成人在线观看不卡 日韩国产在线 在线亚洲精品 亚洲午夜久久久久中文字幕 国产精品成人久久久久久久 精品国产一区二区在线观看 欧美精品国产一区二区三区 中文在线播放 亚洲第一页在线视频 国产午夜精品福利久久 九色国产 精品国产九九 国产永久视频 久久精品人人做人人综合试看 国产一区二区三区免费观看 亚洲精品国产电影 9999热视频 国产精品资源在线 麻豆久久婷婷国产综合五月 国产精品免费一级在线观看 亚洲国产一区二区三区青草影视 中文在线播放 国产成人综合在线 国产在线观看色 国产亚洲三级 国产片一区二区三区 久久99精品久久久久久牛牛影视 亚洲欧美日韩国产 四虎永久免费网站 国产一毛片 国产精品视频在 九九热在线精品 99精品福利视频 色婷婷色99国产综合精品 97成人精品视频在线播放 精品久久久久久中文字幕 亚洲欧美一区二区三区孕妇 亚洲欧美成人网 日韩高清在线二区 国产尤物在线观看 在线不卡一区二区 91网站在线看 韩国精品福利一区二区 欧美日韩国产成人精品 99热精品久久 国产精品免费视频一区 高清视频一区 精品九九久久 欧美日韩在线观看免费 91欧美激情一区二区三区成人 99福利视频 亚洲国产精品91 久热国产在线 精品久久久久久中文字幕女 国产精品久久久久久久久99热 成人自拍视频网 国产精品视频久久久久久 久久影院国产 国产玖玖在线观看 99精品在线免费 亚洲欧美一区二区三区导航 久久久久久久综合 国产欧美日韩精品高清二区综合区 国产精品视频自拍 亚洲一级片免费 久久久久久九九 国产欧美自拍视频 视频一区二区在线观看 欧美日韩一区二区三区久久 中文在线亚洲 伊人热人久久中文字幕 日韩欧美亚洲国产一区二区三区 欧美亚洲国产成人高清在线 欧美日韩国产码高清综合人成 国产性大片免费播放网站 亚洲午夜综合网 91精品久久一区二区三区 国产无套在线播放 国产精品视频网站 国产成人亚洲精品老王 91在线网站 国产视频97 欧美黑人欧美精品刺激 国产一区二区三区免费在线视频 久久久国产精品免费看 99re6久精品国产首页 久久精品91 国产成人一级 国产成人精品曰本亚洲 日本福利在线观看 伊人成综合网 久久综合一本 国产综合久久久久久 久久精品成人免费看 久久福利 91精品国产91久久久久久麻豆 亚洲精品成人在线 亚洲伊人久久精品 欧美日本二区 国产永久视频 国产一区二 一区二区福利 国产一毛片 亚洲精品1区 毛片一区二区三区 伊人久久大香线蕉综合影 国产欧美在线观看一区 亚洲国产欧洲综合997久久 国产一区二区免费视频 国产91精品对白露脸全集观看 久久亚洲国产伦理 欧美成人伊人久久综合网 亚洲性久久久影院 久久99国产精一区二区三区! 91精品国产欧美一区二区 欧美日韩亚洲区久久综合 日韩精品一二三区 久久久夜色精品国产噜噜 国产在线精品福利91香蕉 久久久久久久亚洲精品 97se色综合一区二区二区 91国语精品自产拍在线观看性色 91久久国产综合精品女同我 日韩中文字幕a 国产成人亚洲日本精品 久久国产精品-国产精品 久久国产经典视频 久久国产精品伦理 亚洲第一页在线视频 国产精品久久久久三级 日韩毛片网 久久免费高清视频 麻豆国产在线观看一区二区 91麻豆国产福利在线观看 国产成人精品男人的天堂538 一区二区三区中文字幕 免费在线视频一区 欧美日韩国产成人精品 国产综合网站 国产资源免费观看 亚洲精品亚洲人成在线播放 精品久久久久久中文字幕专区 亚洲人成人毛片无遮挡 国产一起色一起爱 国产香蕉精品视频在 九九热免费观看 日韩亚洲欧美一区 九九热精品在线观看 精品久久久久久中文字幕专区 亚洲欧美自拍偷拍 国产精品每日更新 久久久久国产一级毛片高清板 久久天天躁狠狠躁夜夜中文字幕 久久精品片 日韩在线毛片 国产成人精品本亚洲 国产成人精品一区二区三区 九九热在线观看 国产r级在线观看 国产欧美日韩精品高清二区综合区 韩国电影一区二区 国产精品毛片va一区二区三区 五月婷婷伊人网 久久一区二区三区免费 一本色道久久综合狠狠躁篇 亚洲综合色站 国产尤物在线观看 亚洲一区亚洲二区 免费在线视频一区 欧洲精品视频在线观看 日韩中文字幕a 中文字幕日本在线mv视频精品 91精品在线免费视频 精品国产免费人成在线观看 精品a级片 中文字幕日本在线mv视频精品 日韩在线精品视频 婷婷丁香色 91精品国产高清久久久久 国产成人精品日本亚洲直接 五月综合视频 欧美日韩在线亚洲国产人 精液呈暗黄色 亚洲乱码一区 久久精品中文字幕不卡一二区 亚洲天堂精品在线 激情婷婷综合 国产免费久久精品久久久 国产精品亚洲二区在线 久久免费播放视频 五月婷婷丁香综合 在线亚洲欧美日韩 久久免费精品高清麻豆 精品久久久久久中文字幕 亚洲一区网站 国产精品福利社 日韩中文字幕免费 亚洲综合丝袜 91精品在线播放 国产精品18 亚洲日日夜夜 伊人久久大香线蕉综合影 亚洲精品中文字幕乱码影院 亚洲一区二区黄色 亚洲第一页在线视频 一区二区在线观看视频 国产成人福利精品视频 亚洲高清二区 国内成人免费视频 精品亚洲性xxx久久久 国产精品合集一区二区三区 97av免费视频 国产一起色一起爱 国产区久久 国产资源免费观看 99精品视频免费 国产成人一级 国产精品九九免费视频 欧美91精品久久久久网免费 99热国产免费 久久精品色 98精品国产综合久久 久久精品播放 中文字幕视频免费 国产欧美日韩一区二区三区在线 精品久久蜜桃 国产小视频精品 一本色道久久综合狠狠躁篇 91在线免费观看 亚洲精品区 伊人成综合网 伊人热人久久中文字幕 伊人黄色片 99国产精品热久久久久久夜夜嗨 久久免费精品视频 亚洲一区二区三区高清不卡 久久久久国产一级毛片高清板 国产片一区二区三区 久久狠狠干 99久久婷婷国产综合精品电影 国产99区 国产精品成人久久久久 久久狠狠干 青青国产在线观看 亚洲高清国产拍精品影院 国产精品一区二区av 九九热在线免费视频 伊人久久国产 国产精品久久久久久久久久一区 在线观看免费视频一区 国产精品自在在线午夜区app 国产精品综合色区在线观看 国产毛片久久久久久国产毛片 97国产免费全部免费观看 国产精品每日更新 国产尤物视频在线 九九视频这里只有精品99 一本一道久久a久久精品综合 久久综合给会久久狠狠狠 国产成人精品男人的天堂538 欧美一区二区高清 毛片一区二区三区 国产欧美日韩在线观看一区二区三区 在线国产二区 欧美不卡网 91在线精品中文字幕 在线国产福利 国内精品91久久久久 91亚洲福利 日韩欧美国产中文字幕 91久久精品国产性色也91久久 亚洲性久久久影院 欧美精品1区 国产热re99久久6国产精品 九九热免费观看 国产精品欧美日韩 久久久久国产一级毛片高清板 久久国产经典视频 日韩欧美亚洲国产一区二区三区 欧美亚洲综合另类在线观看 国产精品自在在线午夜区app 97中文字幕在线观看 视频一二三区 精品国产一区在线观看 国产欧美日韩在线一区二区不卡 欧美一区二三区 伊人成人在线观看 国内精品91久久久久 97在线亚洲 国产在线不卡一区 久久久全免费全集一级全黄片 国产精品v欧美精品∨日韩 亚洲毛片网站 在线不卡一区二区 99re热在线视频 久久激情网 国产毛片一区二区三区精品 久久亚洲综合色 中文字幕视频免费 国产视频亚洲 婷婷伊人久久 国产一区二区免费播放 久久99国产精品成人欧美 99国产在线视频 国产成人免费视频精品一区二区 国产不卡一区二区三区免费视 国产码欧美日韩高清综合一区 久久精品国产主播一区二区 国产一区电影 久久精品国产夜色 国产精品国产三级国产 日韩一区二区三区在线 久久97久久97精品免视看 久久国产免费一区二区三区 伊人久久大香线蕉综合电影网 99re6久精品国产首页 久久激情网 亚洲成人高清在线 国产精品网址 国产成人精品男人的天堂538 香蕉国产综合久久猫咪 国产专区中文字幕 91麻豆精品国产高清在线 久久国产经典视频 国产精品成人va在线观看 国产精品爱啪在线线免费观看 日本精品久久久久久久久免费 亚洲综合一区二区三区 久久五月网 精品国产网红福利在线观看 久久综合亚洲伊人色 亚洲国产精品久久久久久网站 在线日韩国产 99国产精品热久久久久久夜夜嗨 国产综合精品在线 国产区福利 精品亚洲综合久久中文字幕 国产制服丝袜在线 毛片在线播放网站 在线观看免费视频一区 国产精品久久久精品三级 亚洲国产电影在线观看 最新日韩欧美不卡一二三区 狠狠综合久久综合鬼色 日本精品1在线区 国产日韩一区二区三区在线播放 欧美日韩精品在线播放 亚洲欧美日韩国产一区二区三区精品 久久综合久久网 婷婷六月激情在线综合激情 亚洲乱码一区 国产专区91 97av视频在线观看 精品久久久久久中文字幕 久久五月视频 国产成人福利精品视频 国产精品网址 中文字幕视频在线 精品一区二区三区免费视频 伊人手机在线视频 亚洲精品中文字幕乱码 国产在线视频www色 色噜噜国产精品视频一区二区 精品亚洲成a人在线观看 国产香蕉尹人综合在线 成人免费一区二区三区在线观看 国产不卡一区二区三区免费视 欧美精品久久天天躁 国产专区中文字幕 久久精品国产免费中文 久久精品国产免费一区 久久无码精品一区二区三区 国产欧美另类久久久精品免费 欧美精品久久天天躁 亚洲精品在线视频 国产视频91在线 91精品福利一区二区三区野战 日韩中文字幕免费 国产精品99一区二区三区 欧美成人高清性色生活 国产精品系列在线观看 亚洲国产福利精品一区二区 国产成人在线小视频 国产精品久久久久免费 99re热在线视频 久久久久久久综合 一区二区国产在线播放 成人国产在线视频 亚洲精品乱码久久久久 欧美日韩一区二区综合 精品久久久久免费极品大片 中文字幕视频二区 激情粉嫩精品国产尤物 国产成人精品一区二区视频 久久精品中文字幕首页 亚洲高清在线 国产精品亚洲一区二区三区 伊人久久艹 中文在线亚洲 国产精品一区二区在线播放 国产精品九九免费视频 亚洲二区在线播放 亚洲狠狠婷婷综合久久久久网站 亚洲欧美日韩网站 日韩成人精品 亚洲国产一区二区三区青草影视 91精品国产福利在线观看 国产精品久久久久久久久99热 国产一区二区精品尤物 久碰香蕉精品视频在线观看 亚洲日日夜夜 在线不卡一区二区 国产午夜亚洲精品 九九热在线视频观看这里只有精品 伊人手机在线视频 91免费国产精品 日韩欧美中字 91精品国产91久久久久 国产全黄三级播放 视频一区二区三区免费观看 国产开裆丝袜高跟在线观看 国产成人欧美 激情综合丝袜美女一区二区 国产成人亚洲综合无 欧美精品一区二区三区免费观看 欧美亚洲国产日韩 日韩亚州 国产欧美日韩精品高清二区综合区 亚洲午夜国产片在线观看 精品久久久久久中文字幕 欧美精品1区 久久伊人久久亚洲综合 亚洲欧美日韩精品 国产成人精品久久亚洲高清不卡 久久福利影视 国产精品99精品久久免费 久久久久免费精品视频 国产日产亚洲精品 亚洲国产午夜电影在线入口 精品无码一区在线观看 午夜国产精品视频 亚洲一级片免费 伊人久久大香线蕉综合影 国产精品久久影院 久碰香蕉精品视频在线观看 www.欧美精品 在线小视频国产 亚洲国产天堂久久综合图区 欧美一区二区三区不卡 日韩美女福利视频 九九精品免视频国产成人 不卡国产00高中生在线视频 亚洲第一页在线视频 欧美日韩在线播放成人 99re视频这里只有精品 国产精品91在线 精品乱码一区二区三区在线 国产区久久 91麻豆精品国产自产在线观看一区 日韩精品成人在线 九九热在线观看 国产精品久久不卡日韩美女 欧美一区二区三区综合色视频 欧美精品免费一区欧美久久优播 国产精品网址 国产专区中文字幕 国产精品欧美亚洲韩国日本久久 日韩美香港a一级毛片 久久精品123 欧美一区二区三区免费看 99r在线视频 亚洲精品国产字幕久久vr 国产综合激情在线亚洲第一页 91免费国产精品 日韩免费小视频 亚洲国产精品综合一区在线 国产亚洲第一伦理第一区 在线亚洲精品 国产精品一区二区制服丝袜 国产在线成人精品 九九精品免视频国产成人 亚洲国产网 欧美日韩亚洲一区二区三区在线观看 在线亚洲精品 欧美一区二区三区高清视频 国产成人精品男人的天堂538 欧美日韩在线观看区一二 亚洲欧美一区二区久久 久久精品中文字幕首页 日本高清www午夜视频 久久精品国产免费 久久999精品 亚洲国产精品欧美综合 88国产精品视频一区二区三区 91久久偷偷做嫩草影院免费看 国产精品夜色视频一区二区 欧美日韩导航 国产成人啪精品午夜在线播放 一区二区视频在线免费观看 99久久精品国产自免费 精液呈暗黄色 久久99国产精品 日本精品久久久久久久久免费 精品国产97在线观看 99re视频这里只有精品 国产视频91在线 999av视频 亚洲美女视频一区二区三区 久久97久久97精品免视看 亚洲国产成人久久三区 99久久亚洲国产高清观看 日韩毛片在线视频 综合激情在线 91福利一区二区在线观看 一区二区视频在线免费观看 激情粉嫩精品国产尤物 国产成人精品曰本亚洲78 国产成人精品本亚洲 国产精品成人免费视频 国产成人啪精品视频免费软件 久久精品国产亚洲妲己影院 国产精品成人久久久久久久 久久大香线蕉综合爱 欧美一区二区三区高清视频 99热国产免费 在线观看欧美国产 91精品视频在线播放 国产精品福利社 欧美精品一区二区三区免费观看 国产一区二区免费视频 国产午夜精品一区二区 精品视频在线观看97 91精品福利久久久 国产一区福利 国产综合激情在线亚洲第一页 国产精品久久久久久久久久久不卡 九色国产 在线日韩国产 黄网在线观看 亚洲一区小说区中文字幕 中文字幕丝袜 日本二区在线观看 日本国产一区在线观看 欧美日韩一区二区三区久久 欧美精品亚洲精品日韩专 国产日产亚洲精品 久久综合九色综合欧美播 亚洲国产欧美无圣光一区 欧美视频区 亚洲乱码视频在线观看 久久无码精品一区二区三区 九九热精品免费视频 久久99精品久久久久久牛牛影视 国产精品成久久久久三级 国产一区福利 午夜国产精品视频 日本二区在线观看 99久久网站 国产亚洲天堂 精品国产一区二区三区不卡 亚洲国产日韩在线一区 国产成人综合在线观看网站 久久免费高清视频 欧美在线导航 午夜精品久久久久久99热7777 欧美久久综合网 国产小视频精品 国产尤物在线观看 亚洲国产精品综合一区在线 欧美一区二区三区不卡视频 欧美黑人欧美精品刺激 日本福利在线观看 久久国产偷 国产手机精品一区二区 国产热re99久久6国产精品 国产高清啪啪 欧美亚洲国产成人高清在线 国产在线第三页 亚洲综合一区二区三区 99r在线视频 99精品久久久久久久婷婷 国产精品乱码免费一区二区 国产在线精品福利91香蕉 国产尤物视频在线 五月婷婷亚洲 中文字幕久久综合伊人 亚洲精品一级毛片 99国产精品电影 在线视频第一页 久久99国产精品成人欧美 国产白白视频在线观看2 成人精品一区二区www 亚洲成人网在线观看 麻豆91在线视频 色综合合久久天天综合绕视看 久久精品国产免费高清 国产不卡一区二区三区免费视 欧美国产中文 99精品欧美 九九在线精品 国产中文字幕在线免费观看 国产一区中文字幕在线观看 国产成人一级 国产精品一区二区制服丝袜 国产一起色一起爱 亚洲精品成人在线 亚洲欧美精品在线 国产欧美自拍视频 99精品久久久久久久婷婷 久99视频 国产热re99久久6国产精品 视频一区亚洲 国产精品视频分类 国产精品成在线观看 99re6久精品国产首页 亚洲在成人网在线看 亚洲国产日韩在线一区 久久国产三级 日韩国产欧美 欧美在线一区二区三区 国产精品美女一级在线观看 成人午夜免费福利视频 亚洲天堂精品在线 91精品国产手机 欧美日韩视频在线播放 狠狠综合久久综合鬼色 九一色视频 青青视频国产 亚洲欧美自拍一区 中文字幕天天躁日日躁狠狠躁97 日韩免费大片 996热视频 伊人成综合网 亚洲天堂欧美 日韩精品亚洲人成在线观看 久久综合给会久久狠狠狠 日韩精品亚洲人成在线观看 日韩国产欧美 亚洲成aⅴ人片在线影院八 亚洲精品1区 99久久精品免费 国产精品高清在线观看 国产精品久久久免费视频 在线亚洲欧美日韩 91在线看视频 国产精品96久久久久久久 欧美日韩国产成人精品 91在线亚洲 热久久亚洲 国产精品美女免费视频观看 日韩在线毛片 亚洲永久免费视频 九九免费在线视频 亚洲一区网站 日本高清二区视频久二区 精品国产美女福利在线 伊人久久艹 国产精品久久久久三级 欧美成人精品第一区二区三区 99久久精品国产自免费 在线观看日韩一区 国产中文字幕一区 成人免费午夜视频 欧美日韩另类在线 久久99国产精品成人欧美 色婷婷中文网 久久天天躁夜夜躁狠狠躁2020 欧美成人伊人久久综合网 国产精品福利资源在线 国产伦精品一区二区三区高清 国产精品亚洲综合色区韩国 亚洲一区欧美日韩 色综合视频 国语自产精品视频在线区 国产高清a 成人国内精品久久久久影 国产在线精品香蕉综合网一区 国产不卡在线看 国产成人精品精品欧美 国产欧美日韩综合精品一区二区三区 韩国电影一区二区 国产在线视频www色 91中文字幕在线一区 国产人成午夜免视频网站 亚洲综合一区二区三区 色综合视频一区二区观看 久久五月网 九九热精品在线观看 国产一区二区三区国产精品 99久热re在线精品996热视频 亚洲国产网 在线视频亚洲一区 日韩字幕一中文在线综合 国产高清一级毛片在线不卡 精品国产色在线 国产高清视频一区二区 精品日本久久久久久久久久 亚洲国产午夜精品乱码 成人免费国产gav视频在线 日韩欧美一区二区在线观看 欧美曰批人成在线观看 韩国电影一区二区 99re这里只有精品6 日韩精品一区二区三区视频 99re6久精品国产首页 亚洲欧美一区二区三区导航 欧美色图一区二区三区 午夜精品视频在线观看 欧美激情在线观看一区二区三区 亚洲热在线 成人国产精品一区二区网站 亚洲一级毛片在线播放 亚洲一区小说区中文字幕 亚洲午夜久久久久影院 国产自产v一区二区三区c 国产精品视频免费 久久调教视频 国产成人91激情在线播放 国产精品欧美亚洲韩国日本久久 久久亚洲日本不卡一区二区 91中文字幕网 成人国产在线视频 国产视频91在线 欧美成人精品第一区二区三区 国产精品福利在线 久久综合九色综合精品 欧美一区二区三区精品 久久国产综合尤物免费观看 久久99青青久久99久久 日韩精品免费 久久国产精品999 91亚洲视频在线观看 国产精品igao视频 色综合区 在线亚洲欧国产精品专区 国产一区二区三区在线观看视频 亚洲精品成人在线 一区二区国产在线播放 中文在线亚洲 亚洲精品第一国产综合野 国产一区二区精品久久 一区二区三区四区精品视频 99热精品久久 中文字幕视频二区 国产成人精品男人的天堂538 99精品影视 美女福利视频一区二区 久久午夜夜伦伦鲁鲁片 综合久久久久久久综合网 国产精品国产欧美综合一区 国产99视频在线观看 国产亚洲女在线精品 婷婷影院在线综合免费视频 国产亚洲3p一区二区三区 91成人爽a毛片一区二区 亚洲一区二区高清 国产欧美亚洲精品第二区首页 欧美日韩导航 亚洲高清二区 欧美激情观看一区二区久久 日韩毛片在线播放 亚洲欧美日韩高清中文在线 亚洲日本在线播放 国产精品一区二区制服丝袜 精品国产一区二区三区不卡 国产不卡在线看 国产欧美网站 四虎永久在线观看视频精品 国产黄色片在线观看 夜夜综合 一本色道久久综合狠狠躁篇 欧美亚洲综合另类在线观看 国产91在线看 伊人久久国产 欧美一区二区在线观看免费网站 国产精品久久久久三级 久久福利 日韩中文字幕a 亚洲午夜久久久久影院 91在线高清视频 国产亚洲一区二区三区啪 久久人精品 国产精品亚洲午夜一区二区三区 综合久久久久久 久久伊人一区二区三区四区 国产综合久久久久久 日韩一区精品视频在线看 国产精品日韩欧美制服 日本精品1在线区 99re视频 无码av免费一区二区三区试看 国产视频1区 日韩欧美中文字幕一区 日本高清中文字幕一区二区三区a 亚洲国产欧美无圣光一区 国产在线视频一区二区三区 欧美国产第一页 在线亚洲欧美日韩 日韩中文字幕第一页 在线不卡一区二区 伊人久久青青 国产精品一区二区在线播放 www.五月婷婷 麻豆久久婷婷国产综合五月 亚洲精品区 久久国产欧美另类久久久 99在线视频免费 伊人久久中文字幕久久cm 久久精品成人免费看 久久这里只有精品首页 88国产精品视频一区二区三区 中文字幕日本在线mv视频精品 国产在线精品成人一区二区三区 伊人精品线视天天综合 亚洲一区二区黄色 国产尤物视频在线 亚洲精品99久久久久中文字幕 国产一区二区三区免费观看 伊人久久大香线蕉综合电影网 国产成人精品区在线观看 日本精品一区二区三区视频 日韩高清在线二区 久久免费播放视频 一区二区成人国产精品 国产精品免费精品自在线观看 亚洲精品视频二区 麻豆国产精品有码在线观看 精品日本一区二区 亚洲欧洲久久 久久中文字幕综合婷婷 中文字幕视频在线 国产成人精品综合在线观看 91精品国产91久久久久福利 精液呈暗黄色 香蕉国产综合久久猫咪 国产专区精品 亚洲精品无码不卡 国产永久视频 亚洲成a人片在线播放观看国产 一区二区国产在线播放 亚洲一区二区黄色 欧美日韩在线观看视频 亚洲精品另类 久久国产综合尤物免费观看 国产一区二区三区国产精品 高清视频一区 国产精品igao视频 国产精品资源在线 久久综合精品国产一区二区三区 www.五月婷婷 精品色综合 99热国产免费 麻豆福利影院 亚洲伊人久久大香线蕉苏妲己 久久电影院久久国产 久久精品伊人 在线日韩理论午夜中文电影 亚洲国产欧洲综合997久久 伊人国产精品 久草国产精品 欧美一区精品二区三区 亚洲成人高清在线 91免费国产精品 日韩精品福利在线 国产一线在线观看 国产不卡在线看 久久99青青久久99久久 亚洲精品亚洲人成在线播放 99久久免费看国产精品 国产日本在线观看 青草国产在线视频 麻豆久久婷婷国产综合五月 国产中文字幕一区 91久久精品国产性色也91久久 国产一区a 国产欧美日韩成人 国产亚洲女在线精品 一区二区美女 中文字幕在线2021一区 在线小视频国产 久久这里只有精品首页 国产在线第三页 欧美日韩中文字幕 在线亚洲+欧美+日本专区 精品国产一区二区三区不卡 久久这里精品 欧美在线va在线播放 精液呈暗黄色 91精品国产手机 91在线免费播放 欧美视频亚洲色图 欧美国产日韩精品 日韩高清不卡在线 精品视频免费观看 欧美日韩一区二区三区四区 国产欧美亚洲精品第二区首页 亚洲韩精品欧美一区二区三区 国产精品视频免费 在线精品小视频 久久午夜夜伦伦鲁鲁片 国产无套在线播放 久热这里只精品99re8久 欧美久久久久 久久香蕉国产线看观看精品蕉 国产成人精品男人的天堂538 亚洲人成网站色7799在线观看 日韩在线第二页 一本色道久久综合狠狠躁篇 国产一区二区三区不卡在线观看 亚洲乱码在线 在线观看欧美国产 久久福利青草精品资源站免费 国产玖玖在线观看 在线亚洲精品 亚洲成aⅴ人在线观看 精品91在线 欧美一区二三区 日韩中文字幕视频在线 日本成人一区二区 日韩免费专区 国内精品在线观看视频 久久国产综合尤物免费观看 国产精品系列在线观看 一本一道久久a久久精品综合 亚洲免费播放 久久精品国产免费 久久人精品 亚洲毛片网站 亚洲成a人一区二区三区 韩国福利一区二区三区高清视频 亚洲精品天堂在线 一区二区三区中文字幕 亚洲国产色婷婷精品综合在线观看 亚洲国产成人久久笫一页 999国产视频 国产精品香港三级在线电影 欧美日韩一区二区三区四区 日韩国产欧美 国产精品99一区二区三区 午夜国产精品理论片久久影院 亚洲精品中文字幕麻豆 亚洲国产高清视频 久久免费手机视频 日韩a在线观看 五月婷婷亚洲 亚洲精品中文字幕麻豆 中文字幕丝袜 www国产精品 亚洲天堂精品在线 亚洲乱码一区 国产日韩欧美三级 久久999精品 伊人热人久久中文字幕 久热国产在线视频 国产欧美日韩在线观看一区二区三区 国产一二三区在线 日韩国产欧美 91精品国产91久久久久 亚洲一区小说区中文字幕 精品一区二区免费视频 国产精品视频免费 国产精品亚洲综合色区韩国 亚洲国产精品成人午夜在线观看 欧美国产日韩精品 中文字幕精品一区二区精品