一種基于Clos網絡交換結構的貫序匹配調度算法的制作方法

            文檔序號:7689795閱讀:272來源:國知局
            專利名稱:一種基于Clos網絡交換結構的貫序匹配調度算法的制作方法
            技術領域
            本發明涉及網絡交換調度算法領域,具體的說是一種基于Clos網絡交換結構的貫序匹配調度算法。

            背景技術
            隨著計算機網絡規模的日益擴大,主要體現在兩個方面,一個是交換端口的密度增大,另一個是交換結構(Switch Fabric)輸入輸出端口的線速(Line Speed)不斷提高。為此,核心網絡的分組交換系統需要的交換容量越來越大,研究者為此設計了多階段互聯的交換系統以滿足交換容量的需求,Clos網絡交換結構就是其中一種典型的多階段互聯的交換系統,Clos網絡交換結構因為其直觀,冗余度大,而且可以進行“迭代式”的擴展,因此被廣泛的應用于商用產品。圖1給出了現有的Clos網絡拓撲結構示意圖,Clos網絡交換結構一般分三級,圖1中用方框表示的交換單元(Switch Element,SE)也可稱為模塊,通常將整個三級Clos網絡交換結構描述為具有k個輸入模塊IM(Input module),m個中間模塊CM(Center module)和k個輸出模塊OM(Output module)。每個輸入模塊為(n×m)的規模,其中n為輸入端口數量,m為輸出端口數量(和中間模塊CM的數量相同),每個輸出模塊為(m×n)規模,其中n為輸出端口數量,m為輸入端口數量(和中間模塊CM的數量相同),因此整個交換結構的規模為N=n×k。Clos網絡交換結構分為非阻塞和可重排非阻塞兩種類型(取決于m的n關系),當滿足m≥2n-1時,Clos網絡交換結構網絡是非阻塞的,若m≥n,則Clos網絡交換結構網絡是可重排非阻塞的。
            Clos拓撲結構獲得了廣泛的應用,如華盛頓大學的ATLANTA交換機,紐約理工大學的PetaStar都是成功應用的例子。在產業界,DUNE Networks公司推出了一系列支持Clos網絡交換結構的交換芯片,并推廣了大量基于Clos網絡交換結構的大規模交換系統的解決方案,如網絡設備的可擴展體系結構(Scalable Architecture of NetworkDevices,SAND),這些方案有的已經被知名的設備廠商采納。因此,Clos網絡交換結構的調度算法一直成為交換結構領域中的研究熱點。
            現有的Clos網絡交換結構網絡調度算法存在著以下的局限性 一般而言,Clos網絡交換結構的調度可以分為兩個主要的問題,即信元分派(Cell Dispatching)和路由分配(Route Assignment)問題。按照Clos網絡交換結構各級中使用的交換單元的實現方式,Clos網絡交換結構網絡可以分為S3型和MSM型,S3型表示三級交換單元都使用空分(Space Division)結構,MSM型表示第一和第三級使用共享存儲結構(用“M”表示),僅第二級使用空分結構(用“S”表示)。在這兩種類型中,空分結構基本上都采用Crossbar技術。
            對于S3型Clos網絡交換結構,路由分配的核心問題在于對于一個給定的輸入/輸出端口匹配矩陣,如何快速選擇從輸入端口到輸出端口的連接。理論上說,路由分配問題可以通過矩陣分解來解決,但是這種方法缺乏實用性,這表現在兩個方面首先,矩陣分解需要事先知道流量需求,這在實際應用中比較困難;其次,即使獲得了流量需求矩陣,矩陣分解的方法計算復雜性太高,在交換規模較大時,現有的硬件計算能力無法做到實時計算。在實際應用中,通常使用啟發式的算法來解決路由分配問題,如現有文章(H.Jonathan Chao,Zhigang Jing,and Soung Y.Liew,“Matching Algorithms for Three-StageBufferless Clos Network Switches”,IEEE Communications Magazine,pp.46-54,Oct 2003)介紹的并行匹配算法。此外,Chao等研究者提出了一系列匹配算法,如f-MAC,c-MAC和d-MAC等,這些算法對S3型Clos網絡交換結構交換結構的調度均有不同程度的改善。
            S3型Clos網絡交換結構在路由分配上的復雜性主要是由于沒有緩存造成的,因為沒有緩存,必須有一種算法能迅速調度進入交換結構的信元,否則就會丟棄未被及時調度的信元,但由于Clos網絡交換結構自身的復雜性和硬件計算能力的局限性,研究者轉而研發MSM型Clos網絡交換結構。
            MSM型Clos網絡交換結構能夠將進入的信元緩存于公共存儲區,這無疑一定程度上減輕了調度的壓力,也使得人們可以變更調度算法的設計思路。在傳統的單階段交換結構中,已經成熟的調度算法如iSlip(N.McKeown,“The iSLIP Scheduling Algorithm forInput-Queues Switches”,IEEE/ACM Trans On Networking,pp.188-200,Apr 1999)采用的是“請求-允許-接受”方式(Request-Grant-Accept,即RGA方式),嚴格的說,RGA方式也是一種啟發式的算法,但是iSlip在Cisco 12000 GSR交換路由器上的成功證明了RGA方式是一種高效可行的算法。借助于這種思想,Chao等人提出了MSM型Clos網絡交換結構的調度算法CRRD調度算法及其變種CMSD(concurrent master-slave round-robin dispatching)。
            CRRD調度算法將進入輸入模塊IM的信元按照不同的目的端口分為若干虛擬輸出隊列VOQ,進而采用了兩階段的調度算法。第一階段在輸入模塊IM中進行,各個虛擬輸出隊列VOQ以RGA方式向所在的輸入模塊IM的輸出端口建立匹配關系,第二階段主要是由第一階段中匹配成功了的輸入模塊IM的輸出端口和中間模塊CM的輸出端口以RGA方式進行匹配。當兩個階段都匹配成功后,則相應的虛擬輸出隊列VOQ可以通過已匹配的線路在下個時隙中發送一個信元。
            CRRD調度算法和CMSD調度算法的主要缺陷在以下兩個方面。首先,兩次匹配是以一種接力的方式進行的。CRRD調度算法在輸入模塊IM和中間模塊CM中先后進行了兩次RGA方式的匹配,僅當這兩次匹配都成功,相應的虛擬輸出隊列VOQ才能在下一個時隙中發送信元。顯然,這樣的串行方式的匹配的成功率僅是兩次匹配成功率的乘積,使得整體性能有所降低。如圖2所示,輸入模塊IM1中的VOQ1在首次匹配中收到了來自LI(1,1)和LI(1,3)的允許消息,而VOQ1選擇向LI(1,1)發送接受消息,因此LI(1,1)將在第二階段的匹配中向LC(1,1)發送請求消息。相似地,輸入模塊IM2中的VOQ2收到來自LI(2,1)和LI(2,2)的允許消息,VOQ2選擇向LI(2,1)發送接受消息,故LI(2,1)將在第二階段的匹配中也向LC(1,1)發送請求消息。這意味著在第二階段LI(2,1)將和LI(1,1)競爭LC(1,1)的獲準權。如果在第二階段,LC(1,1)選擇了LI(1,1),這時第一階段中輸入模塊IM2內VOQ2和LI(2,1)已經形成的匹配將失效。這也同時意味著在第一階段中,輸入模塊IM2內LI(2,2)發送給VOQ2的允許消息被浪費了,而如果輸入模塊IM2中的VOQ2選擇了LI(2,2),完全可以建立通過LC(2,1)的無沖突路徑。這樣的情形在運行期間隨時可能發生,因此,兩階段的匹配會潛在降低全局的匹配成功率。
            其次,CRRD調度算法遵循“多對一”的RGA匹配方式,也就是說在第一階段的匹配中,任意VOQ雖然可能收到多個允許消息,但只能接受其中的一個。雖然CRRD調度算法提出可以在第一階段使用多次迭代來提高匹配的命中率,但多次迭代會給系統帶來較大的時間開銷,因此在實際應用中,通常不使用多次迭代,因此多對一匹配方式產生的匹配效率降低問題難以有效解決。


            發明內容
            針對現有技術中存在的缺陷,本發明的目的是提供一種基于Clos網絡交換結構的貫序匹配調度算法,采用直通式匹配,整個匹配過程一次完成,同時采取多對多的“請求-允許-接受”方式,最大程度利用了調度機會。
            為達到以上目的,本發明采取的技術方案是 一種基于Clos網絡交換結構的貫序匹配調度算法,所說的Clos網絡交換結構至少包括一個交換機機架及設置在機架上的線卡和背板,每個線卡上的前端芯片包括階輸入模塊IM和k個輸出模塊OM,背板上的后端芯片包括m個中間模塊CM,每個輸入模塊IM均具有m個輸出端口,每個中間模塊CM均具有k個輸入端口和k個輸出端口,其特征在于所說的貫序匹配調度算法步驟為 步驟1請求階段,每個包含非空虛擬輸出隊列VOQ的虛擬輸出組VOG,根據信元最終要送達的輸出模塊OM,通過其所在的輸入模塊IM的m個輸出端口向每個中間模塊CM的相應的輸出端口發出請求消息, 步驟2允許階段,每個中間模塊CM的輸出端口根據輸出端口指針LoCPointer的位置選定一個發出請求消息的虛擬輸出組VOG并向其發出允許消息, 步驟3過濾階段,判斷是否發生通行競爭,如沒有則直接放行相應輸出端口發出的允許消息,如發生通行競爭,則每個中間模塊CM的輸入端口根據輸入端口指針LiCPointer的位置選定一個該中間模塊CM的輸出端口并放行該輸出端口發出的允許消息, 步驟4接受階段,每個收到允許消息的虛擬輸出組VOG,通過VOG內部指針VOGInnerPointer選定一個非空虛擬輸出隊列VOQ,再根據VOG外部指針VOGExternPointer的位置選定一個發出允許消息的中間模塊CM的輸出端口,虛擬輸出組VOG向該輸出端口發送接受消息以完成從虛擬輸出隊列VOQ到該輸出端口的通道建立過程, 步驟5指針更新階段,非空虛擬輸出隊列VOQ通過虛擬輸出組VOG發送一個信元,依次更新VOG內部指針VOGInnerPointer、VOG外部指針VOGExternPointer、中間模塊CM的輸入端口指針LiCPointer和中間模塊CM的輸出端口指針LoCPointer,重復步驟4、步驟5直至所有非空虛擬輸出隊列VOQ的信元都被發送或者所有的允許消息都已被接受。
            在上述技術方案的基礎上,輸入模塊IM中虛擬輸出隊列VOQ的組織方式為VOQ(i,p,o),i為輸入模塊的編號,p為輸入模塊的輸入端口編號,o為輸出模塊的編號;輸入模塊IM中虛擬輸出組VOG的組織方式為VOG(i,o),i為輸入模塊的編號,o為輸出模塊的編號,虛擬輸出組VOG由n個成員VOQ(i,p,o)組成,其中1≤p≤n,n為每個輸入模塊的輸入端口的個數。
            在上述技術方案的基礎上,VOG內部指針VOGInnerPointer、VOG外部指針VOGExternPointer、中間模塊CM的輸入端口指針LiCPointer和中間模塊CM的輸出端口指針LoCPointer更新后,指針指向當前匹配目標的下一個位置。
            本發明具有以下優點 1.采用直通式匹配,整個匹配過程一次完成, 2.同時采取多對多的“請求-允許-接受”方式,最大程度利用了調度機會。



            本發明有如下附圖 圖1現有的Clos網絡拓撲結構示意圖 圖2CRRD調度算法兩次RGA方式匹配示意圖 圖3本發明所述的Clos網絡交換結構示意圖 圖4邏輯上分為k個并行的匹配的平面的示意圖 圖5VOG獲得調度機會的堆球模型示意圖 圖6基于擴展Clos結構的大型交換系統模型示意圖 圖7Clos交換結構中N+1的冗余實現方式示意圖 圖8突發模式下SMACN與CRRD吞吐率的對比示意圖 圖9突發模式下SMACN與CRRD時延的對比示意圖 圖10VOGInnerPointer(1,1)狀態 圖11VOGExternPointer(1,1)狀態 圖12VOGInnerPointer(1,2)狀態 圖13VOGExternPointer(1,2)狀態 圖14VOGInnerPointer(3,1)狀態 圖15VOGExternPointer(3,1)狀態 圖16LiC(1,3)的指針LiCPointer(1,3),LiC(2,1)的指針LiCPointer(2,1),LiC(3,1)的指針LiCPointer(3,1),LiC(4,3)的指針LiCPointer(4,3)的狀態 圖17中間模塊的輸出端口指針LoCPointer(1,1),LoCPointer(2,1),LoCPointer(3,1),LoCPointer(4,1)狀態 圖18四個中間模塊的輸出端口指針LoCPointer(1,2),LoCPointer(2,2),LoCPointer(3,2),LoCPointer(4,2)狀態 圖19VOGInnerPointer(1,1),VOGExternPointer(1,1),LiCPointer(2,1),LoCPointer(2,1)指針更新后的狀態 圖20VOGInnerPointer(1,1),VOGExternPointer(1,1),LiCPointer(3,1),LoCPointer(3,1)指針更新后的狀態 圖21VOGInnerPointer(3,1),VOGExternPointer(3,1),LiCPointer(4,3),LoCPointer(4,1)指針更新后的狀態 圖22VOGInnerPointer(1,2),VOGExternPointer(1,2),LiCPointer(4,1),LoCPointer(4,2)指針更新后的狀態 圖23VOGInnerPointer(1,2),VOGExternPointer(1,2),LiCPointer(1,1),LoCPointer(1,2)指針更新后的狀態
            具體實施例方式 以下結合附圖對本發明作進一步詳細說明。
            本發明所述的一種基于Clos網絡交換結構的貫序匹配調度算法,所說的Clos網絡交換結構至少包括一個交換機機架及設置在機架上的線卡和背板,每個線卡上的前端芯片包括k個輸入模塊IM和k個輸出模塊OM,背板上的后端芯片包括m個中間模塊CM,每個輸入模塊IM均具有m個輸出端口,每個中間模塊CM均具有k個輸入端口和k個輸出端口,所說的貫序匹配調度算法步驟為 步驟1請求階段,每個包含非空虛擬輸出隊列VOQ的虛擬輸出組VOG,根據信元最終要送達的輸出模塊OM,通過其所在的輸入模塊IM的m個輸出端口向每個中間模塊CM的相應的輸出端口發出請求消息, 步驟2允許階段,每個中間模塊CM的輸出端口根據輸出端口指針LoC Pointer的位置選定一個發出請求消息的虛擬輸出組VOG并向其發出允許消息, 步驟3過濾階段,判斷是否發生通行競爭,如沒有則直接放行相應輸出端口發出的允許消息,如發生通行競爭,則每個中間模塊CM的輸入端口根據輸入端口指針LiCPointer的位置選定一個該中間模塊CM的輸出端口并放行該輸出端口發出的允許消息, 步驟4接受階段,每個收到允許消息的虛擬輸出組VOG,通過VOG內部指針VOGInnerPointer選定一個非空虛擬輸出隊列VOQ,再根據VOG外部指針VOGExternPointer的位置選定一個發出允許消息的中間模塊CM的輸出端口,虛擬輸出組VOG向該輸出端口發送接受消息以完成從虛擬輸出隊列VOQ到該輸出端口的通道建立過程, 步驟5指針更新階段,非空虛擬輸出隊列VOQ通過虛擬輸出組VOG發送一個信元,依次更新VOG內部指針VOGInnerPointer、VOG外部指針VOGExternPointer、中間模塊CM的輸入端口指針LiCPointer和中間模塊CM的輸出端口指針LoCpointer,重復步驟4、步驟5直至所有非空虛擬輸出隊列VOQ的信元都被發送或者所有的允許消息都已被接受。
            在上述技術方案的基礎上,輸入模塊IM中虛擬輸出隊列VOQ的組織方式為VOQ(i,p,o),i為輸入模塊的編號,p為輸入模塊的輸入端口編號,o為輸出模塊的編號;輸入模塊IM中虛擬輸出組VOG的組織方式為VOG(i,o),i為輸入模塊的編號,o為輸出模塊的編號,虛擬輸出組VOG由n個成員VOQ(i,p,o)組成,其中1≤p≤n,n為每個輸入模塊的輸入端口的個數。
            在上述技術方案的基礎上,VOG內部指針VOGInnerPointer、VOG外部指針VOGExternPointer、中間模塊CM的輸入端口指針LiCPointer和中間模塊CM的輸出端口指針LoCPointer更新后,指針指向當前匹配目標的下一個位置。采用這種指針更新方式可以提高算法的執行效率。
            圖3給出了一個本發明所述的具有3個輸入模塊,4個中間模塊和3個輸出模塊的Clos網絡交換結構示意圖作為示例,圖3中的附圖標記含義如下 虛擬輸出隊列VOQ(i,p,o)進入輸入模塊IM(i)的第p個輸入端口,目的為輸出模塊OM(o)的信元形成的虛擬輸出隊列(1≤i,o≤k,1≤p≤n)。其中,k為輸入模塊IM的個數,n為輸入模塊IM的輸入端口數量。例如VOQ(1,1,1)代表進入輸入模塊IM(1)的第1個輸入端口,目的為輸出模塊OM(1)的信元形成的虛擬輸出隊列。
            虛擬輸出組VOG(i,o)輸入模塊IM(i)中目的為輸出模塊OM(o)的VOQ形成的虛擬輸出組。虛擬輸出組VOG(i,o)由n個虛擬輸出隊列VOQ(i,p,o)組成(1≤p≤n)。其中,n為輸入模塊IM的輸入端口數量。例如VOG(1,3)代表輸入模塊IM(1)中目的為輸出模塊OM(3)的VOQ形成的虛擬輸出組。
            輸入模塊的輸出端口LoI(i,r)輸入模塊IM(i)中與中間模塊CM(r)相聯的輸出端口,1≤r≤m。其中,m為中間模塊CM的個數。例如LoI(1,2)代表輸入模塊IM(1)中與中間模塊CM(2)相聯的輸出端口。
            中間模塊的輸出端口LoC(r,j)中間模塊CM(r)中與輸出模塊OM(j)相聯的輸出端口,1≤j≤k。其中,k為輸入模塊IM的個數。例如LoC(2,2)代表中間模塊CM(2)中與輸出模塊OM(2)相聯的輸出端口。
            中間模塊的輸入端口LiC(r,i)中間模塊CM(r)中與輸入模塊IM(i)相聯的輸入端口,1≤i≤k。其中,k為輸入模塊IM的個數。例如LiC(3,3)代表中間模塊CM(3)中與輸入模塊IM(3)相聯的輸入端口。
            本發明所述的調度算法還涉及以下指針 VOG內部指針VOGInnerPointer(i,o)虛擬輸出組VOG(i,o)的內部輪轉指針,指向當前可以發送信元的成員VOQ,因此這個指針的輪轉目標一共有n個。
            VOG外部指針VOGExternPointer(i,o)每個VOG(i,o)的外部輪轉指針,指向當前中間模塊CM(r)的LoC(r,o),而該VOG將優先向這個LoC(r,o)發送接受消息。注意LoC(r,o)是每個中間模塊CM(r)的第o個輸出端口,因此該指針的輪轉目標共有m個。
            中間模塊CM的輸出端口指針LoCPointer(r,j)每個LoC(r,j)所屬的輪轉指針,指向當前的VOG,這個LoC(r,j)將最優先向指向的這個VOG發送允許消息。因此這個指針共有k個輪轉目標,分別代表k個分別位于各個輸入模塊IM,目的為輸出模塊OM(j)的VOG。(參見圖4) 中間模塊CM的輸入端口指針LiCPointer(r,i)每個LiC(r,i)所屬的輪轉指針,指向當前中間模塊CM的LoC(r,j),這個LoC(r,j)將優先獲準將自己發送的允許消息通過LiC(r,i)。這個指針指向的目標為相同中間模塊CM中的各個LoC(r,j),因此一共有k個輪轉目標。如LiCPointer(1,1)的輪轉目標為LoC(1,1),LoC(1,2),LoC(1,3)共3個。
            本發明所述的基于Clos網絡交換結構的貫序匹配調度算法SMACN(Sequential Matching Algorithm on Clos Network)采用了“貫穿”式的RGA方式,這種方式避免了兩階段匹配的串行式效率遞減。更進一步,借助這種貫序匹配,SMACN調度算法可以將全局的匹配在邏輯上分為k個并行的匹配的平面(參見圖4),這些平面上的匹配過程可以同時進行。
            SMACN調度算法使用多對多的RGA匹配方式,更充分地利用每個時隙中產生的允許消息。
            Clos網絡上的交換匹配與Crossbar上的交換匹配的顯著不同在于,Crossbar中的輸入端口在匹配的開始階段僅向已堆積報文的目的端口發送請求消息;而SMACN中,每個VOQ通過IM的每個輸出端口向每個CM發送請求消息,因此,這是一種“過度”請求的方式。對于針對Crossbar的iSlip,文章(N.McKeown,“The iSLIP SchedulingAlgorithm for Input-Queues Switches”,IEEE/ACM Trans On Networking,pp.188-200.Apr.1999)的研究說明,在均勻的通信量模式下,其吞吐率可以逼近100%。但是這個結論的前提是在Crossbar上,且輸入端口和輸出端口的數目相同。為了研究SMACN的吞吐率,有必要更深入地研究RGA方式匹配的效率。繼McKeown之后,Li和Chao等研究者在研究大規模交系統中取得了一系列進展,他們的研究主要集中于Clos型多階段互聯的交換系統,但是也對Crossbar的匹配做了較深入研究并做了相關改進。例如他們提出了一個iSlip的改進算法DRRM(Yihan Li,Shivendra Panwar,H.Jonathan Chao,On thePerformance of a Dual Round-Robin Switch,IEEE INFOCom 2001),Li在分析DRRM和iSlip的性能對比時RGA方式給出了很有新意的模型,我們在接下來的分析中將采納這個模型。為此,記參與RGA方式的n個請求發起方為I1,…,In,m個允許方為Q1,…,Qm,請求方與允許方的工作方式是基于輪轉指針RGA的(即iSlip),首先給出如下定義 定義1(命中)若經過一次RGA操作,某個請求發起方Ik(1≤k≤n)能成功收到至少一個允許消息,則稱該Ik的此次RGA操作命中。
            定義2(S-餓死)給定一個較大的自然數S,若請求發起方Ik(1≤k≤n)在連續經過S輪RGA次操作后仍然收不到允許消息,則稱Ik上發生了S-餓死。
            我們可以得到比一個比Li的工作更一般的結論,即如下性質 性質1基于RGA的iSlip算法每次進行1輪迭代,當m≥n時若請求發起方的任務是飽和的,即每次都發送請求到每個允許方,則經過有限次的匹配操作后,請求發起方都能實現100%的請求命中。
            證明記時隙i中每個請求發起方Ik收到的允許消息個數,即那些發送允許消息給Ik的允許方的數目為vk,i,則根據iSlip算法,則成立同時,諸vk,i滿足 由以上時隙間的遞推關系式,不難得出,存在一個有限的T,使得當i≥T時,成立vk,i≥1。也就是說,經過有限次匹配,每個輸入方以后的匹配均可以命中。
            性質2Clos網絡上實施SMACN算法時在均勻飽和流量下,位于每個CM中的匹配能在有限次匹配后實現100%的命中率。
            證明SMACN算法中,CM中的每個輸入端口將相關VOG的請求消息中繼到每個CM的輸出端口,輸出端口的仲裁器PC(r,j)根據輪轉指針返回允許消息。給定的CM中,每個輸入端口構成了k個請求方,而每個輸出端口構成了k個允許方。在均勻飽和流量下,CM中的RGA過程和均勻飽和流量下iSlip的RGA過程是一致的,因此根據性質1,CM中的匹配在經過有限次步驟后能實現100%的命中率。
            性質3Clos網絡上實施SMACN算法時在均勻飽和流量下,每個時隙中記每個VOG可以至少B(1≤B≤n)個VOQ非空的概率為PB,則滿足 證明考慮任意的VOG(i,v),這個VOG由IMi的n個VOQ構成。由假設,Clos網絡輸入的流量是均勻的,因此每個時隙中每個VOQ進入一個信元的概率為1/k,從而每個時隙中恰好有B個VOQ各自收到一個信元的概率為

            因此(1)成立。
            性質4SMACN算法中各個VOQ發送信元不會出現爭用線路或端口。
            證明在SMACN算法的步驟3(過濾階段)中,由于每個LiC只允許本CM中的一個LoC發出的允許消息通過,因此在接受階段,LoI最多只會有一個接受消息需要通過。由于SMACN算法中每個接受消息意味著將有一個信元沿著個接受消息通往OM,故每個發送的信元在其通過的線路和端口上不會發生爭用現象。
            性質4說明,SMACN算法在各個CM上的并行程度非常高,即各個VOQ發送的信元可以互不影響地通過m個CM。
            性質5設在圖1所示的Clos網絡中滿足m≥k。實施SMACN算法時在均勻的飽和流量下,每個VOG發生S-調度餓死的概率隨著S的增加趨于0。即使得對

            Pr{VOG發生S-餓死}<ε。
            證明考慮如圖4所示的SMACN算法,由于每個IM根據進入信元的目的OM,形成了k個VOG,每個VOG的請求目標是分別位于m個CM中連接至相應OM的輸出端口。
            在每個匹配平面上有k個請求發起方和m個請求允許方,在整個Clos網絡上的流量為均勻飽和時,每個匹配平面的輸入流量也是均勻飽和的。根據性質2,由于每個CM都能在有限步RGA操作后實現100%匹配,這意味著每個RRP(j,v)的允許消息都會順利到達某個VOG。
            記時隙tVOG(i,v)收到的允許消息個數為gi,vt,則在每個匹配平面v(0≤v≤k-1)上,由上述分析,在t足夠大時,成立 意味著VOG(i,v)接收到至少一個允許消息,若在S次操作內則VOG(i,v)不會S-餓死。為此,我們考慮圖5所示的VOG獲得調度機會的堆球模型示意圖,將m個球放入k個槽位中,每個槽位上球的數目表示gi,vt的值,如圖5所示。我們要證明,對于任意小的ε,若存在某個時刻t0,則存在M∈N,使得 根據SMACN算法以及式(1),若則必存在某個i-1,0≤i-1≤k-1,滿足而對任意的i-1<r≤i0,即i-1是比i0小而距i0最近的非空槽位。由性質3, VOG(i-1,v)將以不小于PB的概率包含B個非空隊列。因此 由SMACN的輪轉機制,VOG(i-1,v)已經獲得匹配的機會數目將會轉移至VOG(i-1+1,v),因此對于有 特別地,取B=1,反復應用(5-4)式,有 式(5)說明,經過i0-i-1個時隙,VOG(i0,v)獲得一個調度機會的概率不低于

            。也就是說,經過i0-i-1個時隙,VOG(i-1,v)的調度機會有一個轉移到VOG(i0,v)上的概率不低于

            ,即的概率不超過

            。因此反復應用(5)式還可以得到 對于前面給定的ε,存在一個自然數K0,使得 因此VOG(i0,v)在經過K0(i0-i-1)輪RGA操作后,仍然得不到調度機會的概率將小于ε。原命題的結論成立。
            以下簡述實現方案與冗余保護 如前所述,Clos拓撲可以靈活地構建可擴展的大型交換系統。如圖6所示的基于擴展Clos結構的大型交換系統模型示意圖顯示了使用Clos構建大型交換系統的一個模型,圖中的交換系統由一個機架(Chassis)及其一系列線卡(Line Card)和背板構成,每個線卡上的前端芯片(即IM和OM)和背板上的后端芯片(CM)形成Clos網絡。使用Clos結構的迭代(Iteration),還可以進一步搭建超大型交換系統(Super Scale Switching System)。例如,將若干個機架按照Clos的拓撲連接起來,可以構建10T級的交換系統。
            由于基于Clos結構的大型交換系統通常工作在網絡的核心層,因此如何最大限度地提高系統的穩定性和可靠性成為另一個受到關注的問題。最常用的手段就是使用保護的方式,而由于的Clos網絡的冗余度高,在其上實現冗余保護具有天然的優勢。
            就交換系統而言,保護通常都在容易發生“單點失效”的地方進行,例如交換背板。傳統的交換系統設計模式中,交換背板的確是單點失效的關鍵點。但是在Clos拓撲中,由于CM有多個,因此嚴格的說,m>1的Clos拓撲中CM并非單點失效的關鍵點。然而為了運行的穩定,建立N+1的保護仍然是一種重要的可選方案。在CM中進行4+1冗余保護的方案可以參見圖7所示的Clos交換結構中N+1的冗余實現方式示意圖,由于進行了4+1的冗余保護,當系統的負載很高時,任意一個被保護的CM如果出現故障,第五個CM會替代該失效CM而立刻投入工作,這樣系統的流量發生抖動的程度幾乎是微不足道的。反之,如果不進行保護,讓五個CM全部投入工作,那么在高負載條件下,若某個CM產生故障,系統的吞吐率將顯著降低。總之,在Clos交換結構的數據平面是否采取N+1的保護,取決于用戶對網絡的規劃和預期,但是對于管理平面和控制平面而言,對主控卡(通常是交換背板)的保護一般是必不可少的。
            以下簡述仿真分析和討論 模擬一個k=3,n=m=4的Clos交換結構,其中每個交換單元具有相等的鏈路速率。同時,實驗采用了歸一化的流量負荷,即用流量負荷ρ∈
            來表示流量的大小,當ρ=1時表示流量是按照線速輸入的。在圖3所示的交換結構中,共有12個輸入端口和12個輸出端口,用λi,j表示從輸入端口i到輸出端口j的流量強度,于是可以形成一個12*12的流量矩陣。根據評判交換結構吞吐率的幾種通用流量場景,實驗采用兩種輸入流量模式 均勻流量模式是一種比較友好的流量模式,在這種流量模式下,SMACN和CRRD的性能幾乎是重合的,都逼近100%。在這種流量場景下,SMACN和CRRD的漸近表現沒有實質上的差別,但是實驗中發現,SMACN同CRRD相比的一個顯著優點在于,SMACN能夠在很少的轉發周期中,迅速降低匹配過程中發生的沖突,即快速實現100%的命中率。為此,實驗故意選取一個極端的初始條件,即讓所有的VOGExternPointer指針和LiCPointer指針指向相同的目標,從而在第一個時隙造成完全沖突,觀察若干個時隙后兩種算法的匹配命中率,如表1所示 表1 SMACN與CRRD在均勻流量下命中率的對比 從上表的結果可以看出,SMACN對流量模式的適應能力要強于CRRD,這主要是因為SMACN的匹配在發送接受消息的過程中是以“一對多”的方式匹配的,這種方式能夠快速消除匹配沖突,因此對于流量場景的切換,SMACN的性能要好于CRRD,典型值為32%,23%,20%以上。
            突發流量的場景下,測試的流量場景按照目的端口的分布仍然是均勻的,但與前面的完全均勻流量模式不同,由于流量的突發性,吞吐率會隨著流量輸入負載的增加而略有下降。在ON-OFF過程中選取(進入ON的概率),ON的平均時間為3個時隙,OFF的平均時間為7個時隙這樣的流量場景下,計每次進入ON狀態的概率為p,則讓p從0向1變化可以生成不同的輸入流量負載。圖8所示的突發模式下SMACN與CRRD吞吐率的對比示意圖顯示了CRRD和SMACN在不同流量負載下的吞吐率,而圖9所示的突發模式下SMACN與CRRD時延的對比示意圖顯示了兩種算法在不同負載下的平均隊列長度,實際上刻畫了兩種調度算法下不同負載的轉發時延。從中我們不難看出,當輸入負載超過了0.7時,吞吐率和隊列長度都會產生分化。但是吞吐率的分化比較輕微,而SMACN算法的隊列長度要比CRRD小,典型值小50%,40%,33%和37%。從總體上看,SMACN要比CRRD要有所提高。
            綜上所述,使用多階段互聯來構建大規模交換結構是滿足交換系統健壯性,可擴展性的有效方式,Clos網絡的交換結構是一種極具應用前景的多階段互聯交換結構,在產業界已經得到廣泛應用。基于共享存儲的Clos結構是主要的搭建方案之一,Clos結構上傳統的調度方法為CRRD,這是一種類似于iSlip的調度方法,但是由于工作在Clos拓撲上,CRRD采取兩階段接力的RGA方法。CRRD的主要缺陷在于匹配精度在非均勻流量場景下不高,本文提出了一種CRRD的改進方案,稱為貫序式匹配算法(SMACN)。SMACN相對CRRD的改進主要有兩點,首先是采用“貫穿”式的RGA方式,避免了兩次使用RGA產生的低效;其次是采用了一對多的“請求-允許-接受”方式,這種方式符合Clos網絡特定拓撲下的并行匹配,由此可以形成幾個并行的匹配平面,提高了匹配的成功率。理論上證明了SMACN的死鎖概率為無限小,仿真實驗說明SMACN雖然在均勻流量場景下與CRRD區別很小,但是在突發性的流量場景下,SMACN在吞吐率和轉發時延上比CRRD有相當程度改善。
            以下結合圖3,通過一個具體的匹配例子來進一步說明本發明所述的基于Clos網絡交換結構的貫序匹配調度算法 假設輸入模塊IM1中VOQ(1,1,1),VOQ(1,3,1)非空(即有信元在隊列中等候調度),這兩個VOQ為VOG(1,1)的成員VOQ;輸入模塊IM1中VOQ(1,2,2),VOQ(1,3,2)非空(即有信元在隊列中等候調度),這兩個VOQ為VOG(1,2)的成員VOQ;輸入模塊IM3中VOQ(3,1,1)非空,這個VOQ為VOG(3,1)的成員VOQ。
            假設此時VOG(1,1)的內部指針VOGInnerPointer(1,1)狀態如圖10所示,當前指針指向VOQ(1,4,1)。VOG(1,1)外部指針VOGExternPointer(1,1)狀態如圖11所示,當前指針指向LoC(4,1)。
            假設此時VOG(1,2)的內部指針VOGInnerPointer(1,2)狀態如圖12所示,當前指針指向VOQ(1,4,2)。VOG(1,2)外部指針VOGExternPointer(1,2)狀態如圖13所示,當前指針指向LoC(4,2)。
            假設此時VOG(3,1)的內部指針VOGInnerPointer(3,1)狀態如圖14所示,當前指針指向VOQ(3,3,1)。VOG(3,1)的外部指針VOGExternPointer(3,1)狀態如圖15所示,當前指針指向LoC(2,1)。
            假設此時LiC(1,3)的指針LiCPointer(1,3),LiC(2,1)的指針LiCPointer(2,1),LiC(3,1)的指針LiCPointer(3,1),LiC(4,3)的指針LiCPointer(4,3)的狀態如圖16所示,LiC(1,3)的指針LiCPointer(1,3)指向LoC(1,1),LiC(2,1)的指針LiCPointer(2,1)指向LoC(2,1),LiC(3,1)的指針LiCPointer(3,1)指向LoC(3,3),LiC(4,3)的指針LiCPointer(4,3)指向LoC(4,2)。
            假設此時四個中間模塊的輸出端口LoC(1,1),LoC(2,1),LoC(3,1),LoC(4,1)的指針LoCPointer(1,1),LoCPointer(2,1),LoCPointer(3,1),LoCPointer(4,1)狀態如圖17所示,LoCPointer(1,1)指向VOG(3,1),LoCPointer(2,1)指向VOG(4,1),LoCPointer(3,1)指向VOG(1,1),LoCPointer(4,1)指向VOG(2,1)。
            假設此時四個中間模塊的輸出端口LoC(1,2),LoC(2,2),LoC(3,2),LoC(4,2)的指針LoCPointer(1,2),LoCPointer(2,2),LoCPointer(3,2),LoCPointer(4,2)狀態如圖18所示,LoCPointer(1,2)指向VOG(3,2),LoCPointer(2,2)指向VOG(4,2),LoCPointer(3,2)指向VOG(1,2),LoCPointer(4,2)指向VOG(2,2)。
            假設上述指針均按順時針輪轉更新,則所說的貫序匹配調度算法步驟為 步驟1VOG(1,1)和VOG(3,1)分別通過各自所在的IM的每個輸出端口向每個CM發送請求消息,LoC(1,1),LoC(2,1),LoC(3,1),LoC(4,1)將收到且處理這兩個消息。VOG(1,2)通過IM(1)的每個輸出端口向每個CM發送請求消息,LoC(1,2),LoC(2,2),LoC(3,2),LoC(4,2)將收到且處理這個消息。
            如前所述,虛擬輸出隊列VOQ(i,p,o)進入輸入模塊IM(i)的第p個輸入端口,目的為輸出模塊OM(o)的信元形成的虛擬輸出隊列。由VOQ(1,1,1),VOQ(1,3,1)非空可知其信元要發送到OM1,由VOQ(1,2,2),VOQ(1,3,2)非空可知其信元要發送到OM2,由VOQ(3,1,1)非空可知其信元要發送到OM1。所以當由VOQ(1,1,1)所在的VOG(1,1)和VOQ(3,1,1)所在的VOG(3,1)向每個CM發送請求消息后,從圖3我們可知,只有LoC(1,1),LoC(2,1),LoC(3,1),LoC(4,1)與OM1相連,因此只有LoC(1,1),LoC(2,1),LoC(3,1),LoC(4,1)將收到且處理這兩個消息。同理,當由VOQ(1,2,2)所在的VOG(1,2)向每個CM發送請求消息后,從圖3我們可知,只有LoC(1,2),LoC(2,2),LoC(3,2),LoC(4,2)與OM2相連,因此只有LoC(1,2),LoC(2,2),LoC(3,2),LoC(4,2)將收到且處理這個消息。
            步驟2考慮LoC(1,1)的輪轉指針LoCPointer(1,1),由于此時該指針指向VOG(3,1),因此LoC(1,1)將向VOG(3,1)發送允許消息。LoC(2,1)的輪轉指針LoCPointer(2,1)當前指向VOG(4,1),按照順時針輪轉的方式,VOG(1,1)距離當前指針最近,因此LoC(2,1)將向VOG(1,1)發送允許消息。同樣的道理,LoC(3,1)將向VOG(1,1)發送允許消息;LoC(4,1)將向VOG(3,1)發送允許消息;LoC(1,2)將向VOG(1,2)發送允許消息;LoC(2,2)將向VOG(1,2)發送允許消息;LoC(3,2)將向VOG(1,2)發送允許消息;LoC(4,2)將向VOG(1,2)發送允許消息。
            步驟3LoC(1,1)發送的允許消息的目的為VOG(3,1),這個消息必須經過LiC(1,3),因為圖3已經示出CM1只有LiC(1,3)和VOG(3,1)所在的IM3相連;同理,LoC(1,2)發送的允許消息的目的為VOG(1,2),這個消息必須經過LiC(1,1),因此,在過濾階段,CM1沒有發生競爭,這兩個允許消息都被放行。
            LoC(2,1)發送的允許消息的目的為VOG(1,1),這個消息必須經過LiC(2,1),LoC(2,2)發送的允許消息的目的為VOG(1,2),這個消息必須經過LiC(2,1),在本例子中,LiC(2,1)這里發生了通行競爭,考慮LiCPointer(2,1),由于LiCPointer(2,1)指向LoC(2,1),因此放行LoC(2,1)發送的允許消息,而LoC(2,2)發送的允許消息被丟棄。
            LoC(3,1)發送的允許消息的目的為VOG(1,1),這個消息必須經過LiC(3,1),LoC(3,2)發送的允許消息的目的為VOG(1,2),這個消息必須經過LiC(3,1),在本例子中,LiC(3,1)這里也發生了通行競爭,根據上面所述的解決方式,考慮LiCPointer(3,1),當前這個指針指向LoC(3,3),LoC(3,1)距其最近,于是放行LoC(3,1)發送的允許消息,而LoC(3,2)發送的允許消息被丟棄。
            LoC(4,1)發送的允許消息的目的為VOG(3,1),這個消息必須經過LiC(4,3),LoC(4,2)發送的允許消息的目的為VOG(1,2),這個消息必須經過LiC(4,1),在本例子中,LiC(4,3)這里沒有發生通行競爭,這兩個允許消息都被放行。
            步驟4VOG(1,1)收到來自LoC(2,1)和LoC(3,1)發送過來的允許消息,由于VOG(1,1)的內部指針VOGInnerPointer(1,1)當前指向VOQ(1,4,1),按照順時針輪轉的方式,VOQ(1,1,1)距當前指針最近,因此VOG(1,1)選擇VOQ(1,1,1)發送信元。此時,VOG(1,1)的外部指針VOGExternPointer(1,1)當前指向LoC(4,1),按照順時針輪轉的方式,LoC(2,1)是距離當前指針最近的允許消息發送者,因此VOG(1,1)將首先向LoC(2,1)發送接受消息。這個接受消息沿LoC(2,1)發送允許消息完全相反的路徑到達LoC(2,1),因此將經過LiC(2,1)。如此以來,VOQ(1,1,1)到LoC(2,1)之間通路已經完全建立, 步驟5VOQ(1,1,1)發送一個信元,經過LiC(2,1)到達LoC(2,1)。在這條路經上,VOGInnerPointer(1,1),VOGExternPointer(1,1),LiCPointer(2,1),LoCPointer(2,1)的指針順時針前移到當前得到服務的目標的下一個位置。圖19顯示了這四個指針更新后的狀態。
            由于還有信元需要發送,以下繼續重復步驟4、步驟5 步驟4VOG(1,1)的內部指針VOGInnerPointer(1,1)當前指向VOQ(1,2,1),按照順時針輪轉的方式,VOQ(1,3,1)距當前指針最近,因此VOG(1,1)準備選擇VOQ(1,3,1)發送信元。VOG(1,1)的外部指針VOGExternPointer(1,1)當前指向LoC(3,1),按照順時針輪轉的方式,LoC(3,1)即是距離當前指針最近的允許消息發送者,因此VOG(1,1)將再向LoC(3,1)發送接受消息。這個接受消息沿LoC(3,1)發送允許消息完全相反的路徑到達LoC(3,1),因此將經過LiC(3,1)。如此一來,VOQ(1,3,1)到LoC(3,1)之間通路已經完全建立, 步驟5VOQ(1,3,1)發送一個信元,經過LiC(3,1)到達LoC(3,1)。在這條路經上,VOGInnerPointer(1,1),VOGExternPointer(1,1),LiCPointer(3,1),LoCPointer(3,1)的指針順時針前移到當前得到服務的目標的下一個位置。圖20顯示了這四個指針更新后的狀態。
            由于VOG(1,1)只有兩個非空VOQ,至此VOG(1,1)已經處理完畢本輪匹配。由于還有VOQ(3,1,1)的信元需要發送到OM1,以下繼續重復步驟4、步驟5 步驟4VOG(3,1)收到來自LoC(1,1)和LoC(4,1)的允許消息,VOG(3,1)的內部指針VOGInnerPointer(3,1)當前指向VOQ(3,3,1),按照順時針輪轉的方式VOQ(3,1,1)距當前指針最近,因此VOG(3,1)選擇VOQ(3,1,1)發送信元。事實上,由于VOG(3,1)僅有一個非空VOQ(3,1,1),因此VOG(3,1)也必然選擇VOQ(3,1,1)發送信元。VOG(3,1)的外部指針VOGExternPointer(3,1)當前指向LoC(2,1),按照順時針輪轉的方式,LoC(4,1)是距離當前指針最近的允許消息發送者,因此VOG(1,1)將首先向LoC(4,1)發送接受消息。這個接受消息沿LoC(4,1)發送允許消息完全相反的路徑到達LoC(4,1),因此將經過LiC(4,3)。如此一來,VOQ(3,1,1)到LoC(4,1)之間通路已經完全建立, 步驟5VOQ(3,1,1)發送一個信元,經過LiC(4,3)到達LoC(4,1)。在這條路經上,VOGInnerPointer(3,1),VOGExternPointer(3,1),LiCPointer(4,3),LoCPointer(4,1)的指針順時針前移到當前得到服務的目標的下一個位置。圖21顯示了這四個指針更新后的狀態。
            由于VOG(3,1)只有一個非空VOQ,至此VOG(3,1)已經處理完畢本輪匹配。以上就完成了需要發送到OM1的信元的匹配調度過程。下面的過程是對需要發送到OM2的信元的匹配調度。
            步驟4VOG(1,2)收到來自LoC(1,2)和LoC(4,2)的允許消息,VOG(1,2)的內部指針VOGInnerPointer(1,2)當前指向VOQ(1,4,2),按照順時針輪轉的方式VOQ(1,2,2)距當前指針最近,因此VOG(1,2)準備選擇VOQ(1,2,2)發送信元。VOG(1,2)的外部指針VOGExternPointer(1,2)當前指向LoC(4,2),按照順時針輪轉的方式,LoC(4,2)是距離當前指針最近的允許消息發送者,因此VOG(1,2)將首先向LoC(4,2)發送接受消息。這個接受消息沿LoC(4,2)發送允許消息完全相反的路徑到達LoC(4,2),因此將經過LiC(4,1)。如此以來,VOQ(1,2,2)到LoC(4,2)之間通路已經完全建立, 步驟5VOQ(1,2,2)發送一個信元,經過LiC(4,1)到達LoC(4,2)。在這條路經上,VOGInnerPointer(1,2),VOGExternPointer(1,2),LiCPointer(4,1),LoCPointer(4,2)的指針順時針前移到當前得到服務的目標的下一個位置。圖22顯示了這四個指針更新后的狀態。
            由于還有信元需要發送,以下繼續重復步驟4、步驟5 步驟4VOG(1,2)的內部指針VOGInnerPointer(1,2)當前指向VOQ(1,3,2),按照順時針輪轉的方式,VOQ(1,3,2)距當前指針最近,因此VOG(1,2)準備選擇VOQ(1,3,2)發送信元。VOG(1,2)的外部指針VOGExternPointer(1,1)當前指向LoC(1,2),按照順時針輪轉的方式,LoC(1,2)即是距離當前指針最近的允許消息發送者,因此VOG(1,1)將再向LoC(1,2)發送接受消息。這個接受消息沿LoC(1,2)發送允許消息完全相反的路徑到達LoC(1,2),因此將經過LiC(1,1)。如此一來,VOQ(1,3,2)到LoC(1,2)之間通路已經完全建立, 步驟5VOQ(1,3,2)發送一個信元,經過LiC(1,1)到達LoC(1,2)。在這條路經上,VOGInnerPointer(1,2),VOGExternPointer(1,2),LiCPointer(1,1),LoCPointer(1,2)的指針順時針前移到當前得到服務的目標的下一個位置。圖23顯示了這四個指針更新后的狀態。
            至此,就完成了所有需要發送的信元的匹配調度過程。
            權利要求
            1.一種基于Clos網絡交換結構的貫序匹配調度算法,所說的Clos網絡交換結構至少包括一個交換機機架及設置在機架上的線卡和背板,每個線卡上的前端芯片包括k個輸入模塊IM和k個輸出模塊OM,背板上的后端芯片包括m個中間模塊CM,每個輸入模塊IM均具有m個輸出端口,每個中間模塊CM均具有k個輸入端口和k個輸出端口,其特征在于所說的貫序匹配調度算法步驟為
            步驟1請求階段,每個包含非空虛擬輸出隊列VOQ的虛擬輸出組VOG,根據信元最終要送達的輸出模塊OM,通過其所在的輸入模塊IM的m個輸出端口向每個中間模塊CM的相應的輸出端口發出請求消息,
            步驟2允許階段,每個中間模塊CM的輸出端口根據輸出端口指針LoC Pointer的位置選定一個發出請求消息的虛擬輸出組VOG并向其發出允許消息,
            步驟3過濾階段,判斷是否發生通行競爭,如沒有則直接放行相應輸出端口發出的允許消息,如發生通行競爭,則每個中間模塊CM的輸入端口根據輸入端口指針LiC Pointer的位置選定一個該中間模塊CM的輸出端口并放行該輸出端口發出的允許消息,
            步驟4接受階段,每個收到允許消息的虛擬輸出組VOG,通過VOG內部指針VOGInnerPointer選定一個非空虛擬輸出隊列VOQ,再根據VOG外部指針VOGExternPointer的位置選定一個發出允許消息的中間模塊CM的輸出端口,虛擬輸出組VOG向該輸出端口發送接受消息以完成從虛擬輸出隊列VOQ到該輸出端口的通道建立過程,
            步驟5指針更新階段,非空虛擬輸出隊列VOQ通過虛擬輸出組VOG發送一個信元,依次更新VOG內部指針VOGInnerPointer、VOG外部指針VOGExternPointer、中間模塊CM的輸入端口指針LiCPointer和中間模塊CM的輸出端口指針LoCPointer,重復步驟4、步驟5直至所有非空虛擬輸出隊列VOQ的信元都被發送或者所有的允許消息都已被接受。
            2.如權利要求1所述的基于Clos網絡交換結構的貫序匹配調度算法,其特征在于輸入模塊IM中虛擬輸出隊列VOQ的組織方式為VOQ(i,p,o),i為輸入模塊的編號,p為輸入模塊的輸入端口編號,o為輸出模塊的編號;輸入模塊IM中虛擬輸出組VOG的組織方式為VOG(i,o),i為輸入模塊的編號,o為輸出模塊的編號,虛擬輸出組VOG由n個成員VOQ(i,p,o)組成,其中1≤p≤n,n為每個輸入模塊的輸入端口的個數。
            3.如權利要求1或2所述的基于Clos網絡交換結構的貫序匹配調度算法,其特征在于VOG內部指針VOGInnerPointer、VOG外部指針VOGExternPointer、中間模塊CM的輸入端口指針LiCPointer和中間模塊CM的輸出端口指針LoCPointer更新后,指針指向當前匹配目標的下一個位置。
            全文摘要
            一種基于Clos網絡交換結構的貫序匹配調度算法,涉及網絡交換調度算法領域。其步驟為步驟1輸入模塊的m個輸出端口向每個中間模塊的相應的輸出端口發出請求消息,步驟2每個中間模塊的輸出端口選定一個發出請求消息的虛擬輸出組并向其發出允許消息,步驟3每個中間模塊的輸入端口選定一個該中間模塊的輸出端口并放行該輸出端口發出的允許消息,步驟4完成從虛擬輸出隊列到輸出端口的通道建立過程,步驟5發送信元并更新指針,重復執行步驟4、步驟5直至所有信元都被發送或者所有的允許消息都已被接受。本發明所述的調度算法采用直通式匹配,整個匹配過程一次完成,同時采取多對多的“請求-允許-接受”方式,最大程度利用了調度機會。
            文檔編號H04L12/56GK101304374SQ20081008426
            公開日2008年11月12日 申請日期2008年3月28日 優先權日2008年3月28日
            發明者洋 汪, 余少華 申請人:武漢烽火網絡有限責任公司
            網友詢問留言 已有0條留言
            • 還沒有人留言評論。精彩留言會獲得點贊!
            1
            婷婷六月激情在线综合激情,亚洲国产大片,久久中文字幕综合婷婷,精品久久久久久中文字幕,亚洲一区二区三区高清不卡,99国产精品热久久久久久夜夜嗨 ,欧美日韩亚洲综合在线一区二区,99国产精品电影,伊人精品线视天天综合,精品伊人久久久大香线蕉欧美
            亚洲精品1区 国产成人一级 91精品国产欧美一区二区 亚洲精品乱码久久久久久下载 国产精品久久久久久久伊一 九色国产 国产精品九九视频 伊人久久成人爱综合网 欧美日韩亚洲区久久综合 欧美日本一道免费一区三区 夜夜爽一区二区三区精品 欧美日韩高清一区二区三区 国产成人av在线 国产精品对白交换绿帽视频 国产视频亚洲 国产在线欧美精品 国产精品综合网 国产日韩精品欧美一区色 国产日韩精品欧美一区喷 欧美日韩在线观看区一二 国产区精品 欧美视频日韩视频 中文字幕天天躁日日躁狠狠躁97 视频一二三区 欧美高清在线精品一区二区不卡 国产精品揄拍一区二区久久 99久久综合狠狠综合久久aⅴ 亚洲乱码视频在线观看 日韩在线第二页 亚洲精品无码专区在线播放 成人亚洲网站www在线观看 欧美三级一区二区 99久久精品免费看国产高清 91麻豆国产在线观看 最新日韩欧美不卡一二三区 成人在线观看不卡 日韩国产在线 在线亚洲精品 亚洲午夜久久久久中文字幕 国产精品成人久久久久久久 精品国产一区二区在线观看 欧美精品国产一区二区三区 中文在线播放 亚洲第一页在线视频 国产午夜精品福利久久 九色国产 精品国产九九 国产永久视频 久久精品人人做人人综合试看 国产一区二区三区免费观看 亚洲精品国产电影 9999热视频 国产精品资源在线 麻豆久久婷婷国产综合五月 国产精品免费一级在线观看 亚洲国产一区二区三区青草影视 中文在线播放 国产成人综合在线 国产在线观看色 国产亚洲三级 国产片一区二区三区 久久99精品久久久久久牛牛影视 亚洲欧美日韩国产 四虎永久免费网站 国产一毛片 国产精品视频在 九九热在线精品 99精品福利视频 色婷婷色99国产综合精品 97成人精品视频在线播放 精品久久久久久中文字幕 亚洲欧美一区二区三区孕妇 亚洲欧美成人网 日韩高清在线二区 国产尤物在线观看 在线不卡一区二区 91网站在线看 韩国精品福利一区二区 欧美日韩国产成人精品 99热精品久久 国产精品免费视频一区 高清视频一区 精品九九久久 欧美日韩在线观看免费 91欧美激情一区二区三区成人 99福利视频 亚洲国产精品91 久热国产在线 精品久久久久久中文字幕女 国产精品久久久久久久久99热 成人自拍视频网 国产精品视频久久久久久 久久影院国产 国产玖玖在线观看 99精品在线免费 亚洲欧美一区二区三区导航 久久久久久久综合 国产欧美日韩精品高清二区综合区 国产精品视频自拍 亚洲一级片免费 久久久久久九九 国产欧美自拍视频 视频一区二区在线观看 欧美日韩一区二区三区久久 中文在线亚洲 伊人热人久久中文字幕 日韩欧美亚洲国产一区二区三区 欧美亚洲国产成人高清在线 欧美日韩国产码高清综合人成 国产性大片免费播放网站 亚洲午夜综合网 91精品久久一区二区三区 国产无套在线播放 国产精品视频网站 国产成人亚洲精品老王 91在线网站 国产视频97 欧美黑人欧美精品刺激 国产一区二区三区免费在线视频 久久久国产精品免费看 99re6久精品国产首页 久久精品91 国产成人一级 国产成人精品曰本亚洲 日本福利在线观看 伊人成综合网 久久综合一本 国产综合久久久久久 久久精品成人免费看 久久福利 91精品国产91久久久久久麻豆 亚洲精品成人在线 亚洲伊人久久精品 欧美日本二区 国产永久视频 国产一区二 一区二区福利 国产一毛片 亚洲精品1区 毛片一区二区三区 伊人久久大香线蕉综合影 国产欧美在线观看一区 亚洲国产欧洲综合997久久 国产一区二区免费视频 国产91精品对白露脸全集观看 久久亚洲国产伦理 欧美成人伊人久久综合网 亚洲性久久久影院 久久99国产精一区二区三区! 91精品国产欧美一区二区 欧美日韩亚洲区久久综合 日韩精品一二三区 久久久夜色精品国产噜噜 国产在线精品福利91香蕉 久久久久久久亚洲精品 97se色综合一区二区二区 91国语精品自产拍在线观看性色 91久久国产综合精品女同我 日韩中文字幕a 国产成人亚洲日本精品 久久国产精品-国产精品 久久国产经典视频 久久国产精品伦理 亚洲第一页在线视频 国产精品久久久久三级 日韩毛片网 久久免费高清视频 麻豆国产在线观看一区二区 91麻豆国产福利在线观看 国产成人精品男人的天堂538 一区二区三区中文字幕 免费在线视频一区 欧美日韩国产成人精品 国产综合网站 国产资源免费观看 亚洲精品亚洲人成在线播放 精品久久久久久中文字幕专区 亚洲人成人毛片无遮挡 国产一起色一起爱 国产香蕉精品视频在 九九热免费观看 日韩亚洲欧美一区 九九热精品在线观看 精品久久久久久中文字幕专区 亚洲欧美自拍偷拍 国产精品每日更新 久久久久国产一级毛片高清板 久久天天躁狠狠躁夜夜中文字幕 久久精品片 日韩在线毛片 国产成人精品本亚洲 国产成人精品一区二区三区 九九热在线观看 国产r级在线观看 国产欧美日韩精品高清二区综合区 韩国电影一区二区 国产精品毛片va一区二区三区 五月婷婷伊人网 久久一区二区三区免费 一本色道久久综合狠狠躁篇 亚洲综合色站 国产尤物在线观看 亚洲一区亚洲二区 免费在线视频一区 欧洲精品视频在线观看 日韩中文字幕a 中文字幕日本在线mv视频精品 91精品在线免费视频 精品国产免费人成在线观看 精品a级片 中文字幕日本在线mv视频精品 日韩在线精品视频 婷婷丁香色 91精品国产高清久久久久 国产成人精品日本亚洲直接 五月综合视频 欧美日韩在线亚洲国产人 精液呈暗黄色 亚洲乱码一区 久久精品中文字幕不卡一二区 亚洲天堂精品在线 激情婷婷综合 国产免费久久精品久久久 国产精品亚洲二区在线 久久免费播放视频 五月婷婷丁香综合 在线亚洲欧美日韩 久久免费精品高清麻豆 精品久久久久久中文字幕 亚洲一区网站 国产精品福利社 日韩中文字幕免费 亚洲综合丝袜 91精品在线播放 国产精品18 亚洲日日夜夜 伊人久久大香线蕉综合影 亚洲精品中文字幕乱码影院 亚洲一区二区黄色 亚洲第一页在线视频 一区二区在线观看视频 国产成人福利精品视频 亚洲高清二区 国内成人免费视频 精品亚洲性xxx久久久 国产精品合集一区二区三区 97av免费视频 国产一起色一起爱 国产区久久 国产资源免费观看 99精品视频免费 国产成人一级 国产精品九九免费视频 欧美91精品久久久久网免费 99热国产免费 久久精品色 98精品国产综合久久 久久精品播放 中文字幕视频免费 国产欧美日韩一区二区三区在线 精品久久蜜桃 国产小视频精品 一本色道久久综合狠狠躁篇 91在线免费观看 亚洲精品区 伊人成综合网 伊人热人久久中文字幕 伊人黄色片 99国产精品热久久久久久夜夜嗨 久久免费精品视频 亚洲一区二区三区高清不卡 久久久久国产一级毛片高清板 国产片一区二区三区 久久狠狠干 99久久婷婷国产综合精品电影 国产99区 国产精品成人久久久久 久久狠狠干 青青国产在线观看 亚洲高清国产拍精品影院 国产精品一区二区av 九九热在线免费视频 伊人久久国产 国产精品久久久久久久久久一区 在线观看免费视频一区 国产精品自在在线午夜区app 国产精品综合色区在线观看 国产毛片久久久久久国产毛片 97国产免费全部免费观看 国产精品每日更新 国产尤物视频在线 九九视频这里只有精品99 一本一道久久a久久精品综合 久久综合给会久久狠狠狠 国产成人精品男人的天堂538 欧美一区二区高清 毛片一区二区三区 国产欧美日韩在线观看一区二区三区 在线国产二区 欧美不卡网 91在线精品中文字幕 在线国产福利 国内精品91久久久久 91亚洲福利 日韩欧美国产中文字幕 91久久精品国产性色也91久久 亚洲性久久久影院 欧美精品1区 国产热re99久久6国产精品 九九热免费观看 国产精品欧美日韩 久久久久国产一级毛片高清板 久久国产经典视频 日韩欧美亚洲国产一区二区三区 欧美亚洲综合另类在线观看 国产精品自在在线午夜区app 97中文字幕在线观看 视频一二三区 精品国产一区在线观看 国产欧美日韩在线一区二区不卡 欧美一区二三区 伊人成人在线观看 国内精品91久久久久 97在线亚洲 国产在线不卡一区 久久久全免费全集一级全黄片 国产精品v欧美精品∨日韩 亚洲毛片网站 在线不卡一区二区 99re热在线视频 久久激情网 国产毛片一区二区三区精品 久久亚洲综合色 中文字幕视频免费 国产视频亚洲 婷婷伊人久久 国产一区二区免费播放 久久99国产精品成人欧美 99国产在线视频 国产成人免费视频精品一区二区 国产不卡一区二区三区免费视 国产码欧美日韩高清综合一区 久久精品国产主播一区二区 国产一区电影 久久精品国产夜色 国产精品国产三级国产 日韩一区二区三区在线 久久97久久97精品免视看 久久国产免费一区二区三区 伊人久久大香线蕉综合电影网 99re6久精品国产首页 久久激情网 亚洲成人高清在线 国产精品网址 国产成人精品男人的天堂538 香蕉国产综合久久猫咪 国产专区中文字幕 91麻豆精品国产高清在线 久久国产经典视频 国产精品成人va在线观看 国产精品爱啪在线线免费观看 日本精品久久久久久久久免费 亚洲综合一区二区三区 久久五月网 精品国产网红福利在线观看 久久综合亚洲伊人色 亚洲国产精品久久久久久网站 在线日韩国产 99国产精品热久久久久久夜夜嗨 国产综合精品在线 国产区福利 精品亚洲综合久久中文字幕 国产制服丝袜在线 毛片在线播放网站 在线观看免费视频一区 国产精品久久久精品三级 亚洲国产电影在线观看 最新日韩欧美不卡一二三区 狠狠综合久久综合鬼色 日本精品1在线区 国产日韩一区二区三区在线播放 欧美日韩精品在线播放 亚洲欧美日韩国产一区二区三区精品 久久综合久久网 婷婷六月激情在线综合激情 亚洲乱码一区 国产专区91 97av视频在线观看 精品久久久久久中文字幕 久久五月视频 国产成人福利精品视频 国产精品网址 中文字幕视频在线 精品一区二区三区免费视频 伊人手机在线视频 亚洲精品中文字幕乱码 国产在线视频www色 色噜噜国产精品视频一区二区 精品亚洲成a人在线观看 国产香蕉尹人综合在线 成人免费一区二区三区在线观看 国产不卡一区二区三区免费视 欧美精品久久天天躁 国产专区中文字幕 久久精品国产免费中文 久久精品国产免费一区 久久无码精品一区二区三区 国产欧美另类久久久精品免费 欧美精品久久天天躁 亚洲精品在线视频 国产视频91在线 91精品福利一区二区三区野战 日韩中文字幕免费 国产精品99一区二区三区 欧美成人高清性色生活 国产精品系列在线观看 亚洲国产福利精品一区二区 国产成人在线小视频 国产精品久久久久免费 99re热在线视频 久久久久久久综合 一区二区国产在线播放 成人国产在线视频 亚洲精品乱码久久久久 欧美日韩一区二区综合 精品久久久久免费极品大片 中文字幕视频二区 激情粉嫩精品国产尤物 国产成人精品一区二区视频 久久精品中文字幕首页 亚洲高清在线 国产精品亚洲一区二区三区 伊人久久艹 中文在线亚洲 国产精品一区二区在线播放 国产精品九九免费视频 亚洲二区在线播放 亚洲狠狠婷婷综合久久久久网站 亚洲欧美日韩网站 日韩成人精品 亚洲国产一区二区三区青草影视 91精品国产福利在线观看 国产精品久久久久久久久99热 国产一区二区精品尤物 久碰香蕉精品视频在线观看 亚洲日日夜夜 在线不卡一区二区 国产午夜亚洲精品 九九热在线视频观看这里只有精品 伊人手机在线视频 91免费国产精品 日韩欧美中字 91精品国产91久久久久 国产全黄三级播放 视频一区二区三区免费观看 国产开裆丝袜高跟在线观看 国产成人欧美 激情综合丝袜美女一区二区 国产成人亚洲综合无 欧美精品一区二区三区免费观看 欧美亚洲国产日韩 日韩亚州 国产欧美日韩精品高清二区综合区 亚洲午夜国产片在线观看 精品久久久久久中文字幕 欧美精品1区 久久伊人久久亚洲综合 亚洲欧美日韩精品 国产成人精品久久亚洲高清不卡 久久福利影视 国产精品99精品久久免费 久久久久免费精品视频 国产日产亚洲精品 亚洲国产午夜电影在线入口 精品无码一区在线观看 午夜国产精品视频 亚洲一级片免费 伊人久久大香线蕉综合影 国产精品久久影院 久碰香蕉精品视频在线观看 www.欧美精品 在线小视频国产 亚洲国产天堂久久综合图区 欧美一区二区三区不卡 日韩美女福利视频 九九精品免视频国产成人 不卡国产00高中生在线视频 亚洲第一页在线视频 欧美日韩在线播放成人 99re视频这里只有精品 国产精品91在线 精品乱码一区二区三区在线 国产区久久 91麻豆精品国产自产在线观看一区 日韩精品成人在线 九九热在线观看 国产精品久久不卡日韩美女 欧美一区二区三区综合色视频 欧美精品免费一区欧美久久优播 国产精品网址 国产专区中文字幕 国产精品欧美亚洲韩国日本久久 日韩美香港a一级毛片 久久精品123 欧美一区二区三区免费看 99r在线视频 亚洲精品国产字幕久久vr 国产综合激情在线亚洲第一页 91免费国产精品 日韩免费小视频 亚洲国产精品综合一区在线 国产亚洲第一伦理第一区 在线亚洲精品 国产精品一区二区制服丝袜 国产在线成人精品 九九精品免视频国产成人 亚洲国产网 欧美日韩亚洲一区二区三区在线观看 在线亚洲精品 欧美一区二区三区高清视频 国产成人精品男人的天堂538 欧美日韩在线观看区一二 亚洲欧美一区二区久久 久久精品中文字幕首页 日本高清www午夜视频 久久精品国产免费 久久999精品 亚洲国产精品欧美综合 88国产精品视频一区二区三区 91久久偷偷做嫩草影院免费看 国产精品夜色视频一区二区 欧美日韩导航 国产成人啪精品午夜在线播放 一区二区视频在线免费观看 99久久精品国产自免费 精液呈暗黄色 久久99国产精品 日本精品久久久久久久久免费 精品国产97在线观看 99re视频这里只有精品 国产视频91在线 999av视频 亚洲美女视频一区二区三区 久久97久久97精品免视看 亚洲国产成人久久三区 99久久亚洲国产高清观看 日韩毛片在线视频 综合激情在线 91福利一区二区在线观看 一区二区视频在线免费观看 激情粉嫩精品国产尤物 国产成人精品曰本亚洲78 国产成人精品本亚洲 国产精品成人免费视频 国产成人啪精品视频免费软件 久久精品国产亚洲妲己影院 国产精品成人久久久久久久 久久大香线蕉综合爱 欧美一区二区三区高清视频 99热国产免费 在线观看欧美国产 91精品视频在线播放 国产精品福利社 欧美精品一区二区三区免费观看 国产一区二区免费视频 国产午夜精品一区二区 精品视频在线观看97 91精品福利久久久 国产一区福利 国产综合激情在线亚洲第一页 国产精品久久久久久久久久久不卡 九色国产 在线日韩国产 黄网在线观看 亚洲一区小说区中文字幕 中文字幕丝袜 日本二区在线观看 日本国产一区在线观看 欧美日韩一区二区三区久久 欧美精品亚洲精品日韩专 国产日产亚洲精品 久久综合九色综合欧美播 亚洲国产欧美无圣光一区 欧美视频区 亚洲乱码视频在线观看 久久无码精品一区二区三区 九九热精品免费视频 久久99精品久久久久久牛牛影视 国产精品成久久久久三级 国产一区福利 午夜国产精品视频 日本二区在线观看 99久久网站 国产亚洲天堂 精品国产一区二区三区不卡 亚洲国产日韩在线一区 国产成人综合在线观看网站 久久免费高清视频 欧美在线导航 午夜精品久久久久久99热7777 欧美久久综合网 国产小视频精品 国产尤物在线观看 亚洲国产精品综合一区在线 欧美一区二区三区不卡视频 欧美黑人欧美精品刺激 日本福利在线观看 久久国产偷 国产手机精品一区二区 国产热re99久久6国产精品 国产高清啪啪 欧美亚洲国产成人高清在线 国产在线第三页 亚洲综合一区二区三区 99r在线视频 99精品久久久久久久婷婷 国产精品乱码免费一区二区 国产在线精品福利91香蕉 国产尤物视频在线 五月婷婷亚洲 中文字幕久久综合伊人 亚洲精品一级毛片 99国产精品电影 在线视频第一页 久久99国产精品成人欧美 国产白白视频在线观看2 成人精品一区二区www 亚洲成人网在线观看 麻豆91在线视频 色综合合久久天天综合绕视看 久久精品国产免费高清 国产不卡一区二区三区免费视 欧美国产中文 99精品欧美 九九在线精品 国产中文字幕在线免费观看 国产一区中文字幕在线观看 国产成人一级 国产精品一区二区制服丝袜 国产一起色一起爱 亚洲精品成人在线 亚洲欧美精品在线 国产欧美自拍视频 99精品久久久久久久婷婷 久99视频 国产热re99久久6国产精品 视频一区亚洲 国产精品视频分类 国产精品成在线观看 99re6久精品国产首页 亚洲在成人网在线看 亚洲国产日韩在线一区 久久国产三级 日韩国产欧美 欧美在线一区二区三区 国产精品美女一级在线观看 成人午夜免费福利视频 亚洲天堂精品在线 91精品国产手机 欧美日韩视频在线播放 狠狠综合久久综合鬼色 九一色视频 青青视频国产 亚洲欧美自拍一区 中文字幕天天躁日日躁狠狠躁97 日韩免费大片 996热视频 伊人成综合网 亚洲天堂欧美 日韩精品亚洲人成在线观看 久久综合给会久久狠狠狠 日韩精品亚洲人成在线观看 日韩国产欧美 亚洲成aⅴ人片在线影院八 亚洲精品1区 99久久精品免费 国产精品高清在线观看 国产精品久久久免费视频 在线亚洲欧美日韩 91在线看视频 国产精品96久久久久久久 欧美日韩国产成人精品 91在线亚洲 热久久亚洲 国产精品美女免费视频观看 日韩在线毛片 亚洲永久免费视频 九九免费在线视频 亚洲一区网站 日本高清二区视频久二区 精品国产美女福利在线 伊人久久艹 国产精品久久久久三级 欧美成人精品第一区二区三区 99久久精品国产自免费 在线观看日韩一区 国产中文字幕一区 成人免费午夜视频 欧美日韩另类在线 久久99国产精品成人欧美 色婷婷中文网 久久天天躁夜夜躁狠狠躁2020 欧美成人伊人久久综合网 国产精品福利资源在线 国产伦精品一区二区三区高清 国产精品亚洲综合色区韩国 亚洲一区欧美日韩 色综合视频 国语自产精品视频在线区 国产高清a 成人国内精品久久久久影 国产在线精品香蕉综合网一区 国产不卡在线看 国产成人精品精品欧美 国产欧美日韩综合精品一区二区三区 韩国电影一区二区 国产在线视频www色 91中文字幕在线一区 国产人成午夜免视频网站 亚洲综合一区二区三区 色综合视频一区二区观看 久久五月网 九九热精品在线观看 国产一区二区三区国产精品 99久热re在线精品996热视频 亚洲国产网 在线视频亚洲一区 日韩字幕一中文在线综合 国产高清一级毛片在线不卡 精品国产色在线 国产高清视频一区二区 精品日本久久久久久久久久 亚洲国产午夜精品乱码 成人免费国产gav视频在线 日韩欧美一区二区在线观看 欧美曰批人成在线观看 韩国电影一区二区 99re这里只有精品6 日韩精品一区二区三区视频 99re6久精品国产首页 亚洲欧美一区二区三区导航 欧美色图一区二区三区 午夜精品视频在线观看 欧美激情在线观看一区二区三区 亚洲热在线 成人国产精品一区二区网站 亚洲一级毛片在线播放 亚洲一区小说区中文字幕 亚洲午夜久久久久影院 国产自产v一区二区三区c 国产精品视频免费 久久调教视频 国产成人91激情在线播放 国产精品欧美亚洲韩国日本久久 久久亚洲日本不卡一区二区 91中文字幕网 成人国产在线视频 国产视频91在线 欧美成人精品第一区二区三区 国产精品福利在线 久久综合九色综合精品 欧美一区二区三区精品 久久国产综合尤物免费观看 久久99青青久久99久久 日韩精品免费 久久国产精品999 91亚洲视频在线观看 国产精品igao视频 色综合区 在线亚洲欧国产精品专区 国产一区二区三区在线观看视频 亚洲精品成人在线 一区二区国产在线播放 中文在线亚洲 亚洲精品第一国产综合野 国产一区二区精品久久 一区二区三区四区精品视频 99热精品久久 中文字幕视频二区 国产成人精品男人的天堂538 99精品影视 美女福利视频一区二区 久久午夜夜伦伦鲁鲁片 综合久久久久久久综合网 国产精品国产欧美综合一区 国产99视频在线观看 国产亚洲女在线精品 婷婷影院在线综合免费视频 国产亚洲3p一区二区三区 91成人爽a毛片一区二区 亚洲一区二区高清 国产欧美亚洲精品第二区首页 欧美日韩导航 亚洲高清二区 欧美激情观看一区二区久久 日韩毛片在线播放 亚洲欧美日韩高清中文在线 亚洲日本在线播放 国产精品一区二区制服丝袜 精品国产一区二区三区不卡 国产不卡在线看 国产欧美网站 四虎永久在线观看视频精品 国产黄色片在线观看 夜夜综合 一本色道久久综合狠狠躁篇 欧美亚洲综合另类在线观看 国产91在线看 伊人久久国产 欧美一区二区在线观看免费网站 国产精品久久久久三级 久久福利 日韩中文字幕a 亚洲午夜久久久久影院 91在线高清视频 国产亚洲一区二区三区啪 久久人精品 国产精品亚洲午夜一区二区三区 综合久久久久久 久久伊人一区二区三区四区 国产综合久久久久久 日韩一区精品视频在线看 国产精品日韩欧美制服 日本精品1在线区 99re视频 无码av免费一区二区三区试看 国产视频1区 日韩欧美中文字幕一区 日本高清中文字幕一区二区三区a 亚洲国产欧美无圣光一区 国产在线视频一区二区三区 欧美国产第一页 在线亚洲欧美日韩 日韩中文字幕第一页 在线不卡一区二区 伊人久久青青 国产精品一区二区在线播放 www.五月婷婷 麻豆久久婷婷国产综合五月 亚洲精品区 久久国产欧美另类久久久 99在线视频免费 伊人久久中文字幕久久cm 久久精品成人免费看 久久这里只有精品首页 88国产精品视频一区二区三区 中文字幕日本在线mv视频精品 国产在线精品成人一区二区三区 伊人精品线视天天综合 亚洲一区二区黄色 国产尤物视频在线 亚洲精品99久久久久中文字幕 国产一区二区三区免费观看 伊人久久大香线蕉综合电影网 国产成人精品区在线观看 日本精品一区二区三区视频 日韩高清在线二区 久久免费播放视频 一区二区成人国产精品 国产精品免费精品自在线观看 亚洲精品视频二区 麻豆国产精品有码在线观看 精品日本一区二区 亚洲欧洲久久 久久中文字幕综合婷婷 中文字幕视频在线 国产成人精品综合在线观看 91精品国产91久久久久福利 精液呈暗黄色 香蕉国产综合久久猫咪 国产专区精品 亚洲精品无码不卡 国产永久视频 亚洲成a人片在线播放观看国产 一区二区国产在线播放 亚洲一区二区黄色 欧美日韩在线观看视频 亚洲精品另类 久久国产综合尤物免费观看 国产一区二区三区国产精品 高清视频一区 国产精品igao视频 国产精品资源在线 久久综合精品国产一区二区三区 www.五月婷婷 精品色综合 99热国产免费 麻豆福利影院 亚洲伊人久久大香线蕉苏妲己 久久电影院久久国产 久久精品伊人 在线日韩理论午夜中文电影 亚洲国产欧洲综合997久久 伊人国产精品 久草国产精品 欧美一区精品二区三区 亚洲成人高清在线 91免费国产精品 日韩精品福利在线 国产一线在线观看 国产不卡在线看 久久99青青久久99久久 亚洲精品亚洲人成在线播放 99久久免费看国产精品 国产日本在线观看 青草国产在线视频 麻豆久久婷婷国产综合五月 国产中文字幕一区 91久久精品国产性色也91久久 国产一区a 国产欧美日韩成人 国产亚洲女在线精品 一区二区美女 中文字幕在线2021一区 在线小视频国产 久久这里只有精品首页 国产在线第三页 欧美日韩中文字幕 在线亚洲+欧美+日本专区 精品国产一区二区三区不卡 久久这里精品 欧美在线va在线播放 精液呈暗黄色 91精品国产手机 91在线免费播放 欧美视频亚洲色图 欧美国产日韩精品 日韩高清不卡在线 精品视频免费观看 欧美日韩一区二区三区四区 国产欧美亚洲精品第二区首页 亚洲韩精品欧美一区二区三区 国产精品视频免费 在线精品小视频 久久午夜夜伦伦鲁鲁片 国产无套在线播放 久热这里只精品99re8久 欧美久久久久 久久香蕉国产线看观看精品蕉 国产成人精品男人的天堂538 亚洲人成网站色7799在线观看 日韩在线第二页 一本色道久久综合狠狠躁篇 国产一区二区三区不卡在线观看 亚洲乱码在线 在线观看欧美国产 久久福利青草精品资源站免费 国产玖玖在线观看 在线亚洲精品 亚洲成aⅴ人在线观看 精品91在线 欧美一区二三区 日韩中文字幕视频在线 日本成人一区二区 日韩免费专区 国内精品在线观看视频 久久国产综合尤物免费观看 国产精品系列在线观看 一本一道久久a久久精品综合 亚洲免费播放 久久精品国产免费 久久人精品 亚洲毛片网站 亚洲成a人一区二区三区 韩国福利一区二区三区高清视频 亚洲精品天堂在线 一区二区三区中文字幕 亚洲国产色婷婷精品综合在线观看 亚洲国产成人久久笫一页 999国产视频 国产精品香港三级在线电影 欧美日韩一区二区三区四区 日韩国产欧美 国产精品99一区二区三区 午夜国产精品理论片久久影院 亚洲精品中文字幕麻豆 亚洲国产高清视频 久久免费手机视频 日韩a在线观看 五月婷婷亚洲 亚洲精品中文字幕麻豆 中文字幕丝袜 www国产精品 亚洲天堂精品在线 亚洲乱码一区 国产日韩欧美三级 久久999精品 伊人热人久久中文字幕 久热国产在线视频 国产欧美日韩在线观看一区二区三区 国产一二三区在线 日韩国产欧美 91精品国产91久久久久 亚洲一区小说区中文字幕 精品一区二区免费视频 国产精品视频免费 国产精品亚洲综合色区韩国 亚洲国产精品成人午夜在线观看 欧美国产日韩精品 中文字幕精品一区二区精品