層次式交換網絡節點域的一種控制方法

            文檔序號:7906996閱讀:364來源:國知局
            專利名稱:層次式交換網絡節點域的一種控制方法
            技術領域
            本發明涉及網絡管理和交換控制的方法與系統。
            從邏輯上看,層次式交換網絡的骨干網結構是由多個層次結構組成的樹型結構。簡單樹型結構雖然因為兩個節點之間鏈路唯一而簡化了路由,但是一條信道或節點的失效會導致該信道或節點下連的子樹失去連接性,從而造成一批下屬子樹的斷連,而且這種唯一的路徑不能滿足靈活的路由需求。因此,層次式交換網絡的拓撲結構不采用簡單樹型結構,而是對嚴格的樹型結構加以擴展,采用基于邏輯節點域、邏輯鏈路、短接鏈路的擴展結構來避免簡單樹型結構的缺點。
            基于邏輯節點域與邏輯鏈路的擴展是指以邏輯節點(或稱節點域)替代樹型結構的節點,以邏輯鏈路替代樹型結構的分支,以邏輯節點和邏輯鏈路為基本元素按樹型結構組織成邏輯上的樹型結構網絡,保持層次樹型結構的特點。在物理實現角度看,每個邏輯節點域中有多個節點,這些節點互聯保證了交換節點容量的可擴展性和路徑選擇的靈活性;而每條邏輯鏈路又包含了多條物理鏈路,從而擴展了邏輯鏈路的帶寬。這種擴展方法既保持了樹型結構的特點,又保證了可靠性和可擴展性。
            基于短接的擴展是指在不同的子樹間增加直接鏈路,從而使得子樹間存在第二條有效路徑,因而子樹間的流量不一定需要它們共同的祖先節點轉發。短接鏈路是局部自治的,只有短接鏈路兩端直接關聯的節點域才感知此短接的存在,對其它節點域透明。這種擴展方法主要解決嚴格層次結構的靈活性和效率問題,既保持了拓撲的層次性,又具有靈活的拓撲結構,從而提供最大的聯網靈活性,并且在將現有網狀連接的網絡轉換成層次式交換網絡時能保留已有的任意連接的拓撲結構。
            擴展后的層次式交換網絡是以節點域、邏輯鏈路、短接鏈路作為基本元素構造的層次網絡。層次式交換網絡的管理和交換控制過程以節點域為基本單位,獨立于其它節點域,因而節點域是一個自治域Autonomous Domain(AD)。由于節點域本身是一個規模有限、功能相對單一的系統,因此需要高性能、高可靠的管理和控制方法。
            目前存在的自治域系統控制方法有RIP(路由信息協議Routing InformationProtocol)、OSPF(開放的最短路徑優先Open Shortest Path First)、PNNI(專用網絡間接口Private Network-Network Interface Specification)、以及MPLS(多協議標記交換Multiprotocol Label Switching)。這些方法和系統面向大規模、松散的自治系統,都有復雜的路由信息交換與路由計算過程。路由器依靠如OSPF或IS-IS(中間系統-中間系統Intermediate System to Intermediate System)的路由協議交換信息,參與當前整個自治系統內的路由、管理與控制操作。由于這些協議復雜且交互范圍大,互操作能力弱,導致故障恢復時間、負載平衡能力、資源利用率不理想如依賴于如RIP、OSPF、IS-IS等內部網關協議的失效檢測和故障信息發布,當自治域較大時,其收斂時間達分鐘級,故障恢復時間長,因此會造成TCP連接的中斷;而自治系統內部的負載均衡主要依賴于基于AS內部粗粒度協議級路由協議的負載均衡功能,如OSPF的等價多路徑功能,這些功能相對較弱;如Z.Wang和J.Crowcroft(Shortest Path Firstwith Emergency Exits,Proceedings of the 1990 ACM SIGCOMM Conference,1990)、D.Sidhu等(Finding Disjoint Paths in Networks,Proceedings of the 1991 ACM SIGCOMMConference,1991)、S.Bahk和M.E.Zarki(Dynamic Multi-path Routing and How itCompares with Other Dynamic Routing Algorithms for High Speed Wide Area Networks,Proceedings of the 1992 ACM SIGCOMM Conference,Vol.22,Oct.1 992)所提出的多路徑路由方案,由于其存儲、計算開銷大,因此大大增加了路由協議的復雜度。
            為了提高路由器的轉發速度和提供服務質量保證,人們試圖盡量用交換來代替路由,提出了綜合網絡核心交換和網絡邊緣IP路由二者的優點而產生的IP/MPLS路由/標記交換結構。在IP/MPLS結構下,路由是永遠避不開的,只能做到部分地減少路由表查找次數,并沒有從根本上解決問題第一,沒有消除路由表復雜的生成過程、龐大的路由表、及對路由表費時的查詢工作;第二,不能對各個獨立的、時間上隨機到達的IP包是否屬于同一個流進行有效的認定;第三,當流的數量很大時,識別流的計算開銷以及保存流狀態的存儲開銷都很大;第四,由于難以預測一個流的長度,因此對于一個短流,可能剛為其建立標記交換路徑它就馬上就結束了,其效果比路由還差;第五,采用標記交換提高了復雜度,例如標記的生成、分配、管理等,使得核心網內部越做越復雜,增加了Internet核心的復雜性。
            綜上所述,已有的協議功能復雜、效率不高,不能滿足節點域管理與控制的需求。發明目的由于層次式交換網絡是為了建立大規模的核心骨干網絡,而節點域是其管理與控制的基本單位,因此節點域的設計目標是提高可靠性和性能、增加節點域吞吐量、減少延遲和內部擁塞、實現節點域負載平衡和故障恢復、以及減少內部控制和管理的復雜度。這些設計目標是通過節點域控制方法的設計來實現的,因此評價節點域控制方法的標準包括可擴展性、容錯能力、負載均衡能力。本發明所設計的節點域交換控制方法要解決的問題包括(1)控制和管理一個邏輯節點域內的各個交換機,使其對外像一個交換機一樣,對內則有效、合理地發揮每個物理交換機的作用;(2)控制和管理一條邏輯鏈路內的各外部輸出鏈路,使其對外像一條鏈路一樣,對內均衡地在各不同速率的外部輸出鏈路上分擔通信量。
            發明的技術方案本發明所采用的技術方案是將節點域控制方法分為兩個部分,即節點域管理方法和節點域交換控制方法。節點域管理方法通過實時檢測交換機和鏈路的狀態得到節點域內部各種配置表;節點域交換控制方法根據內部配置表控制數據包在節點域的轉發。
            節點域是介于松散的自治系統(Autonomous System,即AS)與緊密集中的單一系統之間的一種半自治、半集中系統。當前Internet是一種自治系統,采用松散的非集中控制方式;而采用集中控制的單一系統追求單系統性能,存在可擴展性和靈活性問題。節點域內部拓撲采用密集互聯方式,內部交換能力相對于外部鏈路帶寬足夠大。由于節點域的功能單一、位置集中、規模適當,因此本方法在節點域內部節點間采用輕量級高效率的控制方法,將內部節點整合成一個虛擬的單一映象系統,并且提供更有效的資源共享、負載均衡、容錯能力,提高節點域的整體性能。
            1.本發明使用的基本術語(1)層次式交換(Hierarchical Switching)網絡的拓撲與地址采用層次結構且嚴格匹配,數據包轉發依賴目標地址的相應層次實現數據包的交換。
            (2)層次式交換網絡(Hierarchically Switched Network,即HSNET)指符合層次式交換的網絡,在該網絡中使用層次式交換。
            (3)節點域也叫邏輯節點或虛擬節點,是HSNET基本邏輯元素之一,指由一組互相連接的交換機和其他功能的服務器(如策略服務器、帶寬代理服務器、各類管理信息庫等)所組成的自治域。
            (4)節點節點域內部的交換機和其他功能服務器,統稱為節點。
            (5)根域處于層次式交換網絡頂層的節點域,根域可以與其他HSNET網絡或非HSNET網絡進行互聯。
            (6)父域處于某節點域直接上層的節點域。
            (7)子域處于某節點域直接下層的節點域。
            (8)兄弟域某節點域直接下層的所有節點域互稱兄弟域。
            (9)鏈路在數據鏈路層實現節點間通信的媒介或設施,如PPP鏈路、以太網、X.25、幀中繼、ATM網、或高層隧道等。
            (10)外部鏈路本節點域與其他節點域相連的鏈路。
            (11)內部鏈路連接本節點域內部節點的鏈路。
            (12)邏輯鏈路也稱虛擬鏈路,是HSNET基本邏輯元素之一。一條邏輯鏈路指本節點域連接其他某節點域的所有外部鏈路的集合。一個節點域的邏輯鏈路包括一個指向父節點域的邏輯鏈路、若干個指向子節點域的邏輯鏈路、以及若干個短接邏輯鏈路。
            (13)端口端口是節點用來與鏈路連接的部件。在節點域中,端口由節點ID和端口在該節點的標號標識。端口一般包括輸入、輸出兩部分。在節點域內,依據所連接的鏈路不同分為外部端口和內部端口。
            (14)外部端口與外部鏈路相連的端口稱外部端口。一個外部端口可以分為輸入外部端口和輸出外部端口兩部分。
            (15)內部端口與內部鏈路相連的端口稱內部端口。
            (16)邏輯端口與邏輯鏈路一一對應的端口,是邏輯鏈路所包含的外部鏈路在本節點域的外部端口集合。
            (17)鄰居連接到同一鏈路的節點互稱鄰居。
            (18)邊界節點與其他網絡(HSNET網絡或非HSNET網絡)相連的節點。
            (19)邊界端口與其他網絡(HSNET網絡或非HSNET網絡)相連的端口。
            2.節點域的結構從邏輯上看,節點域是層次式交換網絡樹型結構的一個節點,邏輯鏈路是層次式交換網絡樹型結構的一條邊,而短接鏈路則在樹型結構任意兩個節點間建立局部的快速通道;從物理實現角度看,每個節點域內部多個交換機互聯保證了節點域的容量可擴展性以及可靠性,每條邏輯鏈路包含多條物理鏈路擴展了邏輯鏈路的帶寬和可靠性,短接鏈路將兩個節點域兩端直接關聯以便提高網絡的效率和路徑選擇的靈活性。以節點域、邏輯鏈路、短接鏈路為基本元素,按樹型結構組織成邏輯上的層次式網絡,這種層次式交換網絡保持層次結構特點,同時提高了網絡的可擴展性、可靠性和靈活性。


            圖1是節點域結構示意圖,(1)是層次式交換網絡的一個節點域,(2)是邏輯鏈路,(3)是短接邏輯鏈路,(4)是服務器,(5)是交換機。節點域(1)是樹型結構上的一個交換節點,其功能如同一個交換機。連接兩個相鄰節點域間的外部鏈路集合抽象為邏輯鏈路(2),每個邏輯鏈路由多條外部鏈路組成。對于某一節點域而言,有一上行邏輯鏈路和一組下行邏輯鏈路上行邏輯鏈路連接父節點域;下行邏輯鏈路有多條,連接多個子節點域。
            節點域為其關聯的邏輯鏈路分配邏輯鏈路號。邏輯鏈路號用兩個字節的無符號整數表示,范圍為0-65535。邏輯端口號與邏輯鏈路號一致。同時每個節點域具有層次式交換網絡地址的前綴和交換字段。各節點域獨立決定自己交換字段的長度,并且指派交換字段的值作為子域及指向該子域下行邏輯鏈路的邏輯號。節點域地址前綴是其父域地址前綴與父域為其分配的邏輯端口號的組合,長度為父域地址前綴長度及其父域交換字段長度之和。
            3.節點域管理方法由于層次式交換網絡的拓撲結構特征,導致任意兩個節點域點間的邏輯交換路徑是確定的。節點域管理方法利用節點域規模小、功能單一的特點,設計高效、快速、簡單的輕量級管理方法,實現快速自愈。節點域的管理主要包括獲得當前節點域的配置信息、獲得節點域拓撲信息、獲得交換機與鏈路狀態信息、以及生成邏輯鏈路表和內部轉發表,為數據包的交換打下基礎。因此節點域管理方法包括(1)配置交換機的基本信息對于節點域內每個交換機,配置節點域的地址前綴(用“地址前綴/前綴長度”表示,即Prefix/Length)、本交換機在節點域的編號(SID)、各端口編號(PID)、外部端口的邏輯端口號(LPort)信息。端口有四種不同的屬性上行外部端口、下行外部端口、短接端口和內部端口,在交換機配置表中,其端口號取值范圍隱含了端口的屬性信息。
            (2)獲得節點域拓撲信息(即鄰居發現)交換機的每個端口有一個Hello應答間隔計時器。交換機從某端口發送Hello包后,啟動計時器,Hello包包含其所在節點域的地址前綴、本交換機在節點域的編號、本端口在交換機的編號、以及該端口所在的邏輯端口信息。鄰居收到Hello包后,在其鄰接數據庫中進行登記,組裝應答Hello包,包內包含接收端口相應信息,并將應答包從Hello包到達的端口發送回去。發送端口收到應答Hello包后,停止計時器,并在自己的鄰接數據庫中記錄;否則若Hello應答間隔計時器超時,則在自己的鄰接數據庫中記錄,重新設置Hello應答間隔計時器超時閾值,重新開始上述過程。因此鄰接數據庫中記錄與本交換機相鄰的交換機及鏈路狀態信息。
            (3)獲得鏈路狀態的信息節點域內每個交換機組裝自己的鏈路狀態分組,每個鏈路狀態分組包含該交換機在節點域的編號和鄰接數據庫中鄰接關系信息。每個交換機采用泛洪擴散法在節點域中擴散各自的鏈路狀態分組信息,新的非重復鏈路狀態分組記錄在交換機的鏈路狀態數據庫中。經過此過程,每個交換機的鏈路狀態數據庫中就包含了節點域中所有交換機、內部鏈路、外部鏈路的配置信息。
            (4)生成邏輯鏈路表、短接節點域前綴表、域內轉發表邏輯鏈路表的表項包括邏輯端口號(LPort)、交換機標識(SID)、交換機輸出端口標識(PID)、輸出端口帶寬(Bandwidth)、信道狀態(Status)。短接節點域前綴表的表項包括與本節點域有短接關系的節點域前綴、對應的邏輯鏈路號、以及當前該短接鏈路的狀態。節點域內每個交換機有一個域內轉發表,包括三個表項D_SID、NHP、Metrics,指示到達域內其它交換機D_SID的下一跳輸出端口NHP及其代價Metrics。這三個表的生成過程是,從鏈路狀態數據庫中檢索所有外部端口的信息,并按照邏輯號進行分類和排序,得到邏輯鏈路表;從鏈路狀態數據庫中檢索所有短接端口的信息,并按照邏輯號進行分類和排序,得到短接節點域前綴表;根據鏈路狀態表中信息,構造節點域內部拓撲,計算最短路徑,生成域內轉發表。
            (5)更新是指對節點域當前狀態進行檢測,如果發現更新事件,則更新節點域相關的配置信息。更新事件的來源有兩類一種是初始化觸發;一種是自動檢測觸發。初始化觸發是指當管理員增加交換機、增添鏈路或重新配置交換機后,重新啟動交換機,觸發更新過程。自動檢測觸發是指通過自動檢測,實時檢測節點域內交換機和鏈路狀態,若發現異常則觸發更新過程。自動檢測判斷鏈路及其兩端端口是否正常的依據是兩端能否連續正確接收到數據包,方法是保證鏈路上有連續的數據包傳輸;當發送方沒有數據包發送時,則發送KeepAlive數據包,KeepAlive數據包到達交換機后被拋棄。交換機每個端口有一個數據包到達間隔計時器,數據包到達后計時器置初值,重新開始計時;當計時器超時,則觸發更新同步過程,即觸發交換機鄰居發現過程。如果得到的鄰居狀態信息與鄰接數據庫內容一致,該過程停止;否則,更新鄰接數據庫,重新組裝、擴散鏈路狀態分組與過程,更新各交換機鏈路狀態數據庫。
            4.節點域交換控制方法在節點域,數據包層次式交換有三個過程確定邏輯端口、選擇目標外部端口、和選擇下一跳輸出端口。從外部端口首次到達節點域的包需要進行確定邏輯端口,選擇目標外部端口,然后選擇下一跳端口送往下一節點;而從內部端口到達的包,只需要進行最后階段的操作,即根據前面選定的目標外部端口選擇下一跳,逐跳到達目標外部端口。對于最后一個過程,由于節點進行下一跳選擇時需要知道目標外部輸出端口信息(稱為內部交換標記ISL),因此當數據包首次進入該節點域并完成目標外部端口選擇時,需要對包進行ISL封裝。
            第一步是確定邏輯端口。為數據包交換確定邏輯端口號過程的目的在于確定該數據包到達下一個節點域需要經過的邏輯鏈路,因此邏輯端口號與邏輯鏈路號一致。邏輯鏈路號用兩個字節的無符號整數表示,范圍為0-65535其中0-1023號碼空間用于標識下行邏輯鏈路,1024-2047號碼空間用于標識短接邏輯鏈路,65535(FFFF)用于標識上行邏輯鏈路,65534(FFFE)用于標識節點域所有內部鏈路,2048-65533號碼空間保留。當節點域存在短接擴展時,確定邏輯端口需要查找短接節點域前綴表。即如果兩個節點域間存在短接邏輯鏈路,則需要分別在兩個節點域的短接節點域前綴表中登記對方節點域的網絡地址前綴,并分別獨立分配邏輯鏈路號。短接節點域前綴表的表項包括與本節點域有短接關系的節點域前綴CNDPrefix,對應的邏輯鏈路號LPort,以及當前該短接鏈路的狀態Status。有無短接鏈路擴展兩種情況下確定邏輯端口的具體過程如下(1)在節點域沒有短接鏈路擴展時,確定邏輯端口的過程為數據包自某交換機的外部輸入端口首次進入節點域,在該交換機比較本節點域網絡地址前綴與包目的地址對應的部分是否相同。若相同,通過數據包目的IP地址在本層的交換字段確定下行邏輯鏈路(同時也就確定了邏輯端口);若不同,則選擇上行邏輯鏈路,其邏輯端口號為65535。
            (2)當節點域存在短接擴展時,確定邏輯端口具體過程為數據包自某交換機的外部輸入端口首次進入節點域,在該交換機比較本節點域網絡地址前綴與包目的地址對應的部分是否相同。若相同,通過數據包目的IP地址在本層的交換字段確定下行邏輯鏈路(同時也就確定了邏輯端口);若不同,則采用最長匹配的方法用數據包目的地址的相應部分匹配查找短接節點域前綴表若查找成功,則選擇最長匹配的查尋記錄中相應的邏輯端口號;若查找不成功,則選擇上行邏輯鏈路,其邏輯端口號為65535。
            第二步是選擇目標外部端口過程。選擇目標外部端口過程是指根據負載平衡機制和邏輯鏈路狀態表,從選定的邏輯鏈路(端口)所包含的外部鏈路(端口)中選擇一個外部輸出鏈路(輸出外部端口)。一個邏輯鏈路由多條外部物理鏈路組成,同樣地,一個邏輯端口也由多個外部端口組成。在節點域,外部端口標識由交換機標識SID與該交換機端口標識PID組合唯一確定。每個節點域有邏輯鏈路表,描述到相鄰節點域的邏輯鏈路信息。邏輯鏈路表的表項包括(1)LPort邏輯端口號,與邏輯鏈路號一致;(2)SID交換機標識;(3)PID交換機輸出端口標識;(4)Bandwidth輸出端口帶寬,單位是Mbps;(5)Status指出信道正常還是失效,用一個字節表示。
            外部輸出鏈路的負載分配可以采用基于流的分配,即保證同一數據流穿過節點域經過相同的路徑,不同的數據流盡可能均衡地分布到邏輯鏈路的所有外部輸出鏈路;也可以采用基于包的分配,即不考慮每個IP包與流的次序關系,以包為單位根據各外部輸出鏈路的狀態對包作獨立的外部輸出鏈路分配。另外,基于TCP協議的應用要求網絡層盡量保證流內包次序,而保證流內包次序的負載平衡的策略包括兩種一種是本地化策略,即節點域內的流量轉發盡可能地在本地節點完成,各個節點在選擇外部出口鏈路時為本地外部鏈路賦予較大的權值;另一種是分布式策略,即選擇外部輸出端口時考慮負載平衡,負載平衡在各個外部輸入端口依賴局部信息獨立地進行。
            分布式方法包括兩部分第一部分是基于Hash計算的流聚類及目標外部鏈路的選擇。本步驟的目標是將大量普通數據流通過Hash計算映射到有限的Hash空間上,每個Hash空間對應一個外部端口。映射到相同Hash空間的所有普通數據流聚合為一個宏流,以宏流作為負載分配的基本單位,宏流所對應的Hash空間指定的外部端口即為其選定的目標外部端口。在節點的每個外部輸入端口,對應于每個邏輯端口Pi有一張Hash表,如圖2。圖2是外部端口Hash表示意圖,(A)表示目標邏輯端口號i對應的Hash表起始位置,(B)表示目標邏輯端口號i對應的HASH表終止位置,(C)是目標邏輯端口號i對應的Hash表范圍,(D)、(E)、(F)、…等是Hash表內容,即邏輯端口號i下的某一個外部端口號,即外部輸出端口ρij∈Pi,j=1,…,記錄Hash值與外部輸出端口映射關系。當一包到達節點域的某個外部輸入端口,首先從包中抽取源、目標IP地址。假定所確定的邏輯端口號為i;然后以源、目標IP地址為輸入參數用Hash函數計算Hash值;根據計算結果查找與邏輯端口i相應的Hash表,得到相應的外部輸出端口ρij,由此得到該包的目標外部輸出端口號。
            第二部分是基于歷史記錄對Hash表進行調整。保證負載平衡的關鍵是如何確定Hash表的內容。所采用的方法是在外部輸入端口處,采用時間窗口方法記錄分配給邏輯鏈路各外部出口鏈路的流量。根據記錄結果判斷負載分配是否均衡,不均衡則觸發對Hash表的調節機制。即當指向某外部輸出端口的負載超過了其配載因子達到一預定的閾值,則減少該外部輸出端口占據Hash表表項數目,增加負載小的外部輸出端口占據Hash表表項數目。調整表項數目根據當前各外部端口號在Hash表內的分布以及實際測量的鏈路負載情況確定。
            一種Hash表調整方法是在鏈路利用率最大和最小的兩個鏈路間進行負載均衡,調整兩個鏈路在Hash表中所占的表項數目,使得兩個鏈路的鏈路利用率趨向一致。鏈路利用率可以通過下列公式計算μij=φij/τC(ϵij)]]>其中,τ為時間窗口寬度,φij表示在時間窗口τ內分配到鏈路εij的流量,C(εij)表示外部鏈路的帶寬。設μsi=maxj=1,Λ,H(μij),μti=minj=1,Λ,H(μij)]]>分別為邏輯鏈路i中當前最大的、最小的鏈路利用率,設Ns、Nt為當前ρis、ρit在Hash表中出現的次數。可以通過下列公式確定調整的Hash表表項數目zz=(μsi-μti)×C(ϵti)×Nsμsi×(C(ϵsi)+C(ϵti))]]>具體的調整過程是將內容為ρis的z個Hash表表項內容改寫為ρit。
            第三步對數據包進行ISL封裝及內部選路。確定外部輸出鏈路(即輸出外部端口)后,要對包進行ISL封裝。ISL用于節點域內部交換,在幀頭和IP包頭間插入目標外部端口信息。節點域內每個交換機有一個域內轉發表,包括三個表項D_SID、Next_Hop、和Metrics,指示到達域內其他交換機D_SID的下一跳輸出端口Next_Hop和代價Metrics。節點域內部節點依據此標簽信息中目標節點號SID查找域內轉發表選路,逐跳到達目標外部端口所在的SID節點,在該節點脫去ISL標記,并從該節點的PID端口發送出去,完成包在本節點域內的轉發。
            圖3是ISL封裝IP包格式其中(A)是FLAG字段,4比特;(B)是保留字段RES,4比特;(C)是EPID字段,24比特;(D)是IP包;(E)是ISL。ISL由三個字段組成,分別為FLAG、RES、以及EPID。FLAG位模式為1111時標識ISL封裝,RES保留,EPID字段填入包的目標外部輸出端口號EPID,EPID由交換機號SID(8位)和端口號PID(16位)組成。有益效果本發明的有益效果包括(1)節點域的功能單一、位置集中、規模適當,節點域管理運行輕量級快速協議,協議簡單并且局限于節點域內部,使得協議收斂速度快、效率高,對網絡事件響應及時。此特點是提高節點域性能的基礎。
            (2)節點域的管理具有局部自治性,節點域控制信息局限于交換節點內部,無須在整個網絡上傳播控制信息,因而大大降低了網絡協議的復雜度,無須考慮與其它節點域的互操作問題,不僅簡化了網絡控制協議,而且簡化了交換機的設計。
            (3)節點域的交換控制采用IP交換代替IP路由,不需要查詢龐大的路由表,可以使路由器退化成交換機。由于層次式交換網絡是按照層次結構構造的,網絡的地址也是按照層次結構分配的,而且網絡的地址與網絡的結構是匹配的,這使得各層節點數據包的轉發可以按照目的IP地址的相應交換字段簡單地進行交換。與標記交換如MPLS相比,交換的依據是IP包的目的地址的相應交換字段,而不需要分配、管理、檢索特別的標記。層次式交換簡化了交換機的復雜度,消除了復雜的路由計算和對龐大路由表的查找,可以用硬件完成大多數交換功能,提高了交換機的性能,減輕了路由器的瓶頸問題。
            (4)節點域的交換控制采用分布式的自適應負載平衡機制實現目標邏輯鏈路中各物理鏈路鏈路的負載平衡,進而實現在節點域內部分布流量,可以提高網絡可靠性和資源利用率。
            (5)節點域的管理依據不間斷的監測數據包,故障檢測時間大大減小,達毫秒級。同時由于節點域的邏輯鏈路由多條輸出鏈路組成,可以同時提供多條互不相關的轉發路徑,因此當出現交換機或鏈路失效時,節點域使用快速的故障恢復機制可自動避開失效節點或鏈路,將數據流自動切換到其它可用輸出鏈路上,從而使得節點域內部故障對外透明。
            下面以節點域(D5)為例說明節點域的管理方法。
            (1)配置節點域(D5)基本信息根據圖4中節點域(D5)的內部配置描述,設(D5)內各個交換機配置節點域地址前綴為001111111111111111111111000011010000101011/42,交換字段為42/8,則配置節點域(D5)交換機的基本信息如表1至表4所示。

            表1交換機1各端口的基本配置信息

            表2交換機2各端口的基本配置信息

            表3交換機3各端口的基本配置信息

            表4交換機4各端口的基本配置信息另外,交換機1的端口6還需配置目標短接節點域前綴0011111111111111111111110001011000010011/40;交換機4的端口4還需配置目標短接節點域前綴0011111111111111111111110001011000010011/40。
            (2)鄰居發現以交換機(1)為例,交換機(1)從自己的(6)個端口向其鄰居發送Hello包。其它交換機收到來自交換機(1)的Hello后,在自己的鄰接數據庫中登記Hello包內鄰居信息,組裝應答Hello包,從原路發回。當交換機(1)收到應答Hello包,則把包內信息記錄在鄰居數據庫中。
            (3)生成邏輯鏈路表、短接節點域前綴表表、域內轉發表在(D5),每個交換機有三張表。即邏輯鏈路表、短接鏈路表、和內部轉發表。以交換機1為例說明,三個表分別見表5、6、7。
            (4)更新假定交換機(1)端口(3)連接的鏈路發生故障,當該端口相應的數據包到達間隔計時器超時,則觸發交換機(1)的更新同步過程,修改內部轉發表,將去往目的交換機(2)的下一跳輸出端口修改為(4),即經交換機(3)轉發。
            在圖4所示綜合實施例中,包含四個層次式交換控制方法實施例,分別描述層次式交換在基本、短接、缺層和多宿主條件下的特征。
            (1)一個基本層次交換實施例是在上述網絡環境中,接入網(E)內的一臺主機(M)與(H)的一臺主機(N)進行通信,這里主要分析數據包在(D5)的交換過程。假定在(E),(M)的SLA地址為7,接口號為EUI-64-M,則其地址IPM表示為0011111111111111111111110000110100000001110100010000101100000111EUI-64-M;在(H),(N)的SLA地址為6,接口號為EUI-64-N,則其地址IPN表示為0011111111111111111111110000110100001010110001101000111000000110EUI-64-N。在(D5),每個交換機有三張表邏輯鏈路表、短接鏈路表和內部轉發表,如下表5、表6、表7所示。

            表5邏輯鏈路表

            表6短接鏈路表

            表7內部轉發表則主機(M)的一個數據包P發送到主機(N)的過程如下1)P的源地址填充為IPM,目的地址填充為IPN。
            2)(E)內路由器將其轉發至(D7),(D7)比較自身的地址前綴和P的目的地址IPN對應的部分,結果不相等則選擇上行鏈路,發送至(D4)。
            3)在(D4)經過類似過程,P到達(D2)。
            4)(D2)比較自身的地址前綴和P的目的地址IPN對應的部分,結果相等;根據(D2)的交換字段屬性32/10選取IPN對應部分,其值為43,則選擇下行鏈路號為43的邏輯鏈路,將P發送至(D5)。
            5)假定P到達交換機(3),首先確定其邏輯鏈路;即比較(D5)自身的地址前綴和P的目的地址IPN對應的部分,結果相等;根據(D5)的交換字段屬性42/8選取IPN對應部分,其值為26,則選擇下行鏈路號為26的邏輯鏈路。
            6)根據邏輯鏈路號26查找(D5)邏輯鏈路表,根據外部端口號(SID/PID)為1/1、2/6得到兩條外部鏈路;根據外部端口選擇算法選擇其中一條,假定選擇的外部鏈路的端口號為2/6。
            7)交換機(3)對數據包進行ISL封裝,封裝格式如圖15所示;封裝后的包在節點域根據ISL標記查找內部轉發表,由于目標D_SID為2,查得結果是從內部端口1將包送出,到達交換機2;在交換機2收到包后,知道應從自己的外部端口6發出,脫去ISL封裝,將P發送到(D9)。
            8)(D9)將包P發送到(H),到達主機(N),完成數據包P從(M)到(N)的發送。
            (2)一個使用短接鏈路的層次式交換實施例是在上述網絡環境中,接入網(G)內的一臺主機(S)與(J)的一臺主機(T)進行通信。這里主要分析數據包在(D5)使用短接鏈路的交換過程。假定在(G),(S)的SLA地址為7,接口號為EUI-64-S,則其地址IPS表示為0011111111111111111111110000110100001010110000101000111100000111EUI-64-S;在(J),(T)的SLA地址為6,接口號為EUI-64-T,則其地址IPT表示為0011111111111111111111110001011000010011001101010001101000000110EUI-64-T。如果(D5)與(D6)之間沒有短接鏈路,則(S)與(T)的通信與基本層次交換實施例類似,即(S)發送的包經過(D8)、(D5)、(D2)、(D1)、(D3)、(D6)、(D10),最終到達(J)內主機(T)。由于(D5)與(D6)之間實際上有短接鏈路,假定數據包從(D5)內交換機(2)進入節點域(D5),則首先確定其邏輯鏈路;比較(D5)自身的地址前綴和P的目的地址IPT對應的部分,結果不相等,然后用P的目的地址IPT查找短接鏈路表,與表中地址前綴0011111111111111111111110001011000010011/40匹配成功,則選擇表中對應記錄的邏輯鏈路號1088;1088由兩條物理信道組成,分別從交換機(1)的端口(6)和交換機(4)的端口(4)連接到節點域(D6);根據負載平衡的選路機制,假定選用了交換機(1)的端口(6);從交換機(2)的內部轉發表查得,要想送到交換機(1)則需要從交換機(1)的內部端口(2)發出;然后由交換機(1)將包P從端口(6)的短接鏈路發送到(D6),再經(D6)轉發到(D10),最終到達(J)內主機(T),因此沒有經過上層節點域(D2)、(D1)、(D3)。
            (3)一個使用缺層連接的層次式技術實施例是在上述網絡環境中,接入網(E)內的一臺主機(U)與接入網(I)的一臺主機(V)通信。則從(U)發出的數據包經(D7)、(D4)、(D2)、(D1)到達(D3),經(D3)轉發直接到達(I),進而到達主機(V);從(V)發出的數據包經(I)直接到達(D3),經(D3)上傳到(D1),再經過(D2)、(D4)到達(D7),進而到達主機(U)。
            (4)一個使用多宿主連接的層次式技術實施例是在上述網絡環境中,接入網(F)內的一臺主機(X)與接入網(J)的一臺主機(Y)通信。其中接入網(F)采用多宿主連接分別接入(D7)與(D8),F有兩個地址前綴00111111111111111111111100001101000000011101000100010111/56(宿主D7)和00111111111111111111111100001101000010101100001010000111/56(宿主D8),所以(F)內主機有兩套地址。(F)內主機與外部主機通信時可以選擇任意一個地址作為源地址,因此選擇不同的地址數據包經過的路徑可能不一樣。如選擇宿主(D7)的地址前綴組合的主機地址,則向(J)發送的數據包通過的邏輯路徑為(D7)、(D4)、(D2)、(D1)、(D3)、(D6)、(D10);如選擇宿主(D8)的地址前綴組合的主機地址,則向(J)發送的數據包通過的邏輯路徑為(D8)、(D5)、(D2)、(D1)、(D3)、(D6)、(D10)。
            采用保證流內包次序的分布式負載方法以(D5)上行邏輯鏈路65535為例說明其負載均衡過程。邏輯鏈路65535由三條物理鏈路組成,查找邏輯鏈路表并計算配載因子,見表8。

            表8配載因子計算結果則外部端口Hash表初始化若假定外部端口Hash表空間為0~127,其大小為128,則在節點域的每個外部輸入端口,對應于邏輯鏈路65535,有一個外部端口Hash表,該表初始化時至多有57項的內容指向交換機(2)的端口(2),至多有15項的內容指向交換機(3)的端口(2),至多有57項的內容指向交換機(4)端口(3)。表項的內容交叉循環依次填充外部端口號,同時為各外部端口號計數,若某外部端口號計數超過其應占表項份額后則停止填充該外部端口號,繼續按上述方法填充剩余外部端口號,直到Hash表填滿為止。
            權利要求
            1.層次式交換網絡節點域的一種控制方法,層次式交換網絡的拓撲結構是由多個交換層次組成樹型結構,網絡的地址空間按層次結構分配,并且拓撲結構的層次與地址結構的層次是嚴格匹配的;由于簡單樹型結構中任意兩個節點的鏈路是唯一的,因此數據包按照層次地址進行交換;其中以邏輯節點替代樹型結構的節點,以邏輯鏈路替代樹型結構的分支,邏輯節點稱為節點域,其特征在于節點域控制方法包括節點域管理方法和節點域交換控制方法,節點域管理方法通過實時檢測交換機和鏈路的狀態得到節點域內部各種配置表,節點域交換控制方法根據內部配置表控制數據包在節點域的轉發;節點域管理包括(1)配置交換機基本信息;(2)通過發送數據包和應答數據包進行鄰居發現;(3)鏈路狀態分組組裝并且采用泛洪擴散法在節點域中擴散各自的鏈路狀態分組信息;(4)生成邏輯鏈路表、短接節點域前綴表、和域內轉發表。
            2.根據權利要求1所述的層次式交換網絡節點域的控制方法,其特征在于節點域交換控制過程包括確定邏輯端口、選擇目標外部端口、和選擇下一跳輸出端口三個階段;其中各節點域確定邏輯端口通過數據包交換字段的位置與長度,來確定該數據包到達下一個節點域需要經過的邏輯鏈路;選擇目標外部端口過程從選定的邏輯鏈路所包含的外部鏈路中,根據負載平衡機制選擇一個外部輸出鏈路;當數據包首次進入該節點域并完成目標外部端口選擇時,需要對包進行內部交換標記封裝;以后當選擇下一跳輸出端口時,則直接輸出到已知的目標外部輸出端口。
            3.根據權利要求1所述的層次式交換網絡節點域的控制方法,其特征在于邏輯鏈路表的表項包括邏輯端口號、交換機標識、交換機輸出端口標識、輸出端口帶寬、信道狀態;從鏈路狀態數據庫中檢索所有外部端口的信息,并按照邏輯號進行分類和排序,得到邏輯鏈路表。
            4.根據權利要求1所述的層次式交換網絡節點域的控制方法,其特征在于短接節點域前綴表的表項包括與本節點域有短接關系的節點域前綴、對應的邏輯鏈路號、以及當前該短接鏈路的狀態;從鏈路狀態數據庫中檢索所有短接端口的信息,并按照邏輯號進行分類和排序,得到短接節點域前綴表。
            5.根據權利要求1所述的層次式交換網絡節點域的控制方法,其特征在于域內轉發表指示到達域內其它交換機的下一跳輸出端口及其代價;根據鏈路狀態表中信息,構造節點域內部拓撲,計算最短路徑,生成域內轉發表。
            6.根據權利要求1所述的層次式交換網絡節點域的控制方法,其特征在于節點域管理還包括更新;更新過程檢測節點域當前狀態,更新節點域相關的配置信息;包括當管理員增加交換機、增添鏈路或重新配置交換機后,重新啟動交換機所觸發的更新過程;以及通過自動檢測過程進行的更新過程,該過程根據收發兩端能否連續正確接收到數據包來確定是否需要更新,當交換機端口的數據包到達間隔計時器超時時,觸發更新過程。
            7.根據權利要求2所述的層次式交換網絡節點域的控制方法,其特征在于節點域交換控制過程采用保證流內包次序的分布式負載平衡策略;采用基于Hash計算的流聚類來選擇目標外部鏈路,即當一包到達節點域的某個外部輸入端口,首先從包中抽取源、目標IP地址,以源、目標IP地址為輸入參數用Hash函數計算Hash值,根據計算結果查找與該邏輯端口相應的HASH表得到該包的目標外部輸出端口號。
            8.根據權利要求7所述的層次式交換網絡節點域的控制方法,其特征在于節點域交換控制過程采用基于Hash計算的流聚類來選擇目標外部鏈路,同時采用基于測量的Hash表調整方法;在外部輸入端口處,采用時間窗口方法實時測量分配給邏輯鏈路各外部出口鏈路的流量,根據測量結果判斷負載分配是否均衡,不均衡則對Hash表進行調節機制;即當指向某外部輸出端口的負載超過了其配載因子預定的閾值,則減少該外部輸出端口占據Hash表表項數目,增加負載小的外部輸出端口所占據的Hash表表項數目。
            9.根據權利要求7所述的層次式交換網絡節點域的控制方法,其特征在于Hash表調整方法是在鏈路利用率最大和最小的兩個鏈路間進行負載均衡,調整兩個鏈路在Hash表中所占的表項數目,使得兩個鏈路的鏈路利用率趨向一致。
            全文摘要
            本發明涉及層次式交換網絡節點域的一種控制方法。節點域控制方法包括節點域管理方法和節點域交換控制方法。節點域管理方法通過實時檢測交換機和鏈路的狀態得到節點域內部各種配置表,節點域交換控制方法根據內部配置表控制數據包在節點域的轉發。本方法可以提高層次式交換網絡節點域的可靠性和性能,增加節點域吞吐量,減少延遲和內部擁塞,實現節點域負載平衡和故障恢復,減少內部控制和管理的復雜度。
            文檔編號H04Q1/20GK1440159SQ0312152
            公開日2003年9月3日 申請日期2003年3月31日 優先權日2003年3月31日
            發明者李俊, 錢華林, 葛敬國, 馬宏偉, 方蕾, 牛廣鋒, 代長城 申請人:中國科學院計算機網絡信息中心
            網友詢問留言 已有0條留言
            • 還沒有人留言評論。精彩留言會獲得點贊!
            1
            婷婷六月激情在线综合激情,亚洲国产大片,久久中文字幕综合婷婷,精品久久久久久中文字幕,亚洲一区二区三区高清不卡,99国产精品热久久久久久夜夜嗨 ,欧美日韩亚洲综合在线一区二区,99国产精品电影,伊人精品线视天天综合,精品伊人久久久大香线蕉欧美
            亚洲精品1区 国产成人一级 91精品国产欧美一区二区 亚洲精品乱码久久久久久下载 国产精品久久久久久久伊一 九色国产 国产精品九九视频 伊人久久成人爱综合网 欧美日韩亚洲区久久综合 欧美日本一道免费一区三区 夜夜爽一区二区三区精品 欧美日韩高清一区二区三区 国产成人av在线 国产精品对白交换绿帽视频 国产视频亚洲 国产在线欧美精品 国产精品综合网 国产日韩精品欧美一区色 国产日韩精品欧美一区喷 欧美日韩在线观看区一二 国产区精品 欧美视频日韩视频 中文字幕天天躁日日躁狠狠躁97 视频一二三区 欧美高清在线精品一区二区不卡 国产精品揄拍一区二区久久 99久久综合狠狠综合久久aⅴ 亚洲乱码视频在线观看 日韩在线第二页 亚洲精品无码专区在线播放 成人亚洲网站www在线观看 欧美三级一区二区 99久久精品免费看国产高清 91麻豆国产在线观看 最新日韩欧美不卡一二三区 成人在线观看不卡 日韩国产在线 在线亚洲精品 亚洲午夜久久久久中文字幕 国产精品成人久久久久久久 精品国产一区二区在线观看 欧美精品国产一区二区三区 中文在线播放 亚洲第一页在线视频 国产午夜精品福利久久 九色国产 精品国产九九 国产永久视频 久久精品人人做人人综合试看 国产一区二区三区免费观看 亚洲精品国产电影 9999热视频 国产精品资源在线 麻豆久久婷婷国产综合五月 国产精品免费一级在线观看 亚洲国产一区二区三区青草影视 中文在线播放 国产成人综合在线 国产在线观看色 国产亚洲三级 国产片一区二区三区 久久99精品久久久久久牛牛影视 亚洲欧美日韩国产 四虎永久免费网站 国产一毛片 国产精品视频在 九九热在线精品 99精品福利视频 色婷婷色99国产综合精品 97成人精品视频在线播放 精品久久久久久中文字幕 亚洲欧美一区二区三区孕妇 亚洲欧美成人网 日韩高清在线二区 国产尤物在线观看 在线不卡一区二区 91网站在线看 韩国精品福利一区二区 欧美日韩国产成人精品 99热精品久久 国产精品免费视频一区 高清视频一区 精品九九久久 欧美日韩在线观看免费 91欧美激情一区二区三区成人 99福利视频 亚洲国产精品91 久热国产在线 精品久久久久久中文字幕女 国产精品久久久久久久久99热 成人自拍视频网 国产精品视频久久久久久 久久影院国产 国产玖玖在线观看 99精品在线免费 亚洲欧美一区二区三区导航 久久久久久久综合 国产欧美日韩精品高清二区综合区 国产精品视频自拍 亚洲一级片免费 久久久久久九九 国产欧美自拍视频 视频一区二区在线观看 欧美日韩一区二区三区久久 中文在线亚洲 伊人热人久久中文字幕 日韩欧美亚洲国产一区二区三区 欧美亚洲国产成人高清在线 欧美日韩国产码高清综合人成 国产性大片免费播放网站 亚洲午夜综合网 91精品久久一区二区三区 国产无套在线播放 国产精品视频网站 国产成人亚洲精品老王 91在线网站 国产视频97 欧美黑人欧美精品刺激 国产一区二区三区免费在线视频 久久久国产精品免费看 99re6久精品国产首页 久久精品91 国产成人一级 国产成人精品曰本亚洲 日本福利在线观看 伊人成综合网 久久综合一本 国产综合久久久久久 久久精品成人免费看 久久福利 91精品国产91久久久久久麻豆 亚洲精品成人在线 亚洲伊人久久精品 欧美日本二区 国产永久视频 国产一区二 一区二区福利 国产一毛片 亚洲精品1区 毛片一区二区三区 伊人久久大香线蕉综合影 国产欧美在线观看一区 亚洲国产欧洲综合997久久 国产一区二区免费视频 国产91精品对白露脸全集观看 久久亚洲国产伦理 欧美成人伊人久久综合网 亚洲性久久久影院 久久99国产精一区二区三区! 91精品国产欧美一区二区 欧美日韩亚洲区久久综合 日韩精品一二三区 久久久夜色精品国产噜噜 国产在线精品福利91香蕉 久久久久久久亚洲精品 97se色综合一区二区二区 91国语精品自产拍在线观看性色 91久久国产综合精品女同我 日韩中文字幕a 国产成人亚洲日本精品 久久国产精品-国产精品 久久国产经典视频 久久国产精品伦理 亚洲第一页在线视频 国产精品久久久久三级 日韩毛片网 久久免费高清视频 麻豆国产在线观看一区二区 91麻豆国产福利在线观看 国产成人精品男人的天堂538 一区二区三区中文字幕 免费在线视频一区 欧美日韩国产成人精品 国产综合网站 国产资源免费观看 亚洲精品亚洲人成在线播放 精品久久久久久中文字幕专区 亚洲人成人毛片无遮挡 国产一起色一起爱 国产香蕉精品视频在 九九热免费观看 日韩亚洲欧美一区 九九热精品在线观看 精品久久久久久中文字幕专区 亚洲欧美自拍偷拍 国产精品每日更新 久久久久国产一级毛片高清板 久久天天躁狠狠躁夜夜中文字幕 久久精品片 日韩在线毛片 国产成人精品本亚洲 国产成人精品一区二区三区 九九热在线观看 国产r级在线观看 国产欧美日韩精品高清二区综合区 韩国电影一区二区 国产精品毛片va一区二区三区 五月婷婷伊人网 久久一区二区三区免费 一本色道久久综合狠狠躁篇 亚洲综合色站 国产尤物在线观看 亚洲一区亚洲二区 免费在线视频一区 欧洲精品视频在线观看 日韩中文字幕a 中文字幕日本在线mv视频精品 91精品在线免费视频 精品国产免费人成在线观看 精品a级片 中文字幕日本在线mv视频精品 日韩在线精品视频 婷婷丁香色 91精品国产高清久久久久 国产成人精品日本亚洲直接 五月综合视频 欧美日韩在线亚洲国产人 精液呈暗黄色 亚洲乱码一区 久久精品中文字幕不卡一二区 亚洲天堂精品在线 激情婷婷综合 国产免费久久精品久久久 国产精品亚洲二区在线 久久免费播放视频 五月婷婷丁香综合 在线亚洲欧美日韩 久久免费精品高清麻豆 精品久久久久久中文字幕 亚洲一区网站 国产精品福利社 日韩中文字幕免费 亚洲综合丝袜 91精品在线播放 国产精品18 亚洲日日夜夜 伊人久久大香线蕉综合影 亚洲精品中文字幕乱码影院 亚洲一区二区黄色 亚洲第一页在线视频 一区二区在线观看视频 国产成人福利精品视频 亚洲高清二区 国内成人免费视频 精品亚洲性xxx久久久 国产精品合集一区二区三区 97av免费视频 国产一起色一起爱 国产区久久 国产资源免费观看 99精品视频免费 国产成人一级 国产精品九九免费视频 欧美91精品久久久久网免费 99热国产免费 久久精品色 98精品国产综合久久 久久精品播放 中文字幕视频免费 国产欧美日韩一区二区三区在线 精品久久蜜桃 国产小视频精品 一本色道久久综合狠狠躁篇 91在线免费观看 亚洲精品区 伊人成综合网 伊人热人久久中文字幕 伊人黄色片 99国产精品热久久久久久夜夜嗨 久久免费精品视频 亚洲一区二区三区高清不卡 久久久久国产一级毛片高清板 国产片一区二区三区 久久狠狠干 99久久婷婷国产综合精品电影 国产99区 国产精品成人久久久久 久久狠狠干 青青国产在线观看 亚洲高清国产拍精品影院 国产精品一区二区av 九九热在线免费视频 伊人久久国产 国产精品久久久久久久久久一区 在线观看免费视频一区 国产精品自在在线午夜区app 国产精品综合色区在线观看 国产毛片久久久久久国产毛片 97国产免费全部免费观看 国产精品每日更新 国产尤物视频在线 九九视频这里只有精品99 一本一道久久a久久精品综合 久久综合给会久久狠狠狠 国产成人精品男人的天堂538 欧美一区二区高清 毛片一区二区三区 国产欧美日韩在线观看一区二区三区 在线国产二区 欧美不卡网 91在线精品中文字幕 在线国产福利 国内精品91久久久久 91亚洲福利 日韩欧美国产中文字幕 91久久精品国产性色也91久久 亚洲性久久久影院 欧美精品1区 国产热re99久久6国产精品 九九热免费观看 国产精品欧美日韩 久久久久国产一级毛片高清板 久久国产经典视频 日韩欧美亚洲国产一区二区三区 欧美亚洲综合另类在线观看 国产精品自在在线午夜区app 97中文字幕在线观看 视频一二三区 精品国产一区在线观看 国产欧美日韩在线一区二区不卡 欧美一区二三区 伊人成人在线观看 国内精品91久久久久 97在线亚洲 国产在线不卡一区 久久久全免费全集一级全黄片 国产精品v欧美精品∨日韩 亚洲毛片网站 在线不卡一区二区 99re热在线视频 久久激情网 国产毛片一区二区三区精品 久久亚洲综合色 中文字幕视频免费 国产视频亚洲 婷婷伊人久久 国产一区二区免费播放 久久99国产精品成人欧美 99国产在线视频 国产成人免费视频精品一区二区 国产不卡一区二区三区免费视 国产码欧美日韩高清综合一区 久久精品国产主播一区二区 国产一区电影 久久精品国产夜色 国产精品国产三级国产 日韩一区二区三区在线 久久97久久97精品免视看 久久国产免费一区二区三区 伊人久久大香线蕉综合电影网 99re6久精品国产首页 久久激情网 亚洲成人高清在线 国产精品网址 国产成人精品男人的天堂538 香蕉国产综合久久猫咪 国产专区中文字幕 91麻豆精品国产高清在线 久久国产经典视频 国产精品成人va在线观看 国产精品爱啪在线线免费观看 日本精品久久久久久久久免费 亚洲综合一区二区三区 久久五月网 精品国产网红福利在线观看 久久综合亚洲伊人色 亚洲国产精品久久久久久网站 在线日韩国产 99国产精品热久久久久久夜夜嗨 国产综合精品在线 国产区福利 精品亚洲综合久久中文字幕 国产制服丝袜在线 毛片在线播放网站 在线观看免费视频一区 国产精品久久久精品三级 亚洲国产电影在线观看 最新日韩欧美不卡一二三区 狠狠综合久久综合鬼色 日本精品1在线区 国产日韩一区二区三区在线播放 欧美日韩精品在线播放 亚洲欧美日韩国产一区二区三区精品 久久综合久久网 婷婷六月激情在线综合激情 亚洲乱码一区 国产专区91 97av视频在线观看 精品久久久久久中文字幕 久久五月视频 国产成人福利精品视频 国产精品网址 中文字幕视频在线 精品一区二区三区免费视频 伊人手机在线视频 亚洲精品中文字幕乱码 国产在线视频www色 色噜噜国产精品视频一区二区 精品亚洲成a人在线观看 国产香蕉尹人综合在线 成人免费一区二区三区在线观看 国产不卡一区二区三区免费视 欧美精品久久天天躁 国产专区中文字幕 久久精品国产免费中文 久久精品国产免费一区 久久无码精品一区二区三区 国产欧美另类久久久精品免费 欧美精品久久天天躁 亚洲精品在线视频 国产视频91在线 91精品福利一区二区三区野战 日韩中文字幕免费 国产精品99一区二区三区 欧美成人高清性色生活 国产精品系列在线观看 亚洲国产福利精品一区二区 国产成人在线小视频 国产精品久久久久免费 99re热在线视频 久久久久久久综合 一区二区国产在线播放 成人国产在线视频 亚洲精品乱码久久久久 欧美日韩一区二区综合 精品久久久久免费极品大片 中文字幕视频二区 激情粉嫩精品国产尤物 国产成人精品一区二区视频 久久精品中文字幕首页 亚洲高清在线 国产精品亚洲一区二区三区 伊人久久艹 中文在线亚洲 国产精品一区二区在线播放 国产精品九九免费视频 亚洲二区在线播放 亚洲狠狠婷婷综合久久久久网站 亚洲欧美日韩网站 日韩成人精品 亚洲国产一区二区三区青草影视 91精品国产福利在线观看 国产精品久久久久久久久99热 国产一区二区精品尤物 久碰香蕉精品视频在线观看 亚洲日日夜夜 在线不卡一区二区 国产午夜亚洲精品 九九热在线视频观看这里只有精品 伊人手机在线视频 91免费国产精品 日韩欧美中字 91精品国产91久久久久 国产全黄三级播放 视频一区二区三区免费观看 国产开裆丝袜高跟在线观看 国产成人欧美 激情综合丝袜美女一区二区 国产成人亚洲综合无 欧美精品一区二区三区免费观看 欧美亚洲国产日韩 日韩亚州 国产欧美日韩精品高清二区综合区 亚洲午夜国产片在线观看 精品久久久久久中文字幕 欧美精品1区 久久伊人久久亚洲综合 亚洲欧美日韩精品 国产成人精品久久亚洲高清不卡 久久福利影视 国产精品99精品久久免费 久久久久免费精品视频 国产日产亚洲精品 亚洲国产午夜电影在线入口 精品无码一区在线观看 午夜国产精品视频 亚洲一级片免费 伊人久久大香线蕉综合影 国产精品久久影院 久碰香蕉精品视频在线观看 www.欧美精品 在线小视频国产 亚洲国产天堂久久综合图区 欧美一区二区三区不卡 日韩美女福利视频 九九精品免视频国产成人 不卡国产00高中生在线视频 亚洲第一页在线视频 欧美日韩在线播放成人 99re视频这里只有精品 国产精品91在线 精品乱码一区二区三区在线 国产区久久 91麻豆精品国产自产在线观看一区 日韩精品成人在线 九九热在线观看 国产精品久久不卡日韩美女 欧美一区二区三区综合色视频 欧美精品免费一区欧美久久优播 国产精品网址 国产专区中文字幕 国产精品欧美亚洲韩国日本久久 日韩美香港a一级毛片 久久精品123 欧美一区二区三区免费看 99r在线视频 亚洲精品国产字幕久久vr 国产综合激情在线亚洲第一页 91免费国产精品 日韩免费小视频 亚洲国产精品综合一区在线 国产亚洲第一伦理第一区 在线亚洲精品 国产精品一区二区制服丝袜 国产在线成人精品 九九精品免视频国产成人 亚洲国产网 欧美日韩亚洲一区二区三区在线观看 在线亚洲精品 欧美一区二区三区高清视频 国产成人精品男人的天堂538 欧美日韩在线观看区一二 亚洲欧美一区二区久久 久久精品中文字幕首页 日本高清www午夜视频 久久精品国产免费 久久999精品 亚洲国产精品欧美综合 88国产精品视频一区二区三区 91久久偷偷做嫩草影院免费看 国产精品夜色视频一区二区 欧美日韩导航 国产成人啪精品午夜在线播放 一区二区视频在线免费观看 99久久精品国产自免费 精液呈暗黄色 久久99国产精品 日本精品久久久久久久久免费 精品国产97在线观看 99re视频这里只有精品 国产视频91在线 999av视频 亚洲美女视频一区二区三区 久久97久久97精品免视看 亚洲国产成人久久三区 99久久亚洲国产高清观看 日韩毛片在线视频 综合激情在线 91福利一区二区在线观看 一区二区视频在线免费观看 激情粉嫩精品国产尤物 国产成人精品曰本亚洲78 国产成人精品本亚洲 国产精品成人免费视频 国产成人啪精品视频免费软件 久久精品国产亚洲妲己影院 国产精品成人久久久久久久 久久大香线蕉综合爱 欧美一区二区三区高清视频 99热国产免费 在线观看欧美国产 91精品视频在线播放 国产精品福利社 欧美精品一区二区三区免费观看 国产一区二区免费视频 国产午夜精品一区二区 精品视频在线观看97 91精品福利久久久 国产一区福利 国产综合激情在线亚洲第一页 国产精品久久久久久久久久久不卡 九色国产 在线日韩国产 黄网在线观看 亚洲一区小说区中文字幕 中文字幕丝袜 日本二区在线观看 日本国产一区在线观看 欧美日韩一区二区三区久久 欧美精品亚洲精品日韩专 国产日产亚洲精品 久久综合九色综合欧美播 亚洲国产欧美无圣光一区 欧美视频区 亚洲乱码视频在线观看 久久无码精品一区二区三区 九九热精品免费视频 久久99精品久久久久久牛牛影视 国产精品成久久久久三级 国产一区福利 午夜国产精品视频 日本二区在线观看 99久久网站 国产亚洲天堂 精品国产一区二区三区不卡 亚洲国产日韩在线一区 国产成人综合在线观看网站 久久免费高清视频 欧美在线导航 午夜精品久久久久久99热7777 欧美久久综合网 国产小视频精品 国产尤物在线观看 亚洲国产精品综合一区在线 欧美一区二区三区不卡视频 欧美黑人欧美精品刺激 日本福利在线观看 久久国产偷 国产手机精品一区二区 国产热re99久久6国产精品 国产高清啪啪 欧美亚洲国产成人高清在线 国产在线第三页 亚洲综合一区二区三区 99r在线视频 99精品久久久久久久婷婷 国产精品乱码免费一区二区 国产在线精品福利91香蕉 国产尤物视频在线 五月婷婷亚洲 中文字幕久久综合伊人 亚洲精品一级毛片 99国产精品电影 在线视频第一页 久久99国产精品成人欧美 国产白白视频在线观看2 成人精品一区二区www 亚洲成人网在线观看 麻豆91在线视频 色综合合久久天天综合绕视看 久久精品国产免费高清 国产不卡一区二区三区免费视 欧美国产中文 99精品欧美 九九在线精品 国产中文字幕在线免费观看 国产一区中文字幕在线观看 国产成人一级 国产精品一区二区制服丝袜 国产一起色一起爱 亚洲精品成人在线 亚洲欧美精品在线 国产欧美自拍视频 99精品久久久久久久婷婷 久99视频 国产热re99久久6国产精品 视频一区亚洲 国产精品视频分类 国产精品成在线观看 99re6久精品国产首页 亚洲在成人网在线看 亚洲国产日韩在线一区 久久国产三级 日韩国产欧美 欧美在线一区二区三区 国产精品美女一级在线观看 成人午夜免费福利视频 亚洲天堂精品在线 91精品国产手机 欧美日韩视频在线播放 狠狠综合久久综合鬼色 九一色视频 青青视频国产 亚洲欧美自拍一区 中文字幕天天躁日日躁狠狠躁97 日韩免费大片 996热视频 伊人成综合网 亚洲天堂欧美 日韩精品亚洲人成在线观看 久久综合给会久久狠狠狠 日韩精品亚洲人成在线观看 日韩国产欧美 亚洲成aⅴ人片在线影院八 亚洲精品1区 99久久精品免费 国产精品高清在线观看 国产精品久久久免费视频 在线亚洲欧美日韩 91在线看视频 国产精品96久久久久久久 欧美日韩国产成人精品 91在线亚洲 热久久亚洲 国产精品美女免费视频观看 日韩在线毛片 亚洲永久免费视频 九九免费在线视频 亚洲一区网站 日本高清二区视频久二区 精品国产美女福利在线 伊人久久艹 国产精品久久久久三级 欧美成人精品第一区二区三区 99久久精品国产自免费 在线观看日韩一区 国产中文字幕一区 成人免费午夜视频 欧美日韩另类在线 久久99国产精品成人欧美 色婷婷中文网 久久天天躁夜夜躁狠狠躁2020 欧美成人伊人久久综合网 国产精品福利资源在线 国产伦精品一区二区三区高清 国产精品亚洲综合色区韩国 亚洲一区欧美日韩 色综合视频 国语自产精品视频在线区 国产高清a 成人国内精品久久久久影 国产在线精品香蕉综合网一区 国产不卡在线看 国产成人精品精品欧美 国产欧美日韩综合精品一区二区三区 韩国电影一区二区 国产在线视频www色 91中文字幕在线一区 国产人成午夜免视频网站 亚洲综合一区二区三区 色综合视频一区二区观看 久久五月网 九九热精品在线观看 国产一区二区三区国产精品 99久热re在线精品996热视频 亚洲国产网 在线视频亚洲一区 日韩字幕一中文在线综合 国产高清一级毛片在线不卡 精品国产色在线 国产高清视频一区二区 精品日本久久久久久久久久 亚洲国产午夜精品乱码 成人免费国产gav视频在线 日韩欧美一区二区在线观看 欧美曰批人成在线观看 韩国电影一区二区 99re这里只有精品6 日韩精品一区二区三区视频 99re6久精品国产首页 亚洲欧美一区二区三区导航 欧美色图一区二区三区 午夜精品视频在线观看 欧美激情在线观看一区二区三区 亚洲热在线 成人国产精品一区二区网站 亚洲一级毛片在线播放 亚洲一区小说区中文字幕 亚洲午夜久久久久影院 国产自产v一区二区三区c 国产精品视频免费 久久调教视频 国产成人91激情在线播放 国产精品欧美亚洲韩国日本久久 久久亚洲日本不卡一区二区 91中文字幕网 成人国产在线视频 国产视频91在线 欧美成人精品第一区二区三区 国产精品福利在线 久久综合九色综合精品 欧美一区二区三区精品 久久国产综合尤物免费观看 久久99青青久久99久久 日韩精品免费 久久国产精品999 91亚洲视频在线观看 国产精品igao视频 色综合区 在线亚洲欧国产精品专区 国产一区二区三区在线观看视频 亚洲精品成人在线 一区二区国产在线播放 中文在线亚洲 亚洲精品第一国产综合野 国产一区二区精品久久 一区二区三区四区精品视频 99热精品久久 中文字幕视频二区 国产成人精品男人的天堂538 99精品影视 美女福利视频一区二区 久久午夜夜伦伦鲁鲁片 综合久久久久久久综合网 国产精品国产欧美综合一区 国产99视频在线观看 国产亚洲女在线精品 婷婷影院在线综合免费视频 国产亚洲3p一区二区三区 91成人爽a毛片一区二区 亚洲一区二区高清 国产欧美亚洲精品第二区首页 欧美日韩导航 亚洲高清二区 欧美激情观看一区二区久久 日韩毛片在线播放 亚洲欧美日韩高清中文在线 亚洲日本在线播放 国产精品一区二区制服丝袜 精品国产一区二区三区不卡 国产不卡在线看 国产欧美网站 四虎永久在线观看视频精品 国产黄色片在线观看 夜夜综合 一本色道久久综合狠狠躁篇 欧美亚洲综合另类在线观看 国产91在线看 伊人久久国产 欧美一区二区在线观看免费网站 国产精品久久久久三级 久久福利 日韩中文字幕a 亚洲午夜久久久久影院 91在线高清视频 国产亚洲一区二区三区啪 久久人精品 国产精品亚洲午夜一区二区三区 综合久久久久久 久久伊人一区二区三区四区 国产综合久久久久久 日韩一区精品视频在线看 国产精品日韩欧美制服 日本精品1在线区 99re视频 无码av免费一区二区三区试看 国产视频1区 日韩欧美中文字幕一区 日本高清中文字幕一区二区三区a 亚洲国产欧美无圣光一区 国产在线视频一区二区三区 欧美国产第一页 在线亚洲欧美日韩 日韩中文字幕第一页 在线不卡一区二区 伊人久久青青 国产精品一区二区在线播放 www.五月婷婷 麻豆久久婷婷国产综合五月 亚洲精品区 久久国产欧美另类久久久 99在线视频免费 伊人久久中文字幕久久cm 久久精品成人免费看 久久这里只有精品首页 88国产精品视频一区二区三区 中文字幕日本在线mv视频精品 国产在线精品成人一区二区三区 伊人精品线视天天综合 亚洲一区二区黄色 国产尤物视频在线 亚洲精品99久久久久中文字幕 国产一区二区三区免费观看 伊人久久大香线蕉综合电影网 国产成人精品区在线观看 日本精品一区二区三区视频 日韩高清在线二区 久久免费播放视频 一区二区成人国产精品 国产精品免费精品自在线观看 亚洲精品视频二区 麻豆国产精品有码在线观看 精品日本一区二区 亚洲欧洲久久 久久中文字幕综合婷婷 中文字幕视频在线 国产成人精品综合在线观看 91精品国产91久久久久福利 精液呈暗黄色 香蕉国产综合久久猫咪 国产专区精品 亚洲精品无码不卡 国产永久视频 亚洲成a人片在线播放观看国产 一区二区国产在线播放 亚洲一区二区黄色 欧美日韩在线观看视频 亚洲精品另类 久久国产综合尤物免费观看 国产一区二区三区国产精品 高清视频一区 国产精品igao视频 国产精品资源在线 久久综合精品国产一区二区三区 www.五月婷婷 精品色综合 99热国产免费 麻豆福利影院 亚洲伊人久久大香线蕉苏妲己 久久电影院久久国产 久久精品伊人 在线日韩理论午夜中文电影 亚洲国产欧洲综合997久久 伊人国产精品 久草国产精品 欧美一区精品二区三区 亚洲成人高清在线 91免费国产精品 日韩精品福利在线 国产一线在线观看 国产不卡在线看 久久99青青久久99久久 亚洲精品亚洲人成在线播放 99久久免费看国产精品 国产日本在线观看 青草国产在线视频 麻豆久久婷婷国产综合五月 国产中文字幕一区 91久久精品国产性色也91久久 国产一区a 国产欧美日韩成人 国产亚洲女在线精品 一区二区美女 中文字幕在线2021一区 在线小视频国产 久久这里只有精品首页 国产在线第三页 欧美日韩中文字幕 在线亚洲+欧美+日本专区 精品国产一区二区三区不卡 久久这里精品 欧美在线va在线播放 精液呈暗黄色 91精品国产手机 91在线免费播放 欧美视频亚洲色图 欧美国产日韩精品 日韩高清不卡在线 精品视频免费观看 欧美日韩一区二区三区四区 国产欧美亚洲精品第二区首页 亚洲韩精品欧美一区二区三区 国产精品视频免费 在线精品小视频 久久午夜夜伦伦鲁鲁片 国产无套在线播放 久热这里只精品99re8久 欧美久久久久 久久香蕉国产线看观看精品蕉 国产成人精品男人的天堂538 亚洲人成网站色7799在线观看 日韩在线第二页 一本色道久久综合狠狠躁篇 国产一区二区三区不卡在线观看 亚洲乱码在线 在线观看欧美国产 久久福利青草精品资源站免费 国产玖玖在线观看 在线亚洲精品 亚洲成aⅴ人在线观看 精品91在线 欧美一区二三区 日韩中文字幕视频在线 日本成人一区二区 日韩免费专区 国内精品在线观看视频 久久国产综合尤物免费观看 国产精品系列在线观看 一本一道久久a久久精品综合 亚洲免费播放 久久精品国产免费 久久人精品 亚洲毛片网站 亚洲成a人一区二区三区 韩国福利一区二区三区高清视频 亚洲精品天堂在线 一区二区三区中文字幕 亚洲国产色婷婷精品综合在线观看 亚洲国产成人久久笫一页 999国产视频 国产精品香港三级在线电影 欧美日韩一区二区三区四区 日韩国产欧美 国产精品99一区二区三区 午夜国产精品理论片久久影院 亚洲精品中文字幕麻豆 亚洲国产高清视频 久久免费手机视频 日韩a在线观看 五月婷婷亚洲 亚洲精品中文字幕麻豆 中文字幕丝袜 www国产精品 亚洲天堂精品在线 亚洲乱码一区 国产日韩欧美三级 久久999精品 伊人热人久久中文字幕 久热国产在线视频 国产欧美日韩在线观看一区二区三区 国产一二三区在线 日韩国产欧美 91精品国产91久久久久 亚洲一区小说区中文字幕 精品一区二区免费视频 国产精品视频免费 国产精品亚洲综合色区韩国 亚洲国产精品成人午夜在线观看 欧美国产日韩精品 中文字幕精品一区二区精品