將分布式計算機網絡中的本地時鐘同步的方法

            文檔序號:7943182閱讀:316來源:國知局

            專利名稱::將分布式計算機網絡中的本地時鐘同步的方法將分布式計算機網絡中的本地時鐘同步的方法
            背景技術
            :本發明涉及將分布式計算機網絡中的本地時鐘同步。本發明尤其感興趣的是通過在網絡中的組件之間的通信鏈路上發送信息來交換資訊的計算機網絡。在不對本發明的具體實現作為限制下,我們使用標準的以太網作為說明例子。在標準的以太網中,終端系統通過雙向通信鏈路經由網絡交換機連接。終端系統會通過把信息發送到交換機而與第二終端系統或一組終端系統通信,然后該交換機會把信息轉播到接收的終端系統或其他終端系統。同樣地,終端系統能通過雙向通信鏈路相互直接連接,這使得終端系統和交換機之間的明顯分別在某些結構中是難以區分的。因此,我們通常使用組件這個術語來稱呼可能是終端系統或交換機的實體裝置。組件之所以被稱為終端系統或交換機是由其用途而非其實體外觀來決定的。時鐘同步的問題是使不同組件的本地時鐘達至接近一致的問題。由于容錯的原因,多個組件可被設置成產生同步信息。將本地時鐘同步的問題具有長久的歷史,已知很多聲稱即使有失效出現也可將本地時鐘同步的算法(拜占庭時鐘同步,蘭波特L和梅利亞-史密斯PM,美國計算機學會作業系統專業組綜論(ACMSIGOPSOperatingSystemsReview),第20卷,第3期,第10-16頁,1986,美國計算機學會紐約(ACMNew^rk),NY,美國;最佳時鐘同步,斯瑞肯思TK和圖格S,美國計算機學會期刊(JACM),第34卷,第3期,第擬6-645頁,1987,美國計算機學會紐約(ACMNew^rk),NY,美國;可靠時鐘同步范例,施奈德FB,計算機科學系技術報告TR,第86-735頁;分布式實時系統中的時鐘同步,柯匹茲H和歐施森雷特W,IEEE計算機匯刊(IEEETransactionsonComputers),第36卷,第8期,第933-940頁,1987,IEEE計算機學會華盛頓(IEEEComputerSocietyWashington),DC,美國;容錯的時間觸發通信的啟動和恢復以基于總線和基于交換機的網絡拓撲結構為中心,斯泰納W,2008,Vdm出版社穆勒博士)。
            發明內容本發明在其容錯性質方面從上述協議中區別出來。■本發明是可擴展的本發明能被設置成作為例如用于工業控制的簡單的主從時鐘同步協議運行。另一方面,本發明能被設置成作為例如用于載人航天應用中的多主導裝置(Multi-Master)時鐘同步協議運行。這種可擴展性提供了巨大的經濟利益由于本發明能用于不同的應用領域,因此能顯著地降低實現本發明的成本。同樣地,本發明被跨領域地使用增加了可探測到在實現本發明中的潛在失效(failure)的可能性,并由此大大完善了本發明的實現。依循正確概率(probabilityofcorrectness)是其實現數量(numberofimplementations)的直接函數這一概念,這也被稱為“百萬證明”(“proof-by-million”)。■本發明容忍多個不一致的錯誤(inconsistentfaults)當本發明被設置成多主導裝置模式時,其在同一時間點上容忍完全不一致-遺漏(inconsistent-omission)的錯誤的通信路徑甚至錯誤的終端系統。這失效模式意味著各個錯誤的組件對各個信息有著潛在不一致的撤銷行為在任何其輸入通信鏈路和任何其送出通信鏈路上任意地撤銷信息。盡管發明家們在容錯時鐘同步上有豐富的經驗,但他們并不知道任何現有的容錯同步算法會容忍這一程度的容錯。因此,本發明允許更具有成本效益地實現需要容忍系統中多種失效的系統結構。例如,甚至能在僅由兩個獨立的通信信道組成的系統結構中容忍所述不一致的失效模式。以前實現容忍所述失效的通信結構需要至少三個獨立的通信信道。■即使有永久失效出現本發明也可容忍任意的暫時干擾。除了所述容錯之外,本發明還提供自穩定性質。自穩定意味著在分布式計算機系統的多個組件中的暫時擾動之后還會重新確立同步。本發明通過使用形式化方法(formalmethods)(模型檢測研究(model-checkingstudies))從任意的系統狀態穩定為同步系統狀態。隨著計算機芯片的特征尺寸減小從而造成組件內的暫時擾動增多,這一自穩定性質變得越來越重要。今后設計可靠的分布式計算機網絡要依靠本發明提供的對多個暫時擾動的有效而合理的容限。盡管發明家們在容錯時鐘同步上有豐富的經驗,但他們并不知道任何現有的容錯同步算法會容忍這一程度的容錯。本發明基于以下創新性步驟■容錯握手程序的新概念,以在系統一開機就確立同步以及一旦總體同步消失時重新獲得同步。與以前的協議相比,只要有至少一個無錯誤的通信信道,容錯握手即使在同一時間點有不一致的通信信道及甚至是有錯誤的終端系統出現也可保證端對端的一致性。容錯握手保證冷啟動信息或所產生的冷啟動應答信息(或者上述兩者)在系統中是一致的。■不同類型的探測團集機制的新概念,其既用于兩者與預定組件同步的終端系統的數量,以及被識別出不與所述組件同步的終端系統的數量,又用于該兩者之間的關系。■多個同步狀態的新概念,其允許為不同的同步狀態指定不同的探測團集機制;因為時間觸發的協議在一旦確立同步時就比在啟動程序期間能容忍范圍廣得多的失效模式。能使用不同的同步狀態來追蹤同步程序的運行歷史。在早期和容易達到的同步狀態中,探測團集機制被設置得非常脆弱,以捕捉所有可能的團集情況,而在較后的同步狀態(如組件看到終端系統數量足夠,或者同步通信在可配置數目的同步輪次中是成功的話,就進入該狀態)中,探測團集機制被設置得較為寬松,以致無需執行重設同步就能容忍范圍更廣的失效模式。■中央監護功能的新概念,如提供同步信息的終端系統是不被信任,則能在交換機中啟用該功能。同樣地,如提供該同步的終端系統是被信任,則能把中央監護功能減至最小功能。■重新使用按照高完整性(high-integrity)設計實現部分(subset)設備的概念;按照高完整性設計原理實施的組件能被假定在受限制的失效模式中失效。信任按照高完整性原理實現的組件是工程學上的通常做法,然而受限制的失效模式并不意味著故障沉默(fail-silent)。本發明還允許高完整性組件在完全不一致遺漏的失效模式。該失效模式意味著各個錯誤的組件能按各個信息的潛在不一致的撤銷行為在任何其輸入通信鏈路和任何其送出通信鏈路上任意地撤銷信息。圖1描述了分布式計算機網絡的例子。圖2描述了同步信息的數據結構的例子。圖3描述了同步信息從終端系統到交換機的流動和在該交換機內執行的同步壓縮功能。圖4描述了同步操作中同步程序的三個迭代。圖5描述了同步的探測團集程序。圖6描述了非同步的探測團集程序。圖7描述了在終端系統中執行的協議狀態機。圖8描述了如該終端系統被假定為信任時在交換機中執行的協議狀態機。圖9描述了如該終端系統被假定為不信任時在交換機中執行的協議狀態機,該交換機正在執行廣泛的監護功能。圖10描述了所述分布式計算機網絡的無錯誤的和無碰撞的啟動情況。圖11描述了所述分布式計算機網絡的無錯誤的啟動碰撞情況。圖12描述了所述分布式計算機網絡在出現錯誤的終端系統101和錯誤的交換機201時的啟動情況。具體實施例方式圖1描述了由5個終端系統101-105和2個交換機201,202組成的分布式計算機網絡。終端系統101-105中各個通過雙向通信鏈路110連接至交換機201并通過另一雙向通信鏈路120連接至交換機202。因此,該分布式計算機網絡提供兩個多余通信信道以供任何兩個終端系統101-105之間通信。終端系統101-105產生被交換機201,202消費的一些同步信息。交換機201,202從接收來自終端系統101-105的一些同步信息去產生一些新的同步信息。一旦終端系統101-105被同步,終端系統101-105會在同一預先排定的瞬間發布該些同步信息。發布是指在終端系統101-105中的內部信號,其顯示信息已準備好被傳輸。信息在通信鏈路110,120上傳輸的實際啟動是可以被延遲的。這種延遲的一個原因是已有另一信息正在傳輸中。該新發布的信息會因此被延遲,直至在通信鏈路110,120上該進行傳輸中的信息完成。除了這些終端系統101-105之外,在分布式計算機網絡中可以存在另一些終端系統,其僅是同步信息的消費者而并不發布同步信息。發布同步信息的終端系統101-105被稱為同步主導裝置。圖2描述了同步信息的數據結構的例子。在一個實現中,集成周期域401被用來顯示在時間觸發的通信排程中的位置。在一個實現中,成員新域402被用來顯示各個信息的發送器。在一個實現中,優先同步域403被用來實現同步信息上的優先機制。在一個實現中,區域同步域404被用來實現相互同步的獨立的組件組不同獨立組中的組件的同步信息會有不同的數值分配給區域同步域404。在一個實現中,類型域405被用來實現不同的同步信息類型同步協議通常使用不同的類型來區分開機時所使用的同步信息和一旦確立組件之外的同步時所執行的同步信息。在一個實現中,透明時鐘域406被用來追蹤在信息橫跨分布式計算機網絡時終端系統和交換機所施加的動態延遲。在一個實現中,引起信息延遲的各個組件會把該延遲加至透明時鐘域406的數值中。圖3描述了分布式計算機網絡中同步信息301-304,380的信息流,從左到右描述了實時的進展。終端系統101-104產生同步信息301-304,把這些信息發送至交換機201。交換機201記錄同步信息301-304的到達時間點并計算這些信息的時間持久點791-794。交換機201從時間持久點791-794計算壓縮同步信息380的發布時間點,然后壓縮同步信息被發送至終端系統101-104。同樣地,交換機201能轉發各個同步信息301-304而非壓縮同步信息380。當這些交換機壓縮同步信息時會在壓縮同步信息的成員新域402中設定一些位元,該些位元與提供同步信息以用來計算壓縮同步信息的發布時間點的終端系統有關聯。術語“持久”與單個信息有關,并以一時間點為參考,接收器能從這一時間點開始使用該信息,以保證接收器不會在這一時間點之后接收到先于所述第一信息發送的另一信肩、ο依照交換機的協議狀態,交換機可阻擋某些同步信息。我們稱這種阻擋同步信息為中央監護功能。除了產生或轉播同步信息外,交換機使用同步信息本身來同步。在進一步描述一實現中,我們將會討論在交換機中執行的協議狀態機(圖8-圖9),其也把壓縮同步信息當作為輸入。描述了僅在一個通信信道(信道包括交換機201)上的信息流。在一個實現中,終端系統101-104同時或依次把同步信息301-304在一些復制的通信信道上發送。圖4描述了在同步運行期間,即一旦成功地將終端系統101-105和交換機201-202的足夠部分(subset)的本地時鐘同步,該同步程序的三個迭代。從左到右描述了實時的進展。在預先排定的時間點,一些終端系統發布同步信息5101-5105。交換機201-202使用該些同步信息將其本地時鐘同步,并各自產生壓縮同步信息5201。然后,交換機201-202的同步信息會被用來將終端系統101-105的本地時鐘同步。終端系統101-105的同步信息5101-5105被用于交換機201-202的時鐘同步以及用于交換機201-202的集成或重新集成。交換機201-202的該些同步信息5201被用于終端系統101-105的時鐘同步以及集成或重新集成。在同步操作期間,該些同步信息是以一段INC的時間作為時間單位排程。終端系統使用變量本地集成周期(LocaUntegrationCycle)循環地點算始于0直至指定最大值的集成周期。終端系統使用本地集成周期(LocanntegrationCycle)值去設定其傳輸的集成幀內的集成周期域401,并去檢查其接收到的集成周期域401。僅在一個通信信道(信道包括交換機201)上的信息流被描述。在一個實現中,終端系統101-105同時或依次把同步信息5101-5105在一些復制的通信信道上發送。圖5描述了同步的探測團集程序。同步的探測團集程序使用本地變量來跟蹤當前有多少終端系統與各自的終端系統同步。在預定的集成幀的排定接收時間點前后的接收窗口RW過期時,終端系統會更新可變本地成員組件(varLocalMembershipComp)。如果接收到的集成幀內的集成周期域401與本地集成周期(LocaUntegrationCycle)的值相配,其會把可變本地成員組件(varLocalMembershipComp)設定成在接收窗口RW期間接收到的集成幀中的最大成員新域402。能獨立地為各個同步狀態(終端系統_嘗試同步狀態1060、終端系統_同步狀態1070、終端系統_穩定狀態1080,見圖7)啟用或停止同步的探測團集機制。如在同步狀態下啟用同步的探測團集機制,則在同步評價時間點SEV更新可變本地成員組件(varLocalMembershipComp)之后,以狀態相關閾值(嘗試同步閾值同步(TentativeSyncThresholdSync)、同步閾值同步(SyncThresholdSync)、或穩定閾值同步(StableThresholdSync))來測試可變本地成員組件(varLocalMembershipComp)。如設定在可變本地成員組件(varLocalMembershipComp)中的位元的數量少于各自的閾值,則測試是成功的,否則就是不成功的。還與終端系統類似的是,交換機在啟用時也可在同步狀態(交換機_嘗試同步狀態2060、交換機_同步狀態2070、以及交換機_穩定狀態2080,見圖8)執行同步的探測團集算法。圖6描述了非同步的探測團集程序。非同步的探測團集的程序使用本地變量可變本地非同步成員計數(varLocalAsyncMembCount)來跟蹤當前有多少終端系統不與各自的組件同步,但是可運行的(從而排除了已關機的終端系統)。該變量可變本地非同步成員計數(varLocalAsyncMembCount)是具有從位元到終端系統的一對一關系的位元向量。能獨立地為各個同步狀態(終端系統_嘗試同步狀態1060、終端系統_同步狀態1070、終端系統_穩定狀態1080)啟用或停止非同步的探測團集機制。如在同步狀態下啟用非同步的探測團集機制,則在非同步評價時間點AEV以狀態相關閾值(嘗試同步閾值非同步(TentativeSyncThresholdAsync)、同步閾值非同步(SyncThresholdAsync)、或穩定閾值非同步(MablelliresholdAsync)來測試可變本地非同步成員計數(varLocalAsyncMembCount)。終端系統在各自的接收窗口RW以外接收到集成幀時會更新可變本地非同步成員計數(varLocalAsyncMembCount),這也被稱為排程外接收。如圖6所示,排程外接收可以是在任何接收窗口RW外接收集成幀(如集成幀5211所描述),或者可以是在接收窗口內接收集成幀,但在接收窗口內接收到的集成幀帶有錯誤的集成周期域401(如集成幀5221所描述)O當終端系統接收到排程外的集成幀時,設定在集成幀的成員新域402中的所有位元也會被設定在可變本地非同步成員計數(varLocalAsyncMembCount)中。在非同步的評價時間點AEV時,評價可變本地非同步成員計數(varLocalAsyncMembCount)。如設定在可變本地成員組件(varLocalMembershipComp)中的位元數量等于或多于各自的狀態相關閾值,則測試是成功的。當可變本地成員組件(varLocalMembershipComp)少于2個(意味著交換機目前僅和單個終端系統同步或根本不和任何終端系統同步)而可變本地非同步成員計數(varLocalAsyncMembCount)至少為1個時,測試同樣是成功的。在所有其他情況下,非同步探測團集程序是不成功的。與終端系統類似,交換機在啟用時也會在同步狀態(交換機_嘗試同步狀態2060、交換機_同步狀態2070、以及交換機_穩定狀態2080)下執行非同步的探測團集算法。然而,非同步的評價時間點AEV會緊接在同步的評價時間點SEV之前。圖7描述了終端系統中執行的協議狀態機。終端系統將非同步狀態和同步狀態區分。終端系統_集成狀態1010、終端系統_等待周期開始狀態1020、終端系統_非同步狀態1030、終端系統_泛濫狀態1040、以及終端系統_等待周期開始_冷啟動狀態1050屬于非同步狀態。終端系統_嘗試同步狀態1060、終端系統_同步狀態1070、終端系統_穩定狀態1080屬于同步狀態。終端系統能通過接收集成幀從非同步狀態進入同步狀態,在這種情況下我們稱從非同步到同步的轉換為集成程序。而且,終端系統能通過成功執行容錯握手而從非同步狀態進入同步狀態。在這第二種情況下,我們談到冷啟動或重設程序。接下來,假設所有的終端系統是時鐘同步主導裝置,我們討論圖7中描述的狀態機。在另一實現中,僅部分終端系統可被設置為時鐘同步主導裝置。未被設置為時鐘同步主導裝置的終端系統僅通過集成程序進入同步狀態,從而在狀態機中僅執行部分轉換。終端碰集成狀杰1010和終端系統等待周期開始狀杰1020終端系統在一開機時就以終端系統_集成狀態1010開始。當終端系統接收到在成員新域402中設有位元數量足夠多的集成幀時,其能從終端系統_集成狀態1010進入同步狀態終端系統_同步狀態1070(轉換1011)。同樣地,如終端系統接收到的集成幀帶有足夠多的位元數量被設定在集成幀中,但帶有的位元數量不夠多到設定轉換到終端系統_同步狀態1070(轉換1011)時,其就能通過終端系統_等待周期開始狀態1020進入終端系統_嘗試同步狀態1060(轉換1012,1021)。當終端系統在終端系統_集成狀態1010中接收到冷啟動應答幀時,其轉換到等待周期開始_冷啟動狀態1050(轉換1013)。當終端系統在一段可設定的時間內接收不到帶有為轉換1011或1012設定的足夠位元數量的集成幀時,該終端系統進入終端系統_非同步狀態1030(轉換1014)。終端系統非同步狀杰1030當終端系統在終端系統_非同步狀態1030時,其在某已被配置的時期內在所有復制信道上傳輸冷啟動幀。只要終端系統接收到帶有為轉換1032或轉換1033設定的足夠位元數量的集成幀(集成程序),就再次允許其從終端系統_非同步狀態進入終端系統_嘗試同步狀態1060或終端系統_同步狀態1070。當終端系統在終端系統_非同步狀態中并接收到冷啟動應答幀時,其轉換到終端系統_等待周期開始_冷啟動狀態(轉換1031)。此外,在終端系統_非同步狀態1030中,終端系統還能夠啟動容錯握手程序。當在終端系統_非同步狀態的終端系統接收到冷啟動幀時,其進入終端系統_泛濫狀態1040(轉換1034),容錯握手可被說成已被啟動。終端系統泛濫狀態1040:在終端系統_泛濫狀態1040中,終端系統等待一段時間CS0,當CSO過時時,終端系統在所有復制的通信信道上傳輸冷啟動應答幀。當終端系統在CSO逾時過期之前接收到冷啟動幀時,則重啟CSO逾時。在終端系統_泛濫狀態1040中,所有集成幀都被丟棄。當CSO逾時過期,終端系統發送冷啟動應答幀時,終端系統會等待接收冷啟動應答幀。如其在預期的到達窗口內接收到冷啟動應答幀,則結論為該容錯握手是成功的,并進入終端系統_等待周期開始_冷啟動狀態1050(轉換1041)。太早接收到的冷啟動應答幀會被丟棄。當終端系統發送冷啟動應答幀,但未在預期的到達窗口中接收到冷啟動應答幀時,結論為該容錯握手是不成功的,并轉換回終端系統_非同步狀態1030(轉換1042)。該容錯握手允許容忍冷啟動幀的啟動/重啟碰撞以及在出現錯誤的組件時啟動。圖10-圖12描述了這兩種情況。終端碰m^mmm^7令啟云加犬杰1050在終端系統_等待周期開始_冷啟動狀態1050中,終端系統等待冷啟動應答逾時CAO(見圖10、圖11)。當終端系統在CAO過時前接收到冷啟動應答幀時,重啟CAO逾時。當終端系統接收到冷啟動幀時,終端系統會轉換到終端系統_泛濫狀態1050,并啟動容錯握手(轉換1052)。當CAO逾時過期時,終端系統轉換到終端系統_嘗試同步狀態1060(轉換1051)。終端系統嘗試同步狀杰1060:當該些探測團集算法中的任一算法被啟用并且成功返回時,終端系統會轉換到終端系統_非同步狀態1030(轉換1063)。當終端系統接收到冷啟動幀時,其轉換到終端系統_泛濫狀態1040(轉換1064),并啟動容錯握手。當終端系統接收到冷啟動應答幀時,其轉換到終端系統_等待周期開始_冷啟動狀態1050(轉換1065)。當設定在用于同步的探測團集算法的可變本地成員組件(varLocalMembershipComp)變量中的位元數量增長超過可配置閾值時,則終端系統轉換到終端系統_同步狀態1070(轉換1062)。當終端系統在終端系統_嘗試同步狀態1060停留某可配置數目的集成周期INC時,如可設置的旗標已被設定的話,終端系統可轉換到終端系統_穩定狀態1080。終端系統同步狀杰1070當探測團集算法中的任一個被啟用并且成功返回時,終端系統能被設置成轉換到終端系統_非同步狀態1030(轉換107或終端系統_集成狀態1010(轉換1072)。當終端系統接收到冷啟動應答幀時,其轉換到終端系統_等待周期開始_冷啟動狀態1050(轉換1074)。當終端系統在終端系統_同步狀態1070停留某可配置數目的集成周期INC時,如可設置旗標被設定,終端系統可轉換到終端系統_穩定狀態1080。終端系統穩定狀態1080當非同步的探測團集算法被啟用并且成功返回時,終端系統轉換到終端系統_集成狀態1010(轉換1081)。而且,當同步的探測團集算法被啟用并且在某可配置數目或順序的集成周期INC中成功返回時,終端系統也轉換到終端系統_集成狀態1010(轉換1081)。當終端系統接收到冷啟動應答幀時,其轉換到終端系統_等待周期開始_冷啟動狀態。圖8描述了如假定終端系統是被信任,在交換機中執行的協議狀態機。這種情況下的交換機狀態機與終端系統狀態機是非常相似的。在一個實現中,終端系統和交換機的狀態機是統一的,以致能通過設定來選擇終端系統和交換機的行為。交換機集成狀態2010和交換機等待周期開始狀態2020交換機狀態機在一開機時就以交換機_集成狀態2010開始。當交換機接收到在成員新域402中設有位元數量足夠多的集成幀時,其能從交換機_集成狀態2010進入同步狀態交換機_同步狀態2070(轉換2011)。而且,如交換機接收到的集成幀帶有足夠多位元數量被設定在集成幀中,但位元數量不夠多到設定成轉換到交換機_同步狀態2070(轉換2011),交換機就能通過交換機_等待周期開始狀態2020進入交換機_嘗試同步狀態2060(轉換2012,2021)。當交換機在一段可設定時段內沒有接收到帶有為轉換2011或2012而設定的足夠位元數量的集成幀時,交換機進入交換機_非同步狀態2030(轉換2013)。交換機非同步狀態2030:只要交換機接收到帶有為轉換2032或轉換2033而設定的足夠位元數量的集成幀,就允許其從交換機_非同步狀態進入交換機_嘗試同步狀態2060或交換機_同步狀態2070(集成程序)。交換機嘗試同步狀杰2060:當探測團集算法中的任一個被啟用并且成功返回時,交換機會轉換到交換機_非同步狀態2030(轉換2063)。當設定在用于同步的探測團集算法中的可變本地成員組件(varLocalMembershipComp)變量中位元數量的增長超過可配置的閾值時,交換機轉換到交換機_同步狀態2070(轉換206。當交換機在交換機_嘗試同步狀態2060停留某可配置數目的集成周期INC時,如可設置旗標已被設定,交換機就可轉換到交換機_穩定狀態2080(轉換2061)。交換機同步狀杰2070當非同步的探測團集算法被啟用并且成功返回時,交換機轉換到交換機_集成狀態2010(轉換2072)。當同步的探測團集算法被啟用并且成功返回時,交換機依交換機的設定而轉換到交換機_集成狀態2010(轉換207或交換機_嘗試同步狀態2060(轉換2073)。當交換機在交換機_同步狀態2070停留某可配置數目的集成周期INC時,如可設置旗標已被設定,交換機就可轉換到交換機_穩定狀態2080(轉換2071)。在交換機_同步狀態2070中,交換機不會轉發冷啟動幀。交換機穩定狀態2080當非同步的探測團集算法被啟用并且成功返回時,交換機轉換到交換機_集成狀態2010(轉換2081)。而且,當同步的探測團集算法被啟用并且在某可配置數目或順序的集成周期INC中成功返回時,交換機也轉換到交換機_集成狀態2010(轉換2081)。在交換機_穩定狀態2080中,交換機不會轉發冷啟動幀。圖9描述了如假定終端系統不被信任,在交換機中執行的協議狀態機。交換機狀態機又與終端系統狀態機非常相似。在一個實現中,終端系統和交換機的狀態機是統一的,以致能通過設定來選擇終端系統和交換機的行為。當交換機在交換機_非同步狀態2030時,與不信任的終端系統一起運行的交換機轉播冷啟動幀并阻擋所有其它狀態的冷啟動幀。當交換機在交換機_非同步狀態2030時,只要成員新域402的值足夠高,或者當交換機在交換機_冷啟動應答啟用狀態2040時,與不被信任的終端系統一起運行的交換機會轉播冷啟動應答幀并阻擋所有其它狀態的冷啟動應答幀。如交換機帶有轉換,而該轉換在其協議狀態機中被限定為使用該集成幀或該集成幀被用于時鐘同步程序的話,與不被信任的終端系統一起運行的交換機會轉播在交換機_集成狀態2010、交換機_非同步狀態2030、交換機_等待進入狀態2040、交換機_同步狀態2070、以及交換機_穩定狀態2080中的集成幀。所有其它集成幀都被阻擋。交換機會阻擋不是用于交換機協議狀態機的集成幀。例如,這種集成幀可以是由單個錯誤的終端系統發送的錯誤的集成幀。交換機集成狀態2010:交換機狀態機在一開機時就以交換機_集成狀態2010開始。當交換機接收到在成員新域402中設有位元數量足夠多的集成幀時,交換機能從交換機_集成狀態2010進入同步狀態交換機_同步狀態2070(轉換2011)。當交換機在一段可設定的時段內沒有接收到帶有足夠為轉換2011或2012而設定的位元數量的集成幀時,就進入交換機_非同步狀態2030(轉換2013)。交換機非同步狀杰2030:只要交換機接收到帶有為轉換2033而設定的足夠位元數量的集成幀,就允許交換機從交換機_非同步狀態進入交換機_同步狀態2070(集成程序)。當交換機接收到冷啟動幀或足夠數量的冷啟動應答幀時,就轉換到交換機_冷啟動應答啟用狀態2040(轉換2034)。交換機冷啟動應答啟用狀杰2040在可配置的逾時過期后,交換機轉換到交換機_等待進入狀態2050(轉換2041)。交換機等待講入狀杰2050:在交換機_等待進入狀態2050中,交換機等待至接收到在成員新域402中設有位元數量足夠多的集成幀時轉換到交換機_同步狀態2070(轉換2051)。如交換機在可配置的逾時時間內未接收到這種集成幀,交換機就轉換回交換機_非同步狀態2030(轉換2052)。交換機同步狀杰2070當非同步的探測團集算法被啟用并且成功返回時,交換機轉換到交換機_集成狀態2010(轉換2072)。當同步探測團集算法被啟用并且成功返回時,交換機轉換到交換機_集成狀態2010(轉換2072)。當交換機在交換機_同步狀態2070停留某可配置數目的集成周期INC時,如可設置旗標被設定,交換機就可轉換到交換機_穩定狀態2080(轉換2071)。交換機穩定狀態2080:當非同步的探測團集算法被啟用并且成功返回時,交換機轉換到交換機_集成狀態2010(轉換2081)。而且,當同步的探測團集算法被啟用并且在某可配置數目或順序的集成周期INC內成功返回時,交換機也轉換到交換機_集成狀態2010(轉換2081)。圖10描述了分布式計算機網絡的無錯誤的和無碰撞的啟動情況,從左到右描述了實時的進展。描述了僅在一個通信信道(信道包括交換機201)上的信息流。本發明區分了不同類型的信息冷啟動幀3101、冷啟動應答幀4102-4105和集成幀5101-5105。集成幀在同步操作期間使用,也就是一旦成功確立同步時。冷啟動幀用于啟動容錯握手階段。冷啟動應答幀用于確認和結束容錯握手程序并在容錯握手階段之外接收到時用于進行同步。圖10描述了以接受冷啟動幀3101開始,到接收到冷啟動應答幀4201結束的容錯握手FTH。各個終端系統101-105會發送冷啟動應答幀至其接受的冷啟動幀。終端系統會接受在FTH期間接收到發送自其它終端系統的所有冷啟動幀(終端系統能被設置成對自己的冷啟動幀作出反應或不作出反應),并會重啟CS0。當冷啟動偏移CSO過時時,終端系統會發送冷啟動應答幀。當終端系統接收來自交換機的冷啟動應答幀時,其結論是容錯握手FTH是成功的并朝同步狀態前進。在FTH期間僅這些回應的冷啟動應答幀被使用。在FTH期間太早接收到的冷啟動應答幀會被丟棄。當終端系統沒有接受到冷啟動應答幀回來至其自己發送的冷啟動應答幀時,其結論是容錯握手FTH是不成功的并且進入非同步狀態。圖10中的情況始于終端系統101發送冷啟動幀3101。在一個實現中,冷啟動幀被交換機201轉播回到所有終端系統101-105。轉播時交換機就在與冷啟動幀各自的發送器有關的成員新域402中設定位元,在這一情況是終端系統101,并清除所有其他位元。這意味著各個接收終端系統能通過成員新域402識別出冷啟動幀的發送器。在這一情況中,各個終端系統把終端系統101識別為冷啟動幀3101的原本發送器。在一個實現中,所有終端系統101-105被設置成其不會對自己的冷啟動幀(即各個終端系統原本發送的冷啟動幀)作出反應。終端系統102-105會啟動冷啟動偏移逾時CSO0當逾時過期時,終端系統102-105會發送冷啟動應答幀4102-4105。在一個實現中,交換機壓縮冷啟動應答幀4102-4105并產生新的冷啟動應答幀4201。然后壓縮冷啟動應答幀4201被發送至終端系統。終端系統101-105—接收到冷啟動應答幀4201就會啟動冷啟動應答逾時CA0。當逾時過期時,終端系統101-105會進入同步狀態并發送集成幀5101-5105。在另一個實現中,冷啟動應答幀不被壓縮,但交換機201-202轉發所有冷啟動應答幀。圖11描述了無錯誤的帶碰撞的啟動情況,從左到右描述了實時的進展。由于容錯的原因,多個終端系統101-105被設置成提供同步信息,以致就算在部分終端系統有失效的情況下,那些無錯誤的終端系統仍會產生同步信息。特別是,多個終端系統101-105可被設置成提供冷啟動信息,冷啟動信息被用于初始同步。由于這些信息是在還未確立同步信息時所發送的第一批同步信息,所以在我們稱為碰撞區域(collisiondomain)⑶的間隔期間,兩個或更多個終端系統可決定在大體相同的時間點發送其冷啟動幀。原則上,有可能像初始同步事件般地使用碰撞。然而,在這種情況下,由于兩個不同的終端系統101-105可決定使用不同的冷啟動幀來同步,所以該初始同步是碰撞區域CD的直接函數。在存儲和轉發網絡中,碰撞區域⑶是很大的。因此,為了提高初始同步,本發明指定了決定性地解決碰撞情況的機制。圖11中描述的情況描述了如何在無錯誤的情況下解決碰撞的情況的例子。所述情況始于終端系統102發送冷啟動幀3102。在冷啟動幀開始傳輸后的碰撞時段⑶之內,終端系統101也開始發送冷啟動幀3101,引起碰撞。冷啟動幀3102是交換機201-202轉播及終端系統101-105接收到的第一個冷啟動幀。終端系統101,103-105會使用該冷啟動幀3102啟動冷啟動偏差逾時CSO(終端系統102被設置成不使用其自己的冷啟動幀)。然而,在接收到冷啟動幀3102后,冷啟動幀3101由交換機201-202轉播到終端系統101-105。終端系統102-105會使用冷啟動幀3102來重設冷啟動偏差逾時CS0。因為終端系統101也被設置成不對自己的冷啟動幀作出反應,所以其不會對冷啟動幀3101作出反應。因此,終端系統101是第一個過時并發送冷啟動應答幀4101的終端系統。因為終端系統102-105冷啟動偏差逾時CSO發生得較后,其接著發送其冷啟動應答幀4102-4105。交換機首先處理來自終端系統101的冷啟動應答幀4101,和把所產生的冷啟動應答幀4201發送回終端系統101-105。僅終端系統101會通過啟動冷啟動應答偏差逾時CAO對該冷啟動應答幀作出反應。終端系統102-105不會使用冷啟動應答幀4201,因為在其容錯握手FTH中是太早接收到冷啟動應答幀4201。一旦終端系統101-105接收到冷啟動應答幀4211時,所有終端系統101-105會接受這冷啟動應答終端系統102-105接受是因為其時間上符合其容錯握手FTH階段,終端系統102接受是因為其已經結束其FTH。圖12描述了在啟動期間包括錯誤的終端系統101和錯誤的交換機201的失效情況,從左到右描述了實時的進展。該情況始于錯誤的終端系統101把冷啟動幀3101僅發送至交換機201(正確的終端系統總會在所有復制信道上發送同步幀)。錯誤的交換機201把冷啟動幀3101僅轉播到終端系統103(正確的交換機總會把同步發送至所有的終端系統)。終端系統103接收到冷啟動幀3101并通過設定冷啟動偏差逾時CSO來啟動其容錯握手。當CTO過期時,終端系統103在所有復制信道上發送冷啟動應答幀。從而錯誤的交換機201和正確的交換機202接收到冷啟動應答幀4103。正確的交換機202會把冷啟動應答幀4103作為冷啟動應答幀4202轉播到所有的終端系統101-104。終端系統103會接收到該與其容錯握手FTH相配的冷啟動應答幀4202,并其結論是該FTH是成功的。終端系統102和104在FTH之外接收到冷啟動應答幀,從而用其同步。從而所有正確的終端系統會通過接收冷啟動應答幀4202來啟動冷啟動應答偏差CA0,并會進行到同步操作。權利要求1.用于將分布式計算機網絡中的本地時鐘同步的方法,其中所述計算機網絡由多個終端系統和至少兩個交換機組成,各個終端系統通過雙向通信鏈路連接至至少兩個交換機,并且已設置的部分終端系統和交換機以同步狀態機的形式執行該方法,其特征在于a)所述狀態機使用至少三種不同的幀類型(冷啟動幀類型、冷啟動應答幀類型、和集成幀類型),以及b)所述狀態機中的狀態可被說成是屬于非同步狀態的一組或屬于同步狀態的一組,以及c)被設置成同步主導裝置的所有終端系統在所述其中一個非同步狀態中周期性地發送冷啟動幀,以及d)被設置為同步主導裝置的所有終端系統在接收到冷啟動幀之后一段可配置的第一逾時(CSO)時間通過在所有復制的通信通道上發送冷啟動應答幀以對接收到的冷啟動幀作出反應,條件是只要終端系統處于同步狀態機為冷啟動幀限定的轉換的狀態中,并且在所述冷啟動應答發送之前接收到連續的冷啟動幀時,重設所述第一逾時(CSO),以及e)所有被設置成同步主導裝置的終端系統通過啟動可配置的第二逾時(CAO)來對接收到的冷啟動應答幀作出反應,條件是該些終端系統還未執行所述第一逾時(CSO),并且在所述第二逾時(CAO)過期時進入同步狀態。2.按照權利要求1所述的方法,其特征在于終端系統不會對自己的冷啟動幀作出反應。3.按照權利要求1或2所述的方法,其特征在于在其中一個同步狀態中的被設置成同步主導裝置的終端系統會周期性地發送集成幀,所述集成幀被那些已經在同步狀態中的終端系統用于時鐘同步,并被那些在其中一個非同步狀態中的終端系統用于集成。4.按照權利要求1至3中其中一項權利要求所述的方法,其特征在于信息發送器由設定在同步信息中的位元識別。5.按照權利要求1至4中其中一項權利要求所述的方法,其特征在于所述終端系統和/或交換機在至少其中一個同步狀態中執行同步的探測團集算法。6.按照權利要求5所述的方法,其特征在于所述同步的探測團集算法通過以下方法實現組件(終端系統或交換機)監測與所述組件同步的終端系統,并且如與所述組件同步的終端系統的數量低于在某個數量的通信周期的閾值,則該組件進入非同步狀態。7.按照權利要求6的方法,其特征在于對每個同步狀態能獨立地設定用于同步的團集探測算法的閾值。8.按照權利要求1至7中任一權利要求所述的方法,其特征在于所述終端系統和/或交換機在至少一個同步狀態中執行非同步的團集探測算法。9.如權利要求8所述的方法中,其特征在于實現非同步的團集探測算法,以致組件(終端系統或交換機)監測不與所述組件同步但可運行的終端系統,并且如不與所述組件同步的終端系統的數量增長至超過在某個數量的通信周期中的狀態相關閾值,則該組件進入非同步狀態。10.按照權利要求9所述的方法,其特征在于對每個同步狀態能獨立地設定用于非同步的團集探測算法的閾值。11.按照權利要求1至10中其中一項權利要求所述的方法,其特征在于終端系統101-105實現以下的方法去點算未同步的組件通過在某段長過一個集成周期INC的時間,記錄在排程外接收到的集成幀組中的被設定在同步信息中的位元(成員新域40,并且不與所述組件同步的終端系統的數量是被設定在所記錄的數據結構中的位元的位元和。12.按照權利要求1至11中其中一項權利要求所述的方法,其特征在于當所述組件是在可配置的時間中處于同步狀態時,從另一同步狀態(同步狀態)進入其中一個同步狀態(穩定狀態)。13.按照權利要求1至12中其中一項所述的方法,其特征在于當同步的團集探測機制顯示所述同步的終端系統的數量少于在一段可配置數目的順序集成周期(INC)而非依第一顯示時所設定的狀態相關的閾值,終端系統或交換機從其中一個同步狀態(穩定狀態)轉換到其中一個非同步狀態。14.按照權利要求1至13中其中一項權利要求所述的方法,其特征在于所述交換機是能根據狀態來設定的,以僅轉播帶有可設置的某些類型組的信息。15.用于按照權利要求1至14中其中一項權利要求所述的方法的終端系統。16.用于按照權利要求1至14中其中一項權利要求所述的方法的交換機。17.由多個按照權利要求15所述的終端系統組成的網絡,其中各個終端系統通過雙向通信鏈路連接至至少兩個按照權利要求16所述的交換機。全文摘要本發明涉及用于將分布式計算機網絡中的本地時鐘同步的方法,其中所述計算機網絡由多個終端系統和至少兩個交換機組成,各個終端系統通過雙向通信鏈路連接至至少兩個交換機,并且已設置的部分終端系統和交換機以同步狀態機的形式執行該方法,其特征在于a)所述狀態機使用至少三種不同的幀類型(冷啟動幀類型、冷啟動應答幀類型、和集成幀類型),以及b)所述狀態機中的狀態可被說成是屬于非同步狀態的一組或屬于同步狀態的一組,以及c)被設置成同步主導裝置的所有終端系統在所述其中一個非同步狀態中周期性地發送冷啟動幀,以及d)被設置為同步主導裝置的所有終端系統在接收到冷啟動幀之后一段可配置的第一逾時(CSO)時間通過在所有復制的通信通道上發送冷啟動應答幀以對接收到的冷啟動幀作出反應,條件是只要終端系統處于同步狀態機為冷啟動幀限定的轉換的狀態中,并且在所述冷啟動應答發送之前接收到連續的冷啟動幀時,重設所述第一逾時(CSO),以及e)所有被設置成同步主導裝置的終端系統通過啟動可配置的第二逾時(CAO)來對接收到的冷啟動應答幀作出反應,該些終端系統還未執行所述第一逾時(CSO),并且在所述第二逾時(CAO)過期時進入同步狀態。文檔編號H04J3/06GK102282787SQ200880130705公開日2011年12月14日申請日期2008年6月2日優先權日2008年6月2日發明者岡瑟·鮑爾,威爾弗里德·施泰納,布倫達·霍爾,邁克爾·珀利什,馬蒂亞斯·韋希特爾申請人:Tttech電腦技術股份公司,霍尼韋爾國際公司
            網友詢問留言 已有0條留言
            • 還沒有人留言評論。精彩留言會獲得點贊!
            1
            婷婷六月激情在线综合激情,亚洲国产大片,久久中文字幕综合婷婷,精品久久久久久中文字幕,亚洲一区二区三区高清不卡,99国产精品热久久久久久夜夜嗨 ,欧美日韩亚洲综合在线一区二区,99国产精品电影,伊人精品线视天天综合,精品伊人久久久大香线蕉欧美
            亚洲精品1区 国产成人一级 91精品国产欧美一区二区 亚洲精品乱码久久久久久下载 国产精品久久久久久久伊一 九色国产 国产精品九九视频 伊人久久成人爱综合网 欧美日韩亚洲区久久综合 欧美日本一道免费一区三区 夜夜爽一区二区三区精品 欧美日韩高清一区二区三区 国产成人av在线 国产精品对白交换绿帽视频 国产视频亚洲 国产在线欧美精品 国产精品综合网 国产日韩精品欧美一区色 国产日韩精品欧美一区喷 欧美日韩在线观看区一二 国产区精品 欧美视频日韩视频 中文字幕天天躁日日躁狠狠躁97 视频一二三区 欧美高清在线精品一区二区不卡 国产精品揄拍一区二区久久 99久久综合狠狠综合久久aⅴ 亚洲乱码视频在线观看 日韩在线第二页 亚洲精品无码专区在线播放 成人亚洲网站www在线观看 欧美三级一区二区 99久久精品免费看国产高清 91麻豆国产在线观看 最新日韩欧美不卡一二三区 成人在线观看不卡 日韩国产在线 在线亚洲精品 亚洲午夜久久久久中文字幕 国产精品成人久久久久久久 精品国产一区二区在线观看 欧美精品国产一区二区三区 中文在线播放 亚洲第一页在线视频 国产午夜精品福利久久 九色国产 精品国产九九 国产永久视频 久久精品人人做人人综合试看 国产一区二区三区免费观看 亚洲精品国产电影 9999热视频 国产精品资源在线 麻豆久久婷婷国产综合五月 国产精品免费一级在线观看 亚洲国产一区二区三区青草影视 中文在线播放 国产成人综合在线 国产在线观看色 国产亚洲三级 国产片一区二区三区 久久99精品久久久久久牛牛影视 亚洲欧美日韩国产 四虎永久免费网站 国产一毛片 国产精品视频在 九九热在线精品 99精品福利视频 色婷婷色99国产综合精品 97成人精品视频在线播放 精品久久久久久中文字幕 亚洲欧美一区二区三区孕妇 亚洲欧美成人网 日韩高清在线二区 国产尤物在线观看 在线不卡一区二区 91网站在线看 韩国精品福利一区二区 欧美日韩国产成人精品 99热精品久久 国产精品免费视频一区 高清视频一区 精品九九久久 欧美日韩在线观看免费 91欧美激情一区二区三区成人 99福利视频 亚洲国产精品91 久热国产在线 精品久久久久久中文字幕女 国产精品久久久久久久久99热 成人自拍视频网 国产精品视频久久久久久 久久影院国产 国产玖玖在线观看 99精品在线免费 亚洲欧美一区二区三区导航 久久久久久久综合 国产欧美日韩精品高清二区综合区 国产精品视频自拍 亚洲一级片免费 久久久久久九九 国产欧美自拍视频 视频一区二区在线观看 欧美日韩一区二区三区久久 中文在线亚洲 伊人热人久久中文字幕 日韩欧美亚洲国产一区二区三区 欧美亚洲国产成人高清在线 欧美日韩国产码高清综合人成 国产性大片免费播放网站 亚洲午夜综合网 91精品久久一区二区三区 国产无套在线播放 国产精品视频网站 国产成人亚洲精品老王 91在线网站 国产视频97 欧美黑人欧美精品刺激 国产一区二区三区免费在线视频 久久久国产精品免费看 99re6久精品国产首页 久久精品91 国产成人一级 国产成人精品曰本亚洲 日本福利在线观看 伊人成综合网 久久综合一本 国产综合久久久久久 久久精品成人免费看 久久福利 91精品国产91久久久久久麻豆 亚洲精品成人在线 亚洲伊人久久精品 欧美日本二区 国产永久视频 国产一区二 一区二区福利 国产一毛片 亚洲精品1区 毛片一区二区三区 伊人久久大香线蕉综合影 国产欧美在线观看一区 亚洲国产欧洲综合997久久 国产一区二区免费视频 国产91精品对白露脸全集观看 久久亚洲国产伦理 欧美成人伊人久久综合网 亚洲性久久久影院 久久99国产精一区二区三区! 91精品国产欧美一区二区 欧美日韩亚洲区久久综合 日韩精品一二三区 久久久夜色精品国产噜噜 国产在线精品福利91香蕉 久久久久久久亚洲精品 97se色综合一区二区二区 91国语精品自产拍在线观看性色 91久久国产综合精品女同我 日韩中文字幕a 国产成人亚洲日本精品 久久国产精品-国产精品 久久国产经典视频 久久国产精品伦理 亚洲第一页在线视频 国产精品久久久久三级 日韩毛片网 久久免费高清视频 麻豆国产在线观看一区二区 91麻豆国产福利在线观看 国产成人精品男人的天堂538 一区二区三区中文字幕 免费在线视频一区 欧美日韩国产成人精品 国产综合网站 国产资源免费观看 亚洲精品亚洲人成在线播放 精品久久久久久中文字幕专区 亚洲人成人毛片无遮挡 国产一起色一起爱 国产香蕉精品视频在 九九热免费观看 日韩亚洲欧美一区 九九热精品在线观看 精品久久久久久中文字幕专区 亚洲欧美自拍偷拍 国产精品每日更新 久久久久国产一级毛片高清板 久久天天躁狠狠躁夜夜中文字幕 久久精品片 日韩在线毛片 国产成人精品本亚洲 国产成人精品一区二区三区 九九热在线观看 国产r级在线观看 国产欧美日韩精品高清二区综合区 韩国电影一区二区 国产精品毛片va一区二区三区 五月婷婷伊人网 久久一区二区三区免费 一本色道久久综合狠狠躁篇 亚洲综合色站 国产尤物在线观看 亚洲一区亚洲二区 免费在线视频一区 欧洲精品视频在线观看 日韩中文字幕a 中文字幕日本在线mv视频精品 91精品在线免费视频 精品国产免费人成在线观看 精品a级片 中文字幕日本在线mv视频精品 日韩在线精品视频 婷婷丁香色 91精品国产高清久久久久 国产成人精品日本亚洲直接 五月综合视频 欧美日韩在线亚洲国产人 精液呈暗黄色 亚洲乱码一区 久久精品中文字幕不卡一二区 亚洲天堂精品在线 激情婷婷综合 国产免费久久精品久久久 国产精品亚洲二区在线 久久免费播放视频 五月婷婷丁香综合 在线亚洲欧美日韩 久久免费精品高清麻豆 精品久久久久久中文字幕 亚洲一区网站 国产精品福利社 日韩中文字幕免费 亚洲综合丝袜 91精品在线播放 国产精品18 亚洲日日夜夜 伊人久久大香线蕉综合影 亚洲精品中文字幕乱码影院 亚洲一区二区黄色 亚洲第一页在线视频 一区二区在线观看视频 国产成人福利精品视频 亚洲高清二区 国内成人免费视频 精品亚洲性xxx久久久 国产精品合集一区二区三区 97av免费视频 国产一起色一起爱 国产区久久 国产资源免费观看 99精品视频免费 国产成人一级 国产精品九九免费视频 欧美91精品久久久久网免费 99热国产免费 久久精品色 98精品国产综合久久 久久精品播放 中文字幕视频免费 国产欧美日韩一区二区三区在线 精品久久蜜桃 国产小视频精品 一本色道久久综合狠狠躁篇 91在线免费观看 亚洲精品区 伊人成综合网 伊人热人久久中文字幕 伊人黄色片 99国产精品热久久久久久夜夜嗨 久久免费精品视频 亚洲一区二区三区高清不卡 久久久久国产一级毛片高清板 国产片一区二区三区 久久狠狠干 99久久婷婷国产综合精品电影 国产99区 国产精品成人久久久久 久久狠狠干 青青国产在线观看 亚洲高清国产拍精品影院 国产精品一区二区av 九九热在线免费视频 伊人久久国产 国产精品久久久久久久久久一区 在线观看免费视频一区 国产精品自在在线午夜区app 国产精品综合色区在线观看 国产毛片久久久久久国产毛片 97国产免费全部免费观看 国产精品每日更新 国产尤物视频在线 九九视频这里只有精品99 一本一道久久a久久精品综合 久久综合给会久久狠狠狠 国产成人精品男人的天堂538 欧美一区二区高清 毛片一区二区三区 国产欧美日韩在线观看一区二区三区 在线国产二区 欧美不卡网 91在线精品中文字幕 在线国产福利 国内精品91久久久久 91亚洲福利 日韩欧美国产中文字幕 91久久精品国产性色也91久久 亚洲性久久久影院 欧美精品1区 国产热re99久久6国产精品 九九热免费观看 国产精品欧美日韩 久久久久国产一级毛片高清板 久久国产经典视频 日韩欧美亚洲国产一区二区三区 欧美亚洲综合另类在线观看 国产精品自在在线午夜区app 97中文字幕在线观看 视频一二三区 精品国产一区在线观看 国产欧美日韩在线一区二区不卡 欧美一区二三区 伊人成人在线观看 国内精品91久久久久 97在线亚洲 国产在线不卡一区 久久久全免费全集一级全黄片 国产精品v欧美精品∨日韩 亚洲毛片网站 在线不卡一区二区 99re热在线视频 久久激情网 国产毛片一区二区三区精品 久久亚洲综合色 中文字幕视频免费 国产视频亚洲 婷婷伊人久久 国产一区二区免费播放 久久99国产精品成人欧美 99国产在线视频 国产成人免费视频精品一区二区 国产不卡一区二区三区免费视 国产码欧美日韩高清综合一区 久久精品国产主播一区二区 国产一区电影 久久精品国产夜色 国产精品国产三级国产 日韩一区二区三区在线 久久97久久97精品免视看 久久国产免费一区二区三区 伊人久久大香线蕉综合电影网 99re6久精品国产首页 久久激情网 亚洲成人高清在线 国产精品网址 国产成人精品男人的天堂538 香蕉国产综合久久猫咪 国产专区中文字幕 91麻豆精品国产高清在线 久久国产经典视频 国产精品成人va在线观看 国产精品爱啪在线线免费观看 日本精品久久久久久久久免费 亚洲综合一区二区三区 久久五月网 精品国产网红福利在线观看 久久综合亚洲伊人色 亚洲国产精品久久久久久网站 在线日韩国产 99国产精品热久久久久久夜夜嗨 国产综合精品在线 国产区福利 精品亚洲综合久久中文字幕 国产制服丝袜在线 毛片在线播放网站 在线观看免费视频一区 国产精品久久久精品三级 亚洲国产电影在线观看 最新日韩欧美不卡一二三区 狠狠综合久久综合鬼色 日本精品1在线区 国产日韩一区二区三区在线播放 欧美日韩精品在线播放 亚洲欧美日韩国产一区二区三区精品 久久综合久久网 婷婷六月激情在线综合激情 亚洲乱码一区 国产专区91 97av视频在线观看 精品久久久久久中文字幕 久久五月视频 国产成人福利精品视频 国产精品网址 中文字幕视频在线 精品一区二区三区免费视频 伊人手机在线视频 亚洲精品中文字幕乱码 国产在线视频www色 色噜噜国产精品视频一区二区 精品亚洲成a人在线观看 国产香蕉尹人综合在线 成人免费一区二区三区在线观看 国产不卡一区二区三区免费视 欧美精品久久天天躁 国产专区中文字幕 久久精品国产免费中文 久久精品国产免费一区 久久无码精品一区二区三区 国产欧美另类久久久精品免费 欧美精品久久天天躁 亚洲精品在线视频 国产视频91在线 91精品福利一区二区三区野战 日韩中文字幕免费 国产精品99一区二区三区 欧美成人高清性色生活 国产精品系列在线观看 亚洲国产福利精品一区二区 国产成人在线小视频 国产精品久久久久免费 99re热在线视频 久久久久久久综合 一区二区国产在线播放 成人国产在线视频 亚洲精品乱码久久久久 欧美日韩一区二区综合 精品久久久久免费极品大片 中文字幕视频二区 激情粉嫩精品国产尤物 国产成人精品一区二区视频 久久精品中文字幕首页 亚洲高清在线 国产精品亚洲一区二区三区 伊人久久艹 中文在线亚洲 国产精品一区二区在线播放 国产精品九九免费视频 亚洲二区在线播放 亚洲狠狠婷婷综合久久久久网站 亚洲欧美日韩网站 日韩成人精品 亚洲国产一区二区三区青草影视 91精品国产福利在线观看 国产精品久久久久久久久99热 国产一区二区精品尤物 久碰香蕉精品视频在线观看 亚洲日日夜夜 在线不卡一区二区 国产午夜亚洲精品 九九热在线视频观看这里只有精品 伊人手机在线视频 91免费国产精品 日韩欧美中字 91精品国产91久久久久 国产全黄三级播放 视频一区二区三区免费观看 国产开裆丝袜高跟在线观看 国产成人欧美 激情综合丝袜美女一区二区 国产成人亚洲综合无 欧美精品一区二区三区免费观看 欧美亚洲国产日韩 日韩亚州 国产欧美日韩精品高清二区综合区 亚洲午夜国产片在线观看 精品久久久久久中文字幕 欧美精品1区 久久伊人久久亚洲综合 亚洲欧美日韩精品 国产成人精品久久亚洲高清不卡 久久福利影视 国产精品99精品久久免费 久久久久免费精品视频 国产日产亚洲精品 亚洲国产午夜电影在线入口 精品无码一区在线观看 午夜国产精品视频 亚洲一级片免费 伊人久久大香线蕉综合影 国产精品久久影院 久碰香蕉精品视频在线观看 www.欧美精品 在线小视频国产 亚洲国产天堂久久综合图区 欧美一区二区三区不卡 日韩美女福利视频 九九精品免视频国产成人 不卡国产00高中生在线视频 亚洲第一页在线视频 欧美日韩在线播放成人 99re视频这里只有精品 国产精品91在线 精品乱码一区二区三区在线 国产区久久 91麻豆精品国产自产在线观看一区 日韩精品成人在线 九九热在线观看 国产精品久久不卡日韩美女 欧美一区二区三区综合色视频 欧美精品免费一区欧美久久优播 国产精品网址 国产专区中文字幕 国产精品欧美亚洲韩国日本久久 日韩美香港a一级毛片 久久精品123 欧美一区二区三区免费看 99r在线视频 亚洲精品国产字幕久久vr 国产综合激情在线亚洲第一页 91免费国产精品 日韩免费小视频 亚洲国产精品综合一区在线 国产亚洲第一伦理第一区 在线亚洲精品 国产精品一区二区制服丝袜 国产在线成人精品 九九精品免视频国产成人 亚洲国产网 欧美日韩亚洲一区二区三区在线观看 在线亚洲精品 欧美一区二区三区高清视频 国产成人精品男人的天堂538 欧美日韩在线观看区一二 亚洲欧美一区二区久久 久久精品中文字幕首页 日本高清www午夜视频 久久精品国产免费 久久999精品 亚洲国产精品欧美综合 88国产精品视频一区二区三区 91久久偷偷做嫩草影院免费看 国产精品夜色视频一区二区 欧美日韩导航 国产成人啪精品午夜在线播放 一区二区视频在线免费观看 99久久精品国产自免费 精液呈暗黄色 久久99国产精品 日本精品久久久久久久久免费 精品国产97在线观看 99re视频这里只有精品 国产视频91在线 999av视频 亚洲美女视频一区二区三区 久久97久久97精品免视看 亚洲国产成人久久三区 99久久亚洲国产高清观看 日韩毛片在线视频 综合激情在线 91福利一区二区在线观看 一区二区视频在线免费观看 激情粉嫩精品国产尤物 国产成人精品曰本亚洲78 国产成人精品本亚洲 国产精品成人免费视频 国产成人啪精品视频免费软件 久久精品国产亚洲妲己影院 国产精品成人久久久久久久 久久大香线蕉综合爱 欧美一区二区三区高清视频 99热国产免费 在线观看欧美国产 91精品视频在线播放 国产精品福利社 欧美精品一区二区三区免费观看 国产一区二区免费视频 国产午夜精品一区二区 精品视频在线观看97 91精品福利久久久 国产一区福利 国产综合激情在线亚洲第一页 国产精品久久久久久久久久久不卡 九色国产 在线日韩国产 黄网在线观看 亚洲一区小说区中文字幕 中文字幕丝袜 日本二区在线观看 日本国产一区在线观看 欧美日韩一区二区三区久久 欧美精品亚洲精品日韩专 国产日产亚洲精品 久久综合九色综合欧美播 亚洲国产欧美无圣光一区 欧美视频区 亚洲乱码视频在线观看 久久无码精品一区二区三区 九九热精品免费视频 久久99精品久久久久久牛牛影视 国产精品成久久久久三级 国产一区福利 午夜国产精品视频 日本二区在线观看 99久久网站 国产亚洲天堂 精品国产一区二区三区不卡 亚洲国产日韩在线一区 国产成人综合在线观看网站 久久免费高清视频 欧美在线导航 午夜精品久久久久久99热7777 欧美久久综合网 国产小视频精品 国产尤物在线观看 亚洲国产精品综合一区在线 欧美一区二区三区不卡视频 欧美黑人欧美精品刺激 日本福利在线观看 久久国产偷 国产手机精品一区二区 国产热re99久久6国产精品 国产高清啪啪 欧美亚洲国产成人高清在线 国产在线第三页 亚洲综合一区二区三区 99r在线视频 99精品久久久久久久婷婷 国产精品乱码免费一区二区 国产在线精品福利91香蕉 国产尤物视频在线 五月婷婷亚洲 中文字幕久久综合伊人 亚洲精品一级毛片 99国产精品电影 在线视频第一页 久久99国产精品成人欧美 国产白白视频在线观看2 成人精品一区二区www 亚洲成人网在线观看 麻豆91在线视频 色综合合久久天天综合绕视看 久久精品国产免费高清 国产不卡一区二区三区免费视 欧美国产中文 99精品欧美 九九在线精品 国产中文字幕在线免费观看 国产一区中文字幕在线观看 国产成人一级 国产精品一区二区制服丝袜 国产一起色一起爱 亚洲精品成人在线 亚洲欧美精品在线 国产欧美自拍视频 99精品久久久久久久婷婷 久99视频 国产热re99久久6国产精品 视频一区亚洲 国产精品视频分类 国产精品成在线观看 99re6久精品国产首页 亚洲在成人网在线看 亚洲国产日韩在线一区 久久国产三级 日韩国产欧美 欧美在线一区二区三区 国产精品美女一级在线观看 成人午夜免费福利视频 亚洲天堂精品在线 91精品国产手机 欧美日韩视频在线播放 狠狠综合久久综合鬼色 九一色视频 青青视频国产 亚洲欧美自拍一区 中文字幕天天躁日日躁狠狠躁97 日韩免费大片 996热视频 伊人成综合网 亚洲天堂欧美 日韩精品亚洲人成在线观看 久久综合给会久久狠狠狠 日韩精品亚洲人成在线观看 日韩国产欧美 亚洲成aⅴ人片在线影院八 亚洲精品1区 99久久精品免费 国产精品高清在线观看 国产精品久久久免费视频 在线亚洲欧美日韩 91在线看视频 国产精品96久久久久久久 欧美日韩国产成人精品 91在线亚洲 热久久亚洲 国产精品美女免费视频观看 日韩在线毛片 亚洲永久免费视频 九九免费在线视频 亚洲一区网站 日本高清二区视频久二区 精品国产美女福利在线 伊人久久艹 国产精品久久久久三级 欧美成人精品第一区二区三区 99久久精品国产自免费 在线观看日韩一区 国产中文字幕一区 成人免费午夜视频 欧美日韩另类在线 久久99国产精品成人欧美 色婷婷中文网 久久天天躁夜夜躁狠狠躁2020 欧美成人伊人久久综合网 国产精品福利资源在线 国产伦精品一区二区三区高清 国产精品亚洲综合色区韩国 亚洲一区欧美日韩 色综合视频 国语自产精品视频在线区 国产高清a 成人国内精品久久久久影 国产在线精品香蕉综合网一区 国产不卡在线看 国产成人精品精品欧美 国产欧美日韩综合精品一区二区三区 韩国电影一区二区 国产在线视频www色 91中文字幕在线一区 国产人成午夜免视频网站 亚洲综合一区二区三区 色综合视频一区二区观看 久久五月网 九九热精品在线观看 国产一区二区三区国产精品 99久热re在线精品996热视频 亚洲国产网 在线视频亚洲一区 日韩字幕一中文在线综合 国产高清一级毛片在线不卡 精品国产色在线 国产高清视频一区二区 精品日本久久久久久久久久 亚洲国产午夜精品乱码 成人免费国产gav视频在线 日韩欧美一区二区在线观看 欧美曰批人成在线观看 韩国电影一区二区 99re这里只有精品6 日韩精品一区二区三区视频 99re6久精品国产首页 亚洲欧美一区二区三区导航 欧美色图一区二区三区 午夜精品视频在线观看 欧美激情在线观看一区二区三区 亚洲热在线 成人国产精品一区二区网站 亚洲一级毛片在线播放 亚洲一区小说区中文字幕 亚洲午夜久久久久影院 国产自产v一区二区三区c 国产精品视频免费 久久调教视频 国产成人91激情在线播放 国产精品欧美亚洲韩国日本久久 久久亚洲日本不卡一区二区 91中文字幕网 成人国产在线视频 国产视频91在线 欧美成人精品第一区二区三区 国产精品福利在线 久久综合九色综合精品 欧美一区二区三区精品 久久国产综合尤物免费观看 久久99青青久久99久久 日韩精品免费 久久国产精品999 91亚洲视频在线观看 国产精品igao视频 色综合区 在线亚洲欧国产精品专区 国产一区二区三区在线观看视频 亚洲精品成人在线 一区二区国产在线播放 中文在线亚洲 亚洲精品第一国产综合野 国产一区二区精品久久 一区二区三区四区精品视频 99热精品久久 中文字幕视频二区 国产成人精品男人的天堂538 99精品影视 美女福利视频一区二区 久久午夜夜伦伦鲁鲁片 综合久久久久久久综合网 国产精品国产欧美综合一区 国产99视频在线观看 国产亚洲女在线精品 婷婷影院在线综合免费视频 国产亚洲3p一区二区三区 91成人爽a毛片一区二区 亚洲一区二区高清 国产欧美亚洲精品第二区首页 欧美日韩导航 亚洲高清二区 欧美激情观看一区二区久久 日韩毛片在线播放 亚洲欧美日韩高清中文在线 亚洲日本在线播放 国产精品一区二区制服丝袜 精品国产一区二区三区不卡 国产不卡在线看 国产欧美网站 四虎永久在线观看视频精品 国产黄色片在线观看 夜夜综合 一本色道久久综合狠狠躁篇 欧美亚洲综合另类在线观看 国产91在线看 伊人久久国产 欧美一区二区在线观看免费网站 国产精品久久久久三级 久久福利 日韩中文字幕a 亚洲午夜久久久久影院 91在线高清视频 国产亚洲一区二区三区啪 久久人精品 国产精品亚洲午夜一区二区三区 综合久久久久久 久久伊人一区二区三区四区 国产综合久久久久久 日韩一区精品视频在线看 国产精品日韩欧美制服 日本精品1在线区 99re视频 无码av免费一区二区三区试看 国产视频1区 日韩欧美中文字幕一区 日本高清中文字幕一区二区三区a 亚洲国产欧美无圣光一区 国产在线视频一区二区三区 欧美国产第一页 在线亚洲欧美日韩 日韩中文字幕第一页 在线不卡一区二区 伊人久久青青 国产精品一区二区在线播放 www.五月婷婷 麻豆久久婷婷国产综合五月 亚洲精品区 久久国产欧美另类久久久 99在线视频免费 伊人久久中文字幕久久cm 久久精品成人免费看 久久这里只有精品首页 88国产精品视频一区二区三区 中文字幕日本在线mv视频精品 国产在线精品成人一区二区三区 伊人精品线视天天综合 亚洲一区二区黄色 国产尤物视频在线 亚洲精品99久久久久中文字幕 国产一区二区三区免费观看 伊人久久大香线蕉综合电影网 国产成人精品区在线观看 日本精品一区二区三区视频 日韩高清在线二区 久久免费播放视频 一区二区成人国产精品 国产精品免费精品自在线观看 亚洲精品视频二区 麻豆国产精品有码在线观看 精品日本一区二区 亚洲欧洲久久 久久中文字幕综合婷婷 中文字幕视频在线 国产成人精品综合在线观看 91精品国产91久久久久福利 精液呈暗黄色 香蕉国产综合久久猫咪 国产专区精品 亚洲精品无码不卡 国产永久视频 亚洲成a人片在线播放观看国产 一区二区国产在线播放 亚洲一区二区黄色 欧美日韩在线观看视频 亚洲精品另类 久久国产综合尤物免费观看 国产一区二区三区国产精品 高清视频一区 国产精品igao视频 国产精品资源在线 久久综合精品国产一区二区三区 www.五月婷婷 精品色综合 99热国产免费 麻豆福利影院 亚洲伊人久久大香线蕉苏妲己 久久电影院久久国产 久久精品伊人 在线日韩理论午夜中文电影 亚洲国产欧洲综合997久久 伊人国产精品 久草国产精品 欧美一区精品二区三区 亚洲成人高清在线 91免费国产精品 日韩精品福利在线 国产一线在线观看 国产不卡在线看 久久99青青久久99久久 亚洲精品亚洲人成在线播放 99久久免费看国产精品 国产日本在线观看 青草国产在线视频 麻豆久久婷婷国产综合五月 国产中文字幕一区 91久久精品国产性色也91久久 国产一区a 国产欧美日韩成人 国产亚洲女在线精品 一区二区美女 中文字幕在线2021一区 在线小视频国产 久久这里只有精品首页 国产在线第三页 欧美日韩中文字幕 在线亚洲+欧美+日本专区 精品国产一区二区三区不卡 久久这里精品 欧美在线va在线播放 精液呈暗黄色 91精品国产手机 91在线免费播放 欧美视频亚洲色图 欧美国产日韩精品 日韩高清不卡在线 精品视频免费观看 欧美日韩一区二区三区四区 国产欧美亚洲精品第二区首页 亚洲韩精品欧美一区二区三区 国产精品视频免费 在线精品小视频 久久午夜夜伦伦鲁鲁片 国产无套在线播放 久热这里只精品99re8久 欧美久久久久 久久香蕉国产线看观看精品蕉 国产成人精品男人的天堂538 亚洲人成网站色7799在线观看 日韩在线第二页 一本色道久久综合狠狠躁篇 国产一区二区三区不卡在线观看 亚洲乱码在线 在线观看欧美国产 久久福利青草精品资源站免费 国产玖玖在线观看 在线亚洲精品 亚洲成aⅴ人在线观看 精品91在线 欧美一区二三区 日韩中文字幕视频在线 日本成人一区二区 日韩免费专区 国内精品在线观看视频 久久国产综合尤物免费观看 国产精品系列在线观看 一本一道久久a久久精品综合 亚洲免费播放 久久精品国产免费 久久人精品 亚洲毛片网站 亚洲成a人一区二区三区 韩国福利一区二区三区高清视频 亚洲精品天堂在线 一区二区三区中文字幕 亚洲国产色婷婷精品综合在线观看 亚洲国产成人久久笫一页 999国产视频 国产精品香港三级在线电影 欧美日韩一区二区三区四区 日韩国产欧美 国产精品99一区二区三区 午夜国产精品理论片久久影院 亚洲精品中文字幕麻豆 亚洲国产高清视频 久久免费手机视频 日韩a在线观看 五月婷婷亚洲 亚洲精品中文字幕麻豆 中文字幕丝袜 www国产精品 亚洲天堂精品在线 亚洲乱码一区 国产日韩欧美三级 久久999精品 伊人热人久久中文字幕 久热国产在线视频 国产欧美日韩在线观看一区二区三区 国产一二三区在线 日韩国产欧美 91精品国产91久久久久 亚洲一区小说区中文字幕 精品一区二区免费视频 国产精品视频免费 国产精品亚洲综合色区韩国 亚洲国产精品成人午夜在线观看 欧美国产日韩精品 中文字幕精品一区二区精品