本發明計算機網絡技術,特別涉及一種基于文件傳輸協議(FTP,File Transfer Protocol)的節點設備進行分布式組網的系統及方法。
背景技術:
隨著計算機網絡的發展,出現了大數據時代,計算機網絡處理數據的數據量呈現爆炸式增長。為了能夠處理更多海量的數據,計算機網絡的組網形式由集中式組網形式轉變為分布式組網形式。但是,在分布式的計算機網絡中,許多基于集中式組網形式時所采用的節點設備,比如基于FTP的節點設備在接入分布式的計算機網絡系統時,就會存在單節點設備的問題,只能實現本地的數據存儲,而無法實現分布式的計算機網絡系統的云存儲。且由于基于FTP的節點設備的數據存儲量有限,存儲的數據比較少,在分布式的計算機網絡系統中訪問及傳輸基于FTP的節點設備存儲的數據時,繁瑣且不容易實現,不符合分布式的計算機網絡系統的分布式存儲數據的需求。
技術實現要素:
有鑒于此,本發明實施例提供一種基于FTP的節點設備進行分布式組網的系統,該系統能夠使得基于FTP的節點設備作為分布式的計算機網絡中的數據節點。
本發明實施例還提供一種基于FTP的節點設備進行分布式組網的方法,該方法能夠使得基于FTP的節點設備作為分布式的計算機網絡中的數據節點。
根據上述目的,本發明是這樣實現的:
一種基于文件傳輸協議FTP的節點設備進行分布式組網的系統,包括:多個基于FTP的節點設備及多個元數據節點,其中,
基于FTP的節點設備,用于設置接入分布式的計算機網絡的功能,運行所設置的功能后,在元數據節點的控制下,讀寫分布式的計算機網絡中的數據;
元數據節點,用于控制基于FTP的節點設備,使得基于FTP的節點設備讀寫分布式的計算機網絡中的數據。
所述基于FTP的節點設備,還用于將接入分布式的計算機網絡所有函數接口作為基于FTP的節點設備的靜態庫,編譯通過靜態庫在分布式的計算機網絡中讀寫數據的FTP編碼。
所述基于FTP的節點設備,還用于設置FTP編碼的的啟動腳本,采用啟動腳本運行設置的FTP編碼。
所述基于FTP的節點設備在設置接入分布式的計算機網絡的功能前,禁用具有Linux操作系統的FTP服務功能。
所述基于FTP的節點設備為FTP服務器,該系統還包括FTP客戶端,所述FTP客戶端與FTP服務器之間進行交互,由FTP服務器從FTP客戶端中讀寫數據。
所述元數據節點,還用于檢測到FTP的節點設備出現故障時,控制將數據讀寫到另一FTP的節點設備上。
一種基于FTP的節點設備進行分布式組網的方法,該方法包括:
基于FTP的節點設備設置接入分布式的計算機網絡的功能;
基于FTP的節點設備運行所設置的功能后,在元數據節點的控制下,讀寫分布式的計算機網絡中的數據。
所述設置接入分布式的計算機網絡的功能為:將接入分布式的計算機網絡所有函數接口作為基于FTP的節點設備的靜態庫,編譯通過靜態庫在分布式的計算機網絡中讀寫數據的FTP編碼;
所述運行所設置的功能為:采用設置的啟動腳本運行設置的FTP編碼。
所述基于FTP的節點設備在設置接入分布式的計算機網絡的功能前,還包括:禁用具有Linux操作系統的FTP服務功能。
該方法還包括:基于FTP的節點設備為FTP服務器,分布式的計算機網絡還包括FTP客戶端,所述FTP客戶端與FTP服務器之間進行交互,由FTP服務器從FTP客戶端中讀寫數據。
由上述方案可以看出,本發明實施例實施例中將基于FTP的節點設備設置接入分布式的計算機網絡的功能,即將接入分布式的計算機網絡所有函數接口作為靜態庫,編譯通過靜態庫在分布式的計算機網絡中讀寫數據的FTP編碼并設置在FTP的節點設備中。當FTP的節點設備運行該FTP編碼后,就可以在分布式的計算機網絡中讀寫數據。這樣,就不需要如現有技術那樣基于FTP的節點設備只能完成本地存儲數據,而是使得基于FTP的節點設備作為分布式的計算機網絡中的數據節點,進行分布式的計算機網絡全網的數據讀寫。
附圖說明
圖1為本發明實施例提供的基于FTP的節點設備進行分布式組網的系統結構示意圖;
圖2為本發明實施例提供的基于FTP的節點設備進行分布式組網的方法流程圖。
具體實施方式
為使本發明的目的、技術方案及優點更加清楚明白,以下參照附圖并舉例,對本發明作進一步詳細說明。
在分布式的計算機網絡中,許多基于集中式組網形式時所采用的節點設備,比如基于FTP的節點設備在接入分布式的計算機網絡系統時,存在單節點設備的問題,只能實現本地的數據存儲,而無法實現分布式的計算機網絡系統的云存儲,不符合分布式的計算機網絡系統的分布式存儲數據的需求的主要原因就是,基于FTP的節點設備所基于的FTP是單節點協議,其只支持本地數據存儲。因此,為了解決上述問題,本發明實施例重新對基于FTP的節點設備所基于的FTP進行修改,使得其具有接入分布式的計算機網絡的功能。具體地說,就是將接入分布式的計算機網絡所有函數接口作為基于FTP的節點設備的靜態庫,編譯通過靜態庫在分布式的計算機網絡中讀寫數據的FTP編碼并設置在FTP的節點設備中。當FTP的節點設備運行該FTP編碼后,就可以在分布式的計算機網絡中讀寫數據。
這樣,就使得基于FTP的節點設備作為分布式的計算機網絡中的數據節點,進行分布式的計算機網絡全網的數據讀寫。
圖1為本發明實施例提供的基于FTP的節點設備進行分布式組網的系統結構示意圖,包括:多個基于FTP的節點設備及多個元數據節點,其中,
基于FTP的節點設備,用于設置接入分布式的計算機網絡的功能,運行所設置的功能后,在元數據節點的控制下,讀寫分布式的計算機網絡中的數據;
元數據節點,用于控制基于FTP的節點設備,使得基于FTP的節點設備讀寫分布式的計算機網絡中的數據。
在該結構中,基于FTP的節點設備,還用于將接入分布式的計算機網絡所有函數接口作為基于FTP的節點設備的靜態庫,編譯通過靜態庫在分布式的計算機網絡中讀寫數據的FTP編碼后,存儲。
在該結構中,基于FTP的節點設備,還用于設置FTP編碼的的啟動腳本,采用啟動腳本運行設置的FTP編碼。
在該結構中,基于FTP的節點設備在設置接入分布式的計算機網絡的功能前,禁用具有Linux操作系統的FTP服務功能。
在該結構中,基于FTP的節點設備為FTP服務器,該系統還包括FTP客戶端,所述FTP客戶端與FTP服務器之間進行交互,由FTP服務器從FTP客戶端中讀寫數據。
在該結構中,基于FTP的節點設備還實現FTP功能,能夠傳輸數據。
在該結構中,元數據節點,還用于檢測到FTP的節點設備出現故障時,控制將數據讀寫到另一FTP的節點設備上。這樣,就不會出現在分布式的計算機網絡中的數據傳輸出現問題的情況。
在本發明實施例中,首先,就是要生成一個分布式的計算機網絡,該網絡中具有多個基于FTP的節點設備,作為FTP服務器,該FTP服務器實現FTP功能;該網絡還具有元數據節點,其是控制節點設備,可以同時控制多個FTP服務器,其提供元數據服務。
然后,將基于FTP的節點設備與元數據節點口進行對接,將基于FTP的節點設備所有接口函數作為基于FTP的節點設備的靜態庫,編譯通過靜態庫在分布式的計算機網絡中讀寫數據的FTP編碼,使得基于FTP的節點設備可以從分布式的計算機網絡中讀寫數據。
再次,基于FTP的節點設備禁用具有Linux操作系統的FTP服務功能,將編譯得到的FTP編碼放置在本地目錄下,比如/usr/local/sbin目錄,將寫好的FTP啟動所述FTP編碼的啟動腳本設置本地啟動目錄下,比如在/etc/init.d/目錄下,這樣就可以調用FTP啟動腳本運行設置的FTP編碼。在這里,所有FTP編碼只存在基于FTP的節點設備上,以最大限度利用了基于FTP的節點設備的本地存儲優勢,避免了將基于FTP的節點設備設置為元數據節點,因為元數據節點沒有本地數據存儲優勢,且在進行數據讀寫時會占用本地處理器資源及分布式的計算機網絡的帶寬資源,影響集群性能。
再次,在建立的分布式的計算機網絡中,節點分為基于FTP的節點設備及元數據節點,考慮到基于FTP的節點設備主要負責讀寫數據,不適合進行測分布式的計算機網絡中的控制,所以將基于網際協議(IP)地址漂移的策略控制在元數據節點實現。基于IP地址漂移的控制方法是已有技術,主要包括:基于FTP的節點設備的IP地址可以在分布式的計算機網絡中動態漂移,當其中一個基于FTP的節點設備發生故障時,讀寫數據的IP地址被元數據節點動態漂移到另外一個基于FTP的節點設備。比如基于FTP的節點設備的網卡壞掉,分布式的計算機網絡就會通過心跳機制檢測到,并將檢測結果發送給元數據節點,元數據節點進行設置的異常處理,完成處理后,生成IP地址漂移指令,發送給另外一個接管數據讀寫的基于FTP的節點設備,該節點設備的網絡服務就會自動設置好該任務所要求的IP地址,實現數據的讀寫,即可完成IP地址的動態漂移。
最后,對于故障的基于FTP的節點設備,由于其在分布式的計算機網絡中的心跳信號消失并被檢測到,元數據節點就會發現并進行設置的異常處理,將IP地址漂移到另一基于FTP的節點設備上,并將讀寫數據的信息也發送給另一基于FTP的節點設備,另一基于FTP的節點設備就會在元數據節點的控制下接管讀寫數據的操作,高可用性得到保障。
圖2為本發明實施例提供的基于FTP的節點設備進行分布式組網的方法流程圖,其具體步驟為:
步驟201、基于FTP的節點設備設置接入分布式的計算機網絡的功能;
步驟202、基于FTP的節點設備運行所設置的功能后,在元數據節點的控制下,讀寫分布式的計算機網絡中的數據。
在該方法中,所述設置接入分布式的計算機網絡的功能為:將接入分布式的計算機網絡所有函數接口作為基于FTP的節點設備的靜態庫,編譯通過靜態庫在分布式的計算機網絡中讀寫數據的FTP編碼。
在該方法中,所述運行所設置的功能為:采用設置的啟動腳本運行設置的FTP編碼。
在該方法中,所述基于FTP的節點設備在設置接入分布式的計算機網絡的功能前,還包括:禁用具有Linux操作系統的FTP服務功能。
在該方法中,還包括:基于FTP的節點設備為FTP服務器,分布式的計算機網絡還包括FTP客戶端,所述FTP客戶端與FTP服務器之間進行交互,由FTP服務器從FTP客戶端中讀寫數據。
本發明實施例實現了基于FTP的分布式的計算機網絡,可以滿足FTP在商業化的需求,解決了背景技術中由于基于FTP的節點設備由于本地存儲,而無法提供海量存儲空間,且在故障之后,無法繼續提供讀寫數據的服務問題。本發明實施例在基于FTP的分布式的計算機網絡中,使得FTP服務具備大容量且高可用的特性。
以上舉較佳實施例,對本發明的目的、技術方案和優點進行了進一步詳細說明,所應理解的是,以上所述僅為本發明的較佳實施例而已,并不用以限制本發明,凡在本發明的精神和原則之內,所作的任何修改、等同替換和改進等,均應包含在本發明的保護范圍之內。