大數據存儲應用網絡架構的制作方法
【技術領域】
[0001]本實用新型涉及網絡架構，尤其涉及一種大數據存儲應用網絡架構。
【背景技術】
[0002]近年來，大數據如浪潮般席卷全球，深刻改變了人們的生活、工作和思維方式。業界通常用4個V來概括大數據的特征。一是數據體量巨大(Volume)。從TB級別，躍升到PB級別。二是數據類型繁多(Variety)。這種類型的多樣性也讓數據被分為結構化數據和非結構化數據。相對于以往便于存儲的以文本為主的結構化數據，非結構化數據越來越多，包括網絡日志、音頻、視頻、圖片、地理位置信息等，這些多類型的數據對數據的處理能力提出了更高要求。三是價值密度低(Value)。價值密度的高低與數據總量的大小成反比。以視頻為例，一部I小時的視頻，在連續不間斷的監控中，有用數據可能僅有一二秒。如何通過強大的機器算法更迅速地完成數據的價值“提純”成為目前大數據背景下亟待解決的難題。四是處理速度快(Velocity)。這是大數據區分于傳統數據挖掘的最顯著特征。根據IDC的“數字宇宙”的報告，預計到2020年，全球數據使用量將達到35.2ZB。在如此海量的數據面前，處理數據的效率就是企業的生命。
[0003]同時，世界上越來越多的國家開始從戰略層面認識大數據，在政府治理領域融入大數據思維和技術。我國各政府也應順應時代發展趨勢，充分利用大數據提升國家治理能力，以契合推進國家治理能力現代化的時代要求。可以說大數據為政府治理能力的提升帶來了發展機遇。首先，大數據能推動政府治理理念和模式的變化。在政府治理領域，通過讓海量、動態、多樣的數據有效集成為有價值的信息資源，推動政府轉變管理理念和治理模式，進而加快治理體系和治理能力現代化。其次，大數據能推動政府治理決策精細化和科學化。在大數據時代，數據的價值隨著海量積累而產生質變，能夠對經濟社會運行規律進行直觀呈現，從而降低政府治理偏差概率，提高政府治理的精細化和科學化。最后，大數據能推動政府治理提高效率和節約成本。利用大數據，可以使政府治理所依據的數據資料更加全面，不同部門和機構之間的協調更加順暢，進而有效提高工作效率，節約治理成本。由于政府數據的敏感性，對網絡及數據的安全性也具有更高的要求。
[0004]為了處理快速增加的數據，需要配套的硬件環境滿足大數據處理的需要。用于存儲及應用大數據的網絡架構需要適應大數據的特征。
【實用新型內容】
[0005]本實用新型的目的在于提供一種大數據存儲應用網絡架構，以適合大數據的存儲和應用，確保網絡及數據安全。
[0006]為實現上述目的，本實用新型提供了一種大數據存儲應用網絡架構，包括:路由器，硬件防火墻，應用防火墻，第一交換機，多個第一應用服務器，以及分布式存儲系統；該路由器連接該硬件防火墻，該硬件防火墻連接該應用防火墻，該應用防火墻連接該第一交換機，該第一交換機連接該第一應用服務器，該第一應用服務器連接該分布式存儲系統。
[0007]其中，還包括第二交換機和多個第二應用服務器，該應用防火墻連接該第二交換機并將該第二交換機設置于該應用防火墻的DMZ區域中，該第二交換機連接第二該應用服務器，該第二應用服務器連接該分布式存儲系統。
[0008]其中，該分布式存儲系統為Oracle RAC集群。
[0009]其中，該分布式存儲系統為Hadoop集群。
[0010]其中，該分布式存儲系統包括Oracle RAC集群和Hadoop集群。
[0011]其中，該Oracle RAC集群包括萬兆交換機和多個節點計算機，該節點計算機分別連接該萬兆交換機。
[0012]其中，該Hadoop集群包括萬兆交換機和多個節點計算機，該節點計算機分別連接該萬兆交換機。
[0013]綜上所述，本實用新型的大數據存儲應用網絡架構適合大數據的存儲和應用，能夠確保網絡及數據安全。
【附圖說明】
[0014]圖1為本實用新型大數據存儲應用網絡架構一較佳實施例的方框圖；
[0015]圖2為本實用新型大數據存儲應用網絡架構又一較佳實施例的方框圖。
【具體實施方式】
[0016]下面結合附圖，通過對本實用新型的【具體實施方式】詳細描述，將使本實用新型的技術方案及其有益效果顯而易見。
[0017]參見圖1，其為本實用新型大數據存儲應用網絡架構一較佳實施例的方框圖。在此較佳實施例中，大數據存儲應用網絡架構包括:路由器10，硬件防火墻11，應用防火墻12，第一交換機13，兩個第一應用服務器14，以及分布式存儲系統15 ;路由器10連接該硬件防火墻11并且接入Internet，該硬件防火墻11連接該應用防火墻12，該應用防火墻12連接該第一交換機13，該第一交換機13連接該第一應用服務器14，該第一應用服務器14連接該分布式存儲系統15。
[0018]本實用新型采用傳統的硬件防火墻11和目前最先進的應用防火墻12的組合來全面確保網絡及數據的安全性，傳統的硬件防火墻11可以在網絡層面通過包過濾的方式來保護網絡及數據，而目前最先進的應用防火墻12可以從應用層角度，通過對應用層協議識另O、控制及防護的方式來保護網絡及數據。硬件防火墻11可以選用H3C SecPath F5000-A5。應用防火墻12可以選用銥迅NGFW-8820或深信服AF-3020。
[0019]分布式存儲系統15可以為Oracle RAC(實時應用集群)集群，也可以為Hadoop集群，還可以同時包括Oracle RAC集群和Hadoop集群。Oracle RAC集群可以由萬兆交換機和多個節點計算機組成，該節點計算機分別連接該萬兆交換機，例如，可采用IBM X3850X5作為節點。類似的，Hadoop集群也可以由萬兆交換機和多個節點計算機組成，該節點計算機分別連接該萬兆交換機，例如，具體可采用DELL R620作為2個主節點，以及采用DELLR720xd作為20個數據節點。分布式存儲系統15具有開放性、擴展性，適合于存儲大數據，利于搭建并行計算框架，可以對海量數據進行快速分析，挖掘潛在有價值的數據，為海量數據分析提供更多的應用。而且，同時采用Oracle RAC集群和Hadoop集群，Oracle RAC集群可作為關系數據庫存儲結構化數據，Hadoop集群可以存儲半/非結構化數據，適應于大數據數據類型繁多的特點。
[0020]第一應用服務器14可以用于根據實際需求預先部署各類應用程序，從而可以對數據進行各種加工或應用。例如，第一應用服務器14可以部署ETL(抽取、轉換、加載)和調度軟件，通過自定義調度策略和抽取模式，將數據從其他數據來源導入到分布式存儲系統15中。還可以用于部署數據質量管理系統，對抽取的數據做數據質量剖析，通過抽樣和掃描數據發現數據存在的質量問題，生成數據質量報告。還可以用于部署webservice，對外提供統資源接口。
[0021]參見圖2，其為本實用新型大數據存儲應用網絡架構又一較佳實施例的方框圖。在此較佳實施例中，大數據存儲應用網絡架構包括:路由器10，硬件防火墻11，應用防火墻12，第一交換機13，第二交換機131，兩個第一應用服務器14，兩個第二應用服務器141，以及分布式存儲系統15 ;路由器10連接該硬件防火墻11并且接入Internet，該硬件防火墻11連接該應用防火墻12，該應用防火墻12連接該第一交換機13和第二交換機131，并將該第二交換機131設置于該應用防火墻12的DMZ(隔離區)區域中，一般是通過將該第二交換機131與該應用防火墻12的DMZ端口連接來實現，該第一交換機13連接該第一應用服務器14，該第二交換機131連接該第二應用服務器141，該第一應用服務器14和第二應用服務器141連接該分布式存儲系統15。
[0022]第二應用服務器141和第一應用服務器14 一樣可以用于根據實際需求預先部署各類應用程序，從而可以對數據進行各種加工或應用，只是第二應用服務器141通過連接第二交換機131設置于應用防火墻12的DMZ區域中。在此實施例中，通過應用防火墻12的端口中配置為DMZ的端口來建立DMZ區域，根據安全策略需求來把第二應用服務器141連接在DMZ區域內，既確保了網絡及數據的安全性，又滿足了向外網提供服務的需求。
[0023]綜上所述，本實用新型的大數據存儲應用網絡架構適合大數據的存儲和應用，能夠確保網絡及數據安全。
[0024]以上所述僅為本實用新型的較佳實施例，并不用以限制本實用新型，凡在本實用新型的精神和原則之內所作的任何修改、等同替換和改進等，均應包含在本實用新型的保護范圍之內。
【主權項】
1.一種大數據存儲應用網絡架構，其特征在于，包括:路由器，硬件防火墻，應用防火墻，第一交換機，多個第一應用服務器，以及分布式存儲系統；該路由器連接該硬件防火墻，該硬件防火墻連接該應用防火墻，該應用防火墻連接該第一交換機，該第一交換機連接該第一應用服務器，該第一應用服務器連接該分布式存儲系統。2.根據權利要求1所述的大數據存儲應用網絡架構，其特征在于，還包括第二交換機和多個第二應用服務器，該應用防火墻連接該第二交換機并將該第二交換機設置于該應用防火墻的DMZ區域中，該第二交換機連接第二該應用服務器，該第二應用服務器連接該分布式存儲系統。3.根據權利要求1所述的大數據存儲應用網絡架構，其特征在于，該分布式存儲系統為 Oracle RAC 集群。4.根據權利要求1所述的大數據存儲應用網絡架構，其特征在于，該分布式存儲系統為Hadoop集群。5.根據權利要求1所述的大數據存儲應用網絡架構，其特征在于，該分布式存儲系統包括Oracle RAC集群和Hadoop集群。6.根據權利要求3所述的大數據存儲應用網絡架構，其特征在于，該OracleRAC集群包括萬兆交換機和多個節點計算機，該節點計算機分別連接該萬兆交換機。7.根據權利要求4所述的大數據存儲應用網絡架構，其特征在于，該Hadoop集群包括萬兆交換機和多個節點計算機，該節點計算機分別連接該萬兆交換機。
【專利摘要】本實用新型涉及一種大數據存儲應用網絡架構。該大數據存儲應用網絡架構包括：路由器，硬件防火墻，應用防火墻，第一交換機，多個第一應用服務器，以及分布式存儲系統；該路由器連接該硬件防火墻，該硬件防火墻連接該應用防火墻，該應用防火墻連接該第一交換機，該第一交換機連接該第一應用服務器，該第一應用服務器連接該分布式存儲系統。本實用新型的大數據存儲應用網絡架構適合大數據的存儲和應用，能夠確保網絡及數據安全。
【IPC分類】H04L29/06, H04L29/08
【公開號】CN204887020
【申請號】CN201520582413
【發明人】劉濤, 張毅忠, 賈西貝
【申請人】深圳市華傲數據技術有限公司
【公開日】2015年12月16日
【申請日】2015年8月5日