隨著大數(shù)據(jù)時代的到來,石油勘探行業(yè)數(shù)據(jù)量呈爆發(fā)式增長,石油勘探使用大規(guī)模高性能計算服務器對采集的數(shù)據(jù)進行成像、分析等,其后端存儲和處理面臨著前所未有的挑戰(zhàn)。 目前,石油勘探主要使用NAS存儲提供的文件共享服務,前端大規(guī)模高性能計算集群對處理I/O帶寬要求極高,但是NAS集群中機頭節(jié)點數(shù)量是有限的,所以后端存儲很難支撐幾十上百個并發(fā)應用。如一個常規(guī)格式轉換作業(yè),處理的I/O帶寬需求高,每個NAS節(jié)點的峰值帶寬超過100MB/s,并行處理規(guī)模達到48個計算節(jié)點以上時,對后端網(wǎng)絡帶寬的需求超過GB級。所以,存儲嚴重制約著石油勘探行業(yè)的高速發(fā)展。 集群存儲是指將多臺存儲設備中的存儲空間聚合成一個能夠給應用服務器提供統(tǒng)一訪問接口和管理界面的存儲池,應用可以通過該訪問接口訪問和利用所有存儲設備上的磁盤,充分發(fā)揮存儲設備的性能和磁盤利用率。數(shù)據(jù)將按照一定的規(guī)則從多臺存儲設備上存儲和讀取,以獲得更高的并發(fā)訪問性能。 由于近幾年科技的高速發(fā)展,集群存儲技術已經(jīng)從科技實驗室走到人們的生活中,基于聚合帶寬、海量容量等特點,集群存儲能很好的應用在石油勘探等高性能計算領域。 中博科創(chuàng)集群存儲系統(tǒng)是針對海量數(shù)據(jù)及高并發(fā)IO應用而設計,集硬件平臺、先進的分布式集群文件系統(tǒng)和智能管理功能于一體的產(chǎn)品。系統(tǒng)顛覆傳統(tǒng)的基于機頭轉發(fā)讀寫數(shù)據(jù)的模式,應用可直接讀取數(shù)據(jù),從架構上徹底消除了傳統(tǒng)存儲系統(tǒng)性能和容量擴展有限的瓶頸,可以支撐石油勘探行業(yè)更大規(guī)模的應用,更好的為大規(guī)模計算服務器提供集中存儲服務,是石油勘探行業(yè)海量非結構化數(shù)據(jù)集中存儲的最佳平臺。其特點如下: 大容量 中博科創(chuàng)集群存儲系統(tǒng)能夠提供比傳統(tǒng)存儲更大的存儲容量,單套設備最大支持400PB海量級的存儲空間。尤其在文件數(shù)量上,中博科創(chuàng)集群存儲單一文件系統(tǒng)支持文件數(shù)量可達數(shù)十億級別。 高擴展性 系統(tǒng)采用Scale-out擴展方式,打破了傳統(tǒng)SAN架構的擴展限制,性能和容量隨存儲節(jié)點的增加而線性增長,可以很好的滿足石油勘探企業(yè)未來業(yè)務快速發(fā)展對存儲空間和帶寬的需求,避免因用戶需求不斷增長而帶來的數(shù)據(jù)遷移和應用中斷的問題,并可隨需求變化動態(tài)調整資源、帶寬、處理能力和存儲容量,所有擴容操作均可在線進行,無須中斷應用的正常執(zhí)行。 高帶寬 中博科創(chuàng)集群存儲系統(tǒng)采用數(shù)據(jù)和元數(shù)據(jù)分離技術,元數(shù)據(jù)服務器不參與實際數(shù)據(jù)傳輸,只用來建立傳輸會話,會話一旦建立,數(shù)據(jù)就直接在用戶和存儲系統(tǒng)之間進行傳輸,系統(tǒng)帶寬最高達到100GB/S的速度,輕松應對大量計算服務器并發(fā)訪問的需求。 高可靠性 中博科創(chuàng)集群存儲系統(tǒng)采用集群架構,系統(tǒng)各個組成模塊均采用集群的冗余機制和高效、準確的失效檢測算法來保證整個系統(tǒng)的高可用性。系統(tǒng)任一節(jié)點故障,都可以智能的進行自我修復,并且不影響前端應用的正常運行。中博科創(chuàng)集群存儲系統(tǒng)通過將文件副本復制并且存儲在不同的節(jié)點上,在某一存儲節(jié)點或某幾個存儲節(jié)點發(fā)生故障時,系統(tǒng)自動將讀寫指令導向其他存儲節(jié)點上的文件副本,保持業(yè)務的連續(xù)性。對終端用戶來說,這一過程是完全自動化、透明的,業(yè)務端幾乎不會受到影響,從而保證了業(yè)務的100%連續(xù)性。 在石油勘探等高性能計算領域,中博科創(chuàng)分布式集群存儲能最大限度的發(fā)揮高容量、高帶寬、高可用性和高擴展性的特點,推動高性能計算服務器集群向前發(fā)展,滿足石油勘探領域對存儲的需求。 |
|