電網(wǎng)海量非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)及備份

海量的非結(jié)構(gòu)化數(shù)據(jù)廣泛存在于電網(wǎng)核心應(yīng)用系統(tǒng)中。如何最有效地保護(hù)、管理和分析海量非結(jié)構(gòu)化的數(shù)據(jù)成為必須考慮的問(wèn)題。隨著數(shù)據(jù)中心的建設(shè),傳統(tǒng)存儲(chǔ)陣列贏得了巨大的發(fā)展,但是隨著虛擬化的普及以及非結(jié)構(gòu)化數(shù)據(jù)的爆炸式增長(zhǎng),傳統(tǒng)存儲(chǔ)陣列的疲態(tài)凸顯,在處理能力、擴(kuò)展性、可維護(hù)性、可靠性方面,以及成本考量都呈現(xiàn)出更多地劣勢(shì)。

針對(duì)電網(wǎng)的海量非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)業(yè)務(wù)需求,構(gòu)建出一套分布式、模塊化擴(kuò)展、數(shù)據(jù)管理功能豐富、能夠根據(jù)需要彈性擴(kuò)展的數(shù)據(jù)中心計(jì)算和存儲(chǔ)資源調(diào)度基礎(chǔ)設(shè)施,使得系統(tǒng)可以在將來(lái)相當(dāng)?shù)囊欢螘r(shí)期內(nèi)保持技術(shù)的先進(jìn)性,以適應(yīng)未來(lái)信息化的發(fā)展需要。為解決海量非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)/備份/分析/檢索,提供高可靠、高性能的存儲(chǔ)服務(wù)。

image.png

五大優(yōu)勢(shì)


1.海量文件處理

實(shí)現(xiàn)了小文件合并處理與壓縮的功能,極大減少了巨量文件元數(shù)據(jù)對(duì)文件系統(tǒng)索引體系帶來(lái)的壓力。支持單存儲(chǔ)池超過(guò)1000億的文件對(duì)象數(shù)量。


2.NFS/FTP文件共享

支持NFS/FTP文件共享功能,即網(wǎng)絡(luò)文件系統(tǒng)。在對(duì)象存儲(chǔ)中通過(guò)NFS/FTP提供文件系統(tǒng)功能接口,解決通過(guò)文件協(xié)議訪問(wèn)對(duì)象存儲(chǔ)實(shí)現(xiàn)多客戶端數(shù)據(jù)共享的需求,并且滿足對(duì)象存儲(chǔ)直接對(duì)接NAS備份功能。


3.數(shù)據(jù)生命周期管理

支持存儲(chǔ)桶數(shù)據(jù)生命周期管理功能,可以對(duì)存儲(chǔ)桶內(nèi)的數(shù)據(jù)按規(guī)則進(jìn)行部分或整桶歸檔和刪除,支持實(shí)時(shí)歸檔及延時(shí)歸檔,同時(shí)支持延時(shí)刪除功能。用戶可對(duì)存儲(chǔ)桶中的對(duì)象數(shù)據(jù)設(shè)置不同的生命周期,不經(jīng)常使用的數(shù)據(jù)可以定時(shí)歸檔到冷數(shù)據(jù)池,部分垃圾數(shù)據(jù)可以定時(shí)進(jìn)行清理刪除操作,以便提供更有效的存儲(chǔ)空間。


4.可靠性大幅度增強(qiáng)

產(chǎn)品層面不僅解決了傳統(tǒng)分布式存儲(chǔ)系統(tǒng)中對(duì)可靠性造成威脅的很多缺陷,而且對(duì)關(guān)鍵的IO路徑和管理控制模塊皆進(jìn)行了冗余設(shè)計(jì)。同時(shí),通過(guò)拓?fù)湟?guī)劃功能對(duì)存儲(chǔ)集群支持多種安全級(jí)別的數(shù)據(jù)安全保護(hù),如支持節(jié)點(diǎn)級(jí)別、機(jī)架級(jí)別、數(shù)據(jù)中心級(jí)別的故障域。存儲(chǔ)系統(tǒng)可靠性及持續(xù)在線特性得到有效保證。


5.高級(jí)功能

支持多站點(diǎn)數(shù)據(jù)同步部署,使多個(gè)對(duì)象存儲(chǔ)集群全局共享統(tǒng)一的用戶和存儲(chǔ)桶信息,實(shí)現(xiàn)集群內(nèi)數(shù)據(jù)就近讀寫(xiě)訪問(wèn),集群間數(shù)據(jù)異步復(fù)制容災(zāi),提供全局對(duì)象存儲(chǔ)訪問(wèn)服務(wù)。同時(shí)支持多種數(shù)據(jù)精簡(jiǎn),支持端到端壓縮技術(shù),從網(wǎng)關(guān)層開(kāi)始?jí)嚎s,減少了網(wǎng)絡(luò)傳輸和實(shí)際容量占用。同時(shí)小文件合并歸檔技術(shù)大大減少了海量小文件的元數(shù)據(jù)和數(shù)據(jù)碎片化問(wèn)題,大大提高了有效空間利用率。