解決方案
Solution電網海量非結構化數據存儲及備份
海量的非結構化數據廣泛存在于電網核心應用系統中。如何最有效地保護、管理和分析海量非結構化的數據成為必須考慮的問題。隨著數據中心的建設,傳統存儲陣列贏得了巨大的發展,但是隨著虛擬化的普及以及非結構化數據的爆炸式增長,傳統存儲陣列的疲態凸顯,在處理能力、擴展性、可維護性、可靠性方面,以及成本考量都呈現出更多地劣勢。
針對電網的海量非結構化數據的存儲業務需求,構建出一套分布式、模塊化擴展、數據管理功能豐富、能夠根據需要彈性擴展的數據中心計算和存儲資源調度基礎設施,使得系統可以在將來相當的一段時期內保持技術的先進性,以適應未來信息化的發展需要。為解決海量非結構化數據存儲/備份/分析/檢索,提供高可靠、高性能的存儲服務。
五大優勢
1.海量文件處理
實現了小文件合并處理與壓縮的功能,極大減少了巨量文件元數據對文件系統索引體系帶來的壓力。支持單存儲池超過1000億的文件對象數量。
2.NFS/FTP文件共享
支持NFS/FTP文件共享功能,即網絡文件系統。在對象存儲中通過NFS/FTP提供文件系統功能接口,解決通過文件協議訪問對象存儲實現多客戶端數據共享的需求,并且滿足對象存儲直接對接NAS備份功能。
3.數據生命周期管理
支持存儲桶數據生命周期管理功能,可以對存儲桶內的數據按規則進行部分或整桶歸檔和刪除,支持實時歸檔及延時歸檔,同時支持延時刪除功能。用戶可對存儲桶中的對象數據設置不同的生命周期,不經常使用的數據可以定時歸檔到冷數據池,部分垃圾數據可以定時進行清理刪除操作,以便提供更有效的存儲空間。
4.可靠性大幅度增強
產品層面不僅解決了傳統分布式存儲系統中對可靠性造成威脅的很多缺陷,而且對關鍵的IO路徑和管理控制模塊皆進行了冗余設計。同時,通過拓撲規劃功能對存儲集群支持多種安全級別的數據安全保護,如支持節點級別、機架級別、數據中心級別的故障域。存儲系統可靠性及持續在線特性得到有效保證。
5.高級功能
支持多站點數據同步部署,使多個對象存儲集群全局共享統一的用戶和存儲桶信息,實現集群內數據就近讀寫訪問,集群間數據異步復制容災,提供全局對象存儲訪問服務。同時支持多種數據精簡,支持端到端壓縮技術,從網關層開始壓縮,減少了網絡傳輸和實際容量占用。同時小文件合并歸檔技術大大減少了海量小文件的元數據和數據碎片化問題,大大提高了有效空間利用率。