新資料時代下的冷資料儲存策略

近年來,為滿足不斷變化的業務和市場需求,許多公司正在將更為豐富、多樣的技術應用到工作之中,從而使得“數字化轉型”一詞被大眾所熟知。隨著企業運營方式的轉變,資料生成的規模也開始大幅增長:非結構化資料的數量,正在以每年高達60%的速度攀升,預計到2025年,將佔到所有資料總量的80%到90%——且沒有跡象表明這樣的趨勢會放緩。

從更為細化的角度來看,一家半導體制造商,每週會產生超過10億張影象掃描,記錄4000片晶圓的製造過程,這些掃描產生的資料必須儲存數年之久;而一輛正在進行自動駕駛研究的汽車,每使用一小時就會產生高達2TB的資料量,這些資料也必須儲存數年之久,為將來可能發生的安全分析、或行駛模型重構工作打好基礎。

隨著資料量的快速增長,企業的儲存預算和資料儲存容量都很難實現同步的增長速度。而如何更好地解決儲存非結構化和非活動資料的問題——這也是冷資料儲存概念形成的主要源頭之一。

新資料時代下的冷資料儲存策略

冷資料儲存的意義何在?

就像是經典的三段論一樣,資料的生命週期也可以分為三個部分:開始,中端和結尾。資料對專案的重要性和訪問頻率,決定了資料的分類方式——“熱”、“溫”或“冷”資料。“隨需而變”,且每天都在為專案所使用的資料,被稱為“熱”資料。需要定期訪問,但頻次達不到以天為單位的資料,可被稱為“溫”資料。最後,但絕不是不重要的,那就是“冷”資料,它們也許較少,或不太會頻繁被組織或專案所需要。但這樣的資料,佔所有儲存資料量的60%以上。

許多公司不得不儲存冷資料,不是出於選擇,而是必須遵守關於資料儲存的嚴格規定或內部政策。然而,近年來,人們對冷資料的態度開始發生了改變。越來越多的公司選擇儲存冷資料,是因為其所蘊含的長期戰略價值、資料在未來專案中進行再次使用的潛力、以及隨著時間的推移,其可以與新資料配合使用,呈現更高價值的機會。

冷資料儲存一直是一種持久、安全、價效比較高的資料長期儲存辦法。然而,隨著全新的資料分析方法的出現,計算能力的大幅增強,以及數字化轉型的加速程序,都意味著使用者對資料儲存的總量,以及其隨時線上的可用性需求,變得更高了。當然,在滿足上述需求的同時,人們依然會期望冷資料儲存辦法,始終保持原有的耐久性、安全性和儲存成本標準。

我是否需要冷資料儲存策略?

據估計,人類在未來3年內所產生的資料,將超過過去30年來的資料量的總和。隨著企業逐漸意識到了冷資料的價值,加上日漸增長的冷資料量,建立冷資料儲存策略的理由是顯而易見的——如果某一企業想要在資料曲線上保持領先,就必須迅速採取行動,實施相關的冷資料儲存策略。同時,企業還必須優先構建有意義的、可擴充套件的解決方案,以更有效地收穫那些由資料驅動的創新機會,並減少那些由於大規模的資料積累,或是持續資料增長相關所帶來的相關負面影響。

新資料時代下的冷資料儲存策略

冷資料儲存產品層面的創新,提高了總體層面的效能、永續性和儲存效率表現。因為對於所有組織來說,儲存大量資料的成本都是很高的,然而,

最新的冷資料儲存產品

,比起那些用於熱資料高效能訪問的NVMe和固態硬碟技術,要便宜得多。造成這種情況的一個關鍵原因是,冷資料可以儲存在效能較低、成本較低的儲存基礎設施之上,既可以在本地部署,也可以儲存在雲端。這意味著組織可以一種成本效益更高的方式,儲存更多所需要的資料集。

大多數現代化的冷資料儲存體系,都是由一些世界上最大的雲服務提供商所開發的,但隨著新的架構和服務型別的出現,冷資料儲存解決方案現在完全可以在組織的資料中心、託管設施或託管IT環境中進行部署,以滿足資料主權和資料駐留層面的相關需求。從而使得資料變得更為容易訪問,且無需支付訪問/下載方面的費用,檢索時間可以減少到僅需要幾分鐘之久。此外,出現了針對冷資料儲存進行了專門最佳化的全新糾刪碼演算法,與傳統的儲存多副本的方法相比,可大幅減少儲存層面的開銷。

新資料時代下的冷資料儲存策略

解鎖更多資料的更多價值

冷資料儲存體系,能夠使組織對資料進行更為安全的儲存,保持對這些寶貴資產的內部控制,並可以讓那些面向未來的專案,完成對這些資料的輕鬆檢索。在這個新的資料時代,越來越明顯的趨勢在於,即便你手中的資料不能在短期內無法滿足任何直接的目的,組織也不能忽視它們。資料儲存的意義,既是為了其的歷史意義,也是為了挖掘其對未來專案的價值。冷資料儲存技術的進步,意味著企業不必為了活躍資料而犧牲非活躍資料。無論您的組織是期望降低儲存成本還是提高資料的價值回報,冷資料儲存體系,可以為海量資料的積累問題,提供一套真正的解決方案。