應對數據爆發增長挑战,從容挖掘數據價值,亞馬遜雲科技如何做?

2022-08-04 14:00:16

產業和生活的數字化繼續縱深,軟件與網絡用自己的方式“定義”世界,數據則在成爲水和電一樣的“基礎設施”,成爲各行業成長的驅策力之一。終端不斷衍生,應用和服務持續豐富,在數據的爆發式增長之下,如何從容挖掘其價值,對企業而言尤爲重要,而這在相當程度上有賴於存儲服務的創新。在這方面,擁有豐富、完善的雲存儲產品,並保持技術、服務升級節奏的亞馬遜雲科技,前不久分享了其新近的思考,也對其存儲服務“全家桶”做了相關解讀。

數據增長衍生三大關鍵問題

亞馬遜雲科技大中華區產品部總經理陳曉建分析認爲,數據增長主要帶來了三個方向的關鍵問題:其一,關於敏捷和成本,即如何應對海量數據增長所帶來的成本急速上升與數據存儲服務敏捷性能之間的矛盾;其二,關於數據多樣化需求,即如何設計不同的存儲服務,滿足不同業務對來自不同渠道、不同採集方式、不同性質的業務數據的需求;其三,關於數據安全與合規。

對應來看,亞馬遜雲科技設置了三種應對策略:一是,智能分層,即通過智能分層徹底解決數據的成本和數據的可用性、敏捷性之間的矛盾;二是,專門構建,即开發多種針對於不同場景下數據應用的存儲產品來解決企業應用多種多樣、需求各有不同的問題;三是,統一數據保護,即通過一站式雲服務備份系統,解決數據安全合規的問題,同時解決數據備份所帶來成本增加的問題。

事實上,上述三項策略,可以看做依據具體需求,對亞馬遜雲科技存儲服務“全家桶”所做的再梳理,其中也包括了持續創新的技術內容。

據了解,從2006年亞馬遜雲服務推出第一個雲存儲服務Amazon S3以來,到現在在整個行業已經擁有非常豐富、完善的雲存儲產品,涵蓋從塊存儲到對象存儲、文件存儲、備份、容災以及邊緣網絡和數據傳輸等存儲服務。其中也包括過去一年共發布的130多項新的存儲服務及功能,包括爲歸檔數據提供秒級雲上檢索的Amazon Simple Storage Service(Amazon S3)Glacier Instant Retrieval存儲等級,將智能分層功能拓展至雲原生文件存儲Amazon Elastic File System(Amazon EFS)等。

存儲服務“全家桶”提供精準對策

具體來看:

智能分層,直觀表現爲存儲等級的細分,即通過不同方式、以不同的優先級等實用不同數據,對應不同的存儲產品。這裏對應三個重點解決的問題是,數據成本,不同數據與存儲產品的對應,以及數據歸檔對低廉成本和快速檢索的兼顧。

先看成本降低的工作。亞馬遜雲科技從2006年推出第一個對象存儲的產品Amazon S3,至今不斷優化成本。一個可觀的實例是,2021年12月,亞馬遜雲科技宣布將全球九大可用區域的兩個主要產品價格降低了31%,一個是Amazon S3 Standard In Frequent Access,一個是Amazon S3 One Zone In Frequent Access。

再看數據與存儲產品的對應。亞馬遜雲科技依據不同使用頻率劃分數據的“冷熱”層級,通過數據溫度的概念區分數據類型,“熱、溫、冷、凍”的四層劃分,成爲了相關工作的重要指導。接下來就是數據與存儲服務的對應。亞馬遜雲科技從2006年以來开發多達8層存儲層級,用戶可以根據自己的數據類型、需要的讀寫性能、可以接受的成本來選擇其中任何一種存儲層級,來應對整個業務的需求。

最後看成本與效率的兼顧。以具體產品爲例,去年12月亞馬遜雲科技推出S3 Glacier Instant Retrieval(GIR),用戶可以進行低成本毫秒級檢索歸檔數據。

專門構建,表現爲通過不同存儲的服務來滿足不同業務的對大量差異數據的使用需求,應對不同的工作負載。

亞馬遜雲科技當前根據不同的工作負載,將雲端存儲分爲兩大類,一類是雲原生的現代化應用,一類是存在了很多年的雲端企業應用。

針對雲原生的現代化應用,亞馬遜雲科技存儲已經提供的基礎服務是:其一,Amazon S3自2006年开始設計,就是雲原生的應用,大量的應用和非常多的雲存儲都是放在Amazon S3上的,它事實上已經成爲了對象存儲工業界的事實標準;其二,EFS系統,作爲一個共享文件系統,類似於容器、無服務器和機器學習等應用,能提供很好的服務。

針對存在了很多年的雲端企業應用,亞馬遜雲科技雲端做了四項分類:一是,Windows工作負載;二是,計算密集型工作負載;三是,企業業務遷移上雲;四是,大數據分析Linux工作負載。

就此有四款Amazon FSx典型產品:Amazon FSx for windows、Amazon FSx for Lustre、Amazon FSx for OpenZFS、Amazon FSx for NetApp ONTAP。

其中,Amazon FSx For Lustre在高性能計算中應用廣泛,適用於於生命科學、自動駕駛、模擬仿真、視頻渲染等領域;Amazon FSx for OpenZFS提供高量、低延時的服務,可用於大數據模擬與分析、機器學習、音視頻處理等領域;Amazon FSx for NetApp ONTAP支持全托管全功能的雲上NetApp ONTAP存儲。

統一數據保護,就是要解決系統應用復雜度、安全合法合規適應性以及備份產生的額外成本等問題。

就此亞馬遜雲科技推出雲上一站式備份服務Amazon Backup。據稱,其有兩點優勢,一是,能夠很好的覆蓋亞馬遜雲科技所提供的每一個存儲產品,包括前面提到的塊存儲、對象存儲、文件存儲、數據庫,同時也能夠支持其他各類像計算和存儲網關的產品;二是,通過簡化備份存儲,通過確保安全合規和降低成本來解決前面的三個問題,簡化備份管理是通過圖形的界面幫助用戶降低整個運維的成本,用戶還可以通過預設的策略進行自動化的備份,降低手動備份帶來的問題。

安全合規方面,Amazon Backup深度集成了亞馬遜雲科技自帶的KMS數據加密服務,整個備份操作權限數據訪問權限都可以用IAM進行細顆粒度監控,滿足個人信息安全規範等安全合規的要求。

成本控制方面,冷熱分層的設計被延續,陳曉建舉例說,,如果按照95%的備份數據做冷備份庫,把5%的備份數據放在熱備份庫來處理,冷備份庫的成本按照熱備份庫的20%來計算,用戶通過冷熱分層策略可以有效降低約75%的成本。

一個現實的例子是,澳大利亞領先石油和天然氣生產商Santos就利用了Amazon BackuP實現數據自動備份保護並滿足企業合規需求。

綜上來看,亞馬遜雲科技存儲服務正繼續作爲IT行業的關鍵基礎設施,讓數字化轉型縱深中的各行各業都能從存儲服務中、從數據中收獲價值。正如陳曉健在分享中說的那樣:“我們從2006年开始到今天整整16年時間,一直在持續了解客戶的訴求,來持續進行科技的創新。我們一直被追趕,但從未被超越,但是我們還保持Day1的心態,把自己當成在2006年3月14日那天一樣,希望能夠在以後爲用戶帶來更多的價值。”(釘科技原創,轉載務必注明“來源:釘科技”)

追加內容

本文作者可以追加內容哦 !

0/100