破解數(shù)據(jù)暴漲下的三大存儲挑戰(zhàn) 亞馬遜云科技加速云端存儲服務(wù)創(chuàng)新

伴隨數(shù)字化轉(zhuǎn)型升級和新技術(shù)的普及應(yīng)用，數(shù)據(jù)成為創(chuàng)新應(yīng)用的基礎(chǔ)和驅(qū)動力，與此同時全球數(shù)據(jù)量每兩年以翻倍的速度增長，預(yù)計到2025年，企業(yè)數(shù)據(jù)會在現(xiàn)有的基礎(chǔ)上增長到3倍，87%的企業(yè)數(shù)據(jù)會存儲在公8有云上，海量數(shù)據(jù)的存儲成為信息產(chǎn)業(yè)的新挑戰(zhàn)。如何存儲龐大的數(shù)據(jù)，是企業(yè)和云廠商面臨的首要問題。

在近日舉辦的亞馬遜云科技存儲服務(wù)媒體溝通會上，亞馬遜云科技宣布加速云端存儲服務(wù)創(chuàng)新，通過智能分層、專門構(gòu)建以及統(tǒng)一數(shù)據(jù)保護三大層面，幫助企業(yè)進一步應(yīng)對海量數(shù)據(jù)上云面臨的諸多存儲挑戰(zhàn)，重塑云中數(shù)據(jù)活力。

數(shù)據(jù)爆漲帶來三大存儲挑戰(zhàn)

亞馬遜云科技大中華區(qū)產(chǎn)品部總經(jīng)理陳曉建在主題演講中提到：“數(shù)據(jù)的爆發(fā)性增長，尤其是云上的數(shù)據(jù)增長已經(jīng)是新常態(tài)，數(shù)據(jù)增長也會帶來諸多挑戰(zhàn)。”

一是敏捷與成本，如何應(yīng)對海量數(shù)據(jù)增長所帶來的成本急速上升，與數(shù)據(jù)存儲服務(wù)敏捷性能之間根深蒂固的矛盾。

二是多樣化需求，如何設(shè)計不同的存儲服務(wù)滿足不同業(yè)務(wù)的需求。

三是數(shù)據(jù)保護，數(shù)據(jù)安全與合規(guī)問題也是企業(yè)考慮的重中之重。

為破解上述挑戰(zhàn)，重塑云中數(shù)據(jù)活力，亞馬遜云科技僅在2021年就發(fā)布了130多項存儲新服務(wù)和功能特性，如今，其存儲服務(wù)已經(jīng)全面覆蓋了對象存儲、塊存儲、文件存儲、數(shù)據(jù)備份、數(shù)據(jù)容災(zāi)、以及數(shù)據(jù)傳輸與邊緣處理各個方面，客戶可根據(jù)自身需求靈活選擇，在云端開展業(yè)務(wù)創(chuàng)新。

亞馬遜云科技大中華區(qū)產(chǎn)品部總經(jīng)理 陳曉建

亞馬遜云科技存儲服務(wù)的持續(xù)創(chuàng)新

一、智能分層——成本與敏捷的自動平衡

為平衡敏捷與成本之間的矛盾，亞馬遜云科技就存儲服務(wù)的成本與敏捷性開展持續(xù)創(chuàng)新。以Amazon S3這一經(jīng)典的對象存儲產(chǎn)品為例，從2006至2022年的16年間，整個存儲成本降低了7倍。

2021年12月，借助于更智能的存儲分層技術(shù)，亞馬遜云科技將全球九大可用區(qū)域的兩款主要產(chǎn)品Amazon S3標準非頻繁訪問層(Amazon S3 Standard-Infrequent Access)和Amazon S3單區(qū)非頻繁訪問層(Amazon S3 One Zone-Infrequent Access)的存儲價格降低了31%，可見降低用戶的存儲成本一直是其努力的重要方向。

根據(jù)數(shù)據(jù)被使用的不同頻率，可以簡單把數(shù)據(jù)分為熱、溫、冷、凍四個層次，而亞馬遜云科技已開發(fā)了8層存儲層級，用戶可以根據(jù)自己的數(shù)據(jù)類型、需要的讀寫性能、可接受的成本，選擇合適的存儲層級應(yīng)對業(yè)務(wù)需求。

為滿足醫(yī)療影像數(shù)據(jù)這類實時性高、數(shù)據(jù)很大、訪問頻率低的數(shù)據(jù)存儲需求，亞馬遜云科技在幾個月前推出Amazon S3 Glacier Instant Retrieval即時檢索歸檔存儲，與普通歸檔存儲產(chǎn)品不同的是，采用這款產(chǎn)品用戶數(shù)的取回速度達到毫秒級，可以把冷數(shù)據(jù)當成熱數(shù)據(jù)來處理，讓音頻視頻、手機相冊、日志歸檔、影像資料等數(shù)據(jù)以低成本實現(xiàn)歸檔數(shù)據(jù)的快速檢索。

數(shù)據(jù)的冷熱并非是一成不變的，如果業(yè)務(wù)要上線新功能，數(shù)據(jù)冷熱發(fā)生較大變化，存儲邏輯勢必要大改。為了滿足這類需求，亞馬遜云科技于2018年推出Amazon S3智能分層功能，專門面向未知訪問模式的海量數(shù)據(jù)而設(shè)計。據(jù)悉，Amazon S3可以根據(jù)數(shù)據(jù)的實際訪問智能判斷合適的存儲層級，自動在不同層級的存儲之間移動數(shù)據(jù)，既降低了用戶運營的復(fù)雜性，又將運營成本大幅降低，至多可節(jié)省68%的成本。據(jù)悉，智能分層功能現(xiàn)已拓展到了共享文件存儲Amazon EFS。Amazon EFS提供四種存儲等級，可節(jié)省高達72%的存儲成本。

Nagarro(奈佳羅)是一家從事軟件服務(wù)和咨詢的公司。Nagarro中國區(qū)的首席架構(gòu)師郭亮在會上提到：構(gòu)建數(shù)據(jù)資產(chǎn)SaaS平臺面臨存儲成本、傳輸效率、容量預(yù)測、可靠性和災(zāi)備、數(shù)據(jù)安全五大方面的挑戰(zhàn)，Nagarro通過使用Amazon S3智能分層功能，解決了構(gòu)建數(shù)字資產(chǎn)SaaS平臺過程中的諸多挑戰(zhàn)，覆蓋了客戶所需存儲的全部類型，支持全球多區(qū)域部署確保了數(shù)據(jù)的持久性和可靠性;無需關(guān)心數(shù)據(jù)如何分層存儲，讓業(yè)務(wù)人員能夠更專注于應(yīng)用，同時還節(jié)省了70%的存儲費用，實現(xiàn)成本和敏捷的自動平衡。目前，Nagarro的數(shù)字資產(chǎn)SaaS平臺已服務(wù)于5,000多家企業(yè)級用戶。

此外，結(jié)合Amazon S3，Nagarro還通過使用亞馬遜云科技AI服務(wù)，智能挖掘數(shù)據(jù)價值。Amazon S3的海量存儲為Nagarro未來打造數(shù)據(jù)湖倉奠定了基礎(chǔ)，郭亮透露：“我們數(shù)字資產(chǎn)產(chǎn)品未來的方向是CaaS(內(nèi)容即服務(wù))，Nagarro會繼續(xù)加深和亞馬遜云科技的合作，進一步深度挖掘數(shù)據(jù)潛力。我們也希望亞馬遜云科技能推出更多更好的功能，為我們節(jié)省成本，提供更好的服務(wù)。”

二、專門構(gòu)建——滿足多樣化的上云需求

如今，數(shù)據(jù)類型多種多樣，既有云原生應(yīng)用產(chǎn)生的數(shù)據(jù)，也有傳統(tǒng)應(yīng)用產(chǎn)生的數(shù)據(jù)，而這兩類應(yīng)用所需要的云存儲服務(wù)也不盡相同。

針對云原生現(xiàn)代化應(yīng)用，企業(yè)客戶可以使用云原生Serverless文件存儲Amazon EFS，獲得簡單、無管理成本、海量彈性擴展、高度集成、自動優(yōu)化的體驗。

針對ERP等傳統(tǒng)的企業(yè)級應(yīng)用，如果應(yīng)用上云時需要按照云存儲產(chǎn)品的接口重新改寫代碼，沒有企業(yè)用戶愿意這樣做，保證兼容性對企業(yè)和云廠商而言都是非常重要的工作。為此，針對ERP/CRM、數(shù)據(jù)庫、自動駕駛、混合云等云端企業(yè)級應(yīng)用，亞馬遜云科技提供了Amazon EBS IO2 BX和Amazon FSx系列服務(wù)，前者為運行在線下數(shù)據(jù)中心SAN存儲上的應(yīng)用而設(shè)計，而后者是為各類企業(yè)應(yīng)用而專門構(gòu)建的共享文件存儲。

考慮到不同行業(yè)、各類不同的業(yè)務(wù)場景對共享存儲的不同要求，亞馬遜云科技將企業(yè)應(yīng)用分為四個類別：一是以Windows為主的應(yīng)用，底層服務(wù)要完全滿足Windows的環(huán)境，包括ACL文件訪問控制權(quán)限，以及Active Directory兼容等;二是高性能計算，對整個存儲的性能和吞吐率有著非常高的要求;三是各類企業(yè)應(yīng)用，上云時必須完美的兼容和支持之前的功能;四是大數(shù)據(jù)環(huán)境，往往需要高吞吐、低延時等技術(shù)支持。

為滿足以上四類場景的不同需求，亞馬遜云科技專門構(gòu)建了一個場景化應(yīng)用FSx家族，目前可提供四種Amazon FSx產(chǎn)品：一是Amazon FSx for windows;二是為支持高性能計算特別設(shè)計的Amazon FSx for Lustre;三是全方位、全托管的云上存儲Amazon FSx for NetApp ONTAP，可支持各類企業(yè)應(yīng)用;四是面向大數(shù)據(jù)分析Linux工作負載而設(shè)計的Amazon FSx for OpenZFS，提供高達1百萬IOPS，而延遲僅有幾百微秒，非常適合運行機器學(xué)習(xí)、音視頻實時處理等數(shù)據(jù)密集型的工作負載。

陳曉建提到：全球領(lǐng)先的風電智能化服務(wù)商金風慧能采用亞馬遜云科技的HPC集群和Amazon FSx for Lustre高性能共享文件系統(tǒng)，在一周內(nèi)完成氣象預(yù)測系統(tǒng)搭建，整個系統(tǒng)讓金風慧能的氣象數(shù)據(jù)計算時間縮短了1/3,每年節(jié)約了70%的成本，并且大大簡化了運維過程。

ONTAP是聯(lián)想凌拓母公司之一NetApp的文件存儲系統(tǒng)，聯(lián)想凌拓產(chǎn)品管理與營銷高級總監(jiān)林佑聲在會上提到：“聯(lián)想凌拓專注于智能數(shù)據(jù)管理領(lǐng)域，幫助客戶最大限度地挖掘數(shù)據(jù)價值。ONTAP及其數(shù)據(jù)管理功能在許多關(guān)鍵工作任務(wù)中發(fā)揮著不可或缺的作用。我們通過Amazon FSx for NetApp ONTAP，將NetApp廣受信賴的文件存儲和數(shù)據(jù)管理能力帶到了亞馬遜云科技上。由亞馬遜云科技支持、運行和銷售的全面托管服務(wù)，讓客戶能夠輕松地將ONTAP的強大功能部署于幾乎所有應(yīng)用程序。”

全球領(lǐng)先的物流提供商嘉里物流采用Amazon FSx for NetApp ONTAP公有云方案,通過系統(tǒng)自帶的SnapMirror功能，快速把線下數(shù)據(jù)中心NetApp ONTAP的數(shù)據(jù)遷移到亞馬遜云科技上，在云上，利用Amazon FSx for ONTAP Snapshots做跨區(qū)域災(zāi)備，實現(xiàn)關(guān)鍵數(shù)據(jù)的快速備份保護，并利用亞馬遜云科技實現(xiàn)存儲空間和備份空間的按需使用，隨時擴容;同時也免除了復(fù)雜的管理開銷，方便的實現(xiàn)了業(yè)務(wù)數(shù)據(jù)在各個國家不同部門之間的安全快速共享，提升了嘉里物流業(yè)務(wù)系統(tǒng)的安全性和可靠性。

三、統(tǒng)一數(shù)據(jù)保護——一站式數(shù)據(jù)備份服務(wù)

為了保障業(yè)務(wù)的連續(xù)性以及數(shù)據(jù)安全，企業(yè)對數(shù)據(jù)備份的重視程度越來越高，然而很多數(shù)據(jù)備份系統(tǒng)十分復(fù)雜，大多數(shù)企業(yè)都面臨著管理復(fù)雜、安全合規(guī)以及成本高昂三大挑戰(zhàn)。

為有效解決以上三大挑戰(zhàn)，亞馬遜云科技將Amazon Backup擴展至Amazon S3和VMware工作負載，讓客戶使用統(tǒng)一的數(shù)據(jù)保護策略，即可配置、管理和監(jiān)督數(shù)據(jù)的備份與恢復(fù)。Amazon Backup一站式備份服務(wù)現(xiàn)已支持15種以上的數(shù)據(jù)源備份，包括全部的存儲服務(wù)(塊、文件、對象)，以及各類數(shù)據(jù)庫，計算和存儲網(wǎng)關(guān)。

為降低備份管理的復(fù)雜度，Amazon Backup一站式備份服務(wù)提供圖形化管理控制臺，幫助用戶簡化備份管理，降低了整體運維的成本，同時用戶還可以通過預(yù)設(shè)的備份策略進行自動化備份，從而大幅降低手動備份可能帶來的諸多問題。

在安全合規(guī)方面，Amazon Backup深度集成了亞馬遜云科技自帶的KMS數(shù)據(jù)加密服務(wù)，備份操作權(quán)限和數(shù)據(jù)訪問權(quán)限都可以通過IAM進行細顆粒度監(jiān)控，可滿足個人信息安全規(guī)范、等保等安全合規(guī)要求。此外，利用Amazon Backup的集中數(shù)據(jù)備份，以及備份庫鎖定功能，可有效防止勒索病毒的攻擊，將生產(chǎn)數(shù)據(jù)備份到備份庫，設(shè)置備份庫鎖定功能，病毒或惡意操作都無法改變或者刪除備份庫中的數(shù)據(jù)。

據(jù)悉，澳大利亞領(lǐng)先的獨立石油和天然氣生產(chǎn)商Santos起初將數(shù)據(jù)放在塊存儲服務(wù)Amazon EBS上，通過Amazon Lambda腳本做手動備份，但是隨著業(yè)務(wù)的發(fā)展，數(shù)據(jù)量激增，手動備份的時間越來越長，整個備份的成功率只有80%左右。經(jīng)過再三考量，Santos選擇Amazon Backup，通過自動設(shè)定備份策略在后臺由系統(tǒng)進行備份，極大減輕了IT人員的工作負擔，不僅備份時間減少了80%，相關(guān)運營成本也降低了50%，最重要的是，備份任務(wù)的成功率從80%提高到100%，完全滿足了企業(yè)數(shù)據(jù)的合規(guī)需求。

助力全球各行業(yè)用戶開展業(yè)務(wù)創(chuàng)新

陳曉建提到:“亞馬遜云科技存儲服務(wù)已經(jīng)成為IT行業(yè)的‘水’和‘電’，讓各行各業(yè)的業(yè)務(wù)都能從存儲服務(wù)中獲得價值。”據(jù)悉，亞馬遜云科技存儲服務(wù)覆蓋制造業(yè)、化工、媒體、社交網(wǎng)站、視頻、汽車、航空航天等行業(yè)，廣泛服務(wù)于全球各地、各個行業(yè)、各個規(guī)模的企業(yè)客戶，同時為國內(nèi)嘉里物流、金風慧能、蘇泊爾、OPPO、首汽約車，中集集團、金蝶，桐樹基因、我愛我家等客戶提供廣泛存儲服務(wù)。