夯實數(shù)據(jù)“底座”，AWS完整云存儲陣容吹響“集結(jié)號”

毋庸置疑，數(shù)據(jù)已經(jīng)成為企業(yè)驅(qū)動數(shù)字化轉(zhuǎn)型，持續(xù)釋放業(yè)務(wù)價值的重要支撐?；仡櫰髽I(yè)數(shù)據(jù)的演進史，從早期的數(shù)據(jù)報表，到實時互動的儀表盤，到數(shù)據(jù)倉庫，到今天的數(shù)據(jù)湖。企業(yè)擁有生產(chǎn)經(jīng)營各個環(huán)節(jié)產(chǎn)生的、產(chǎn)品和服務(wù)相關(guān)環(huán)節(jié)背后隱藏的，以及企業(yè)利益相關(guān)者等方方面面的數(shù)據(jù)。

當(dāng)海量數(shù)據(jù)進入數(shù)據(jù)湖，用不同的分析引擎在不同的場景下做分析，利用人工智能和機器學(xué)習(xí)實現(xiàn)業(yè)務(wù)洞察，數(shù)據(jù)已然成為企業(yè)基礎(chǔ)設(shè)施的一部分。企業(yè)需要快速升級數(shù)據(jù)基礎(chǔ)架構(gòu)，利用云、大數(shù)據(jù)分析、人工智能等技術(shù)喚醒數(shù)字化能力，持續(xù)提升生產(chǎn)和工作效率，提升客戶體驗，進而通過數(shù)據(jù)驅(qū)動業(yè)務(wù)決策。在新冠疫情的背后，我們不難發(fā)現(xiàn)越是數(shù)字化的企業(yè)，面對突發(fā)事件的響應(yīng)更加快速、更加靈活。

今天的數(shù)據(jù)越來越多元化，結(jié)構(gòu)化的、非結(jié)構(gòu)化數(shù)據(jù)需要數(shù)據(jù)基礎(chǔ)設(shè)施能夠提供完善的存儲服務(wù)來承載滿足不同應(yīng)用場景的工作負(fù)載和數(shù)據(jù)。

為了進一步夯實云上數(shù)據(jù)基礎(chǔ)設(shè)施的“底座”，近日，AWS中國（寧夏）區(qū)域（由西云數(shù)據(jù)運營）和AWS中國（北京）區(qū)域（由光環(huán)新網(wǎng)運營）正式同步上線了兩項全新的文件存儲服務(wù)：Amazon FSx for Windows File Server和Amazon FSx for Lustre，分別為Windows工作負(fù)載提供文件存儲服務(wù)和高性能計算工作負(fù)載提供文件存儲服務(wù)。

AWS云存儲陣容吹響“集結(jié)號”

隨著兩項文件存儲服務(wù)的加入，AWS已經(jīng)在中國區(qū)集齊了云存儲服務(wù)的“全家桶”，正式吹響了AWS完整云存儲陣容的“集結(jié)號”。

“這兩項服務(wù)的加入為Windows工作負(fù)載和高性能計算工作負(fù)載上云打開了一扇門，意味著客戶在考慮上云的時候，可以通過更多的路徑遷移上云，Windows工作負(fù)載和高性能計算工作負(fù)載，可以非常快的在云端擴展”，AWS大中華區(qū)產(chǎn)品部總經(jīng)理顧凡說。

云存儲是IaaS云基礎(chǔ)設(shè)施的重要支撐，AWS作為全球云計算市場的領(lǐng)導(dǎo)者，14年前首項云服務(wù)就是從存儲服務(wù)Amazon S3對象存儲起步的。多年來，AWS云服務(wù)一直占據(jù)了Gartner云基礎(chǔ)設(shè)施即服務(wù)魔力象限和IDC的IaaS MarketScape等評估報告的領(lǐng)導(dǎo)者位置，這與其持續(xù)在云存儲服務(wù)領(lǐng)域的前瞻性和執(zhí)行能力密不可分。

在總結(jié)AWS云存儲服務(wù)的顯著特點時，顧凡強調(diào)，“安全可信、至廣至深、高度集成、開放生態(tài)是AWS存儲服務(wù)非常重要的特點?！?/span>

與客戶重視云應(yīng)用可靠性和數(shù)據(jù)安全性一樣，數(shù)據(jù)安全的重要性在AWS比所有的優(yōu)先級都高，AWS無時不刻都在強調(diào)安全是“Day1”是其根本的立足點。

Amazon S3對象存儲服務(wù)是被眾多客戶廣泛應(yīng)用的存儲服務(wù)，Amazon S3做了超細(xì)粒度的安全訪問控制策略來滿足。同時，AWS還通過VPC來加強對數(shù)據(jù)網(wǎng)絡(luò)接入的控制，以及加密和審計功能來滿足各類法規(guī)遵從。

如今，AWS已經(jīng)形成了完整的云存儲服務(wù)陣容，覆蓋對象存儲、塊存儲、Linux文件存儲、Windows文件存儲、高性能文件存儲、低成本歸檔存儲，以及云上的備份存儲，并將這些服務(wù)同步到了中國市場。IDC在其IaaS MarketScape提到，AWS繼續(xù)保持其在公有云中IaaS市場的主導(dǎo)地位，并為客戶提供當(dāng)今公有云中最廣泛的基礎(chǔ)設(shè)施服務(wù)組合。

此外，AWS還提供多種數(shù)據(jù)傳輸和邊緣處理的服務(wù)，來滿足數(shù)據(jù)的在線傳輸和離線傳輸。比如，當(dāng)用戶要將數(shù)據(jù)遷移到Amazon S3時，可以在本地數(shù)據(jù)中心安裝AWS Storage Gateway代理，可讓企業(yè)從本地訪問不受限制的云存儲，從而簡化存儲管理，降低關(guān)鍵混合云存儲用例的成本。

在深度方面，比如Amazon S3根據(jù)數(shù)據(jù)的訪問頻率有多達6個標(biāo)準(zhǔn)分級，“用戶可以根據(jù)數(shù)據(jù)訪問的頻度，以及應(yīng)用和工作負(fù)載對性能和備份數(shù)據(jù)回滾時間的容忍程度，來選擇最高性價比的存儲層”，顧凡說，“S3 Intelligent-Tiering能夠通過機器學(xué)習(xí)的方式，去分辨、預(yù)測一個客戶的數(shù)據(jù)的冷熱程度，從而將數(shù)據(jù)自動放到對應(yīng)的存儲分級中。”

AWS的云服務(wù)非常強調(diào)每項服務(wù)的高度集成性，對于存儲服務(wù)而言要緊跟云上工作負(fù)載未來的發(fā)展路徑，是要進行大數(shù)據(jù)分析、數(shù)據(jù)湖、機器學(xué)習(xí)、應(yīng)用程序的現(xiàn)代化，還是容器化，隨著工作負(fù)載的迭代和演進，存儲勢必需要滿足與其他云服務(wù)的緊密集成。顧凡特別強調(diào)了目前在云存儲服務(wù)集成性方面的鮮明用例，數(shù)據(jù)湖，微服務(wù)、容器化和無服務(wù)器化趨勢。

近年來，數(shù)據(jù)湖的快速增長驅(qū)動了Amazon S3的用量增長，據(jù)AWS統(tǒng)計目前在Amazon S3上運行著數(shù)萬個數(shù)據(jù)湖應(yīng)用。數(shù)據(jù)湖有效的解決了跨數(shù)據(jù)孤島的數(shù)據(jù)分析的高吞吐、高并發(fā)、高可用和擴展性的優(yōu)化。

“利用Amazon S3數(shù)據(jù)湖時，它與AWS Storage Gateway、Amazon EMR、Redshift、Athena、Kineses，SageMaker等云服務(wù)集成有效的保證了數(shù)據(jù)的注入、清洗、分析、查詢和機器學(xué)習(xí)模型訓(xùn)練”，顧凡舉例說。

豐田互聯(lián)基于Amazon S3開發(fā)和部署數(shù)據(jù)湖，僅用5個多月時間就上線了Toyota Big Data Center China，它可以存儲、處理上千萬輛豐田汽車每天在行駛過程中產(chǎn)生的數(shù)十TB數(shù)據(jù)，利用Amazon S3的可伸縮性和高可用性，集成AWS Lambda，Amazon Kinesis和Amazon EMR等AWS服務(wù)的大規(guī)模數(shù)據(jù)處理功能，高效地完成從實時數(shù)據(jù)注入、解碼到分析、應(yīng)用的全流程。

經(jīng)過多年的積累，AWS云存儲服務(wù)聚集了眾多的合作伙伴，如NetApp、Commvault、VMware、Cloudera等等，從而構(gòu)建起了業(yè)界最為完整的存儲生態(tài)系統(tǒng)。

文件存儲成為新增長極

近年來云上文件存儲的發(fā)展速度非?？?，文件存儲服務(wù)也成為了AWS云存儲服務(wù)新的增長極。在2020年初，AWS在中國區(qū)上線了針對Linux工作負(fù)載AWS EFS文件存儲服務(wù)后，這次又連續(xù)落地了針對Windows工作負(fù)載和高性能計算工作負(fù)載的文件存儲服務(wù)。

滿足企業(yè)在云端更加豐富的工作負(fù)載存儲需求是AWS加速文件存儲服務(wù)在中國市場落地驅(qū)動力，在全球市場公有云上面運轉(zhuǎn)的Windows工作負(fù)載有過半跑在AWS上。而Windows工作負(fù)載上云面臨兩方面的挑戰(zhàn)。首先，面對特定的Windows工作負(fù)載，企業(yè)不可能將其轉(zhuǎn)換成Linux工作負(fù)載，挑戰(zhàn)會比較大；而使用第三方存儲服務(wù)的軟件License在云上部署，又增加了運維成本。

企業(yè)內(nèi)部圍繞Windows為核心的工作負(fù)載，比如ERP、CRM、Office辦公文件等這些系統(tǒng)遷移上云的時候，需要有與Windows工作負(fù)載的存儲服務(wù)來適配。

Amazon FSx for Windows File Server提供一種完全托管、高可靠且可擴展的文件存儲服務(wù)，它與Windows應(yīng)用程序完全兼容，Linux和MacOS操作系統(tǒng)也可以通過行業(yè)標(biāo)準(zhǔn)的SMB協(xié)議訪問，共享文件存儲。其主要應(yīng)用于用戶文件共享、Web網(wǎng)站服務(wù)、企業(yè)內(nèi)容管理、Windows應(yīng)用程序和工作負(fù)載、數(shù)據(jù)分析業(yè)務(wù)等工作負(fù)載。

在部署方式上，Amazon FSx for Windows支持單可用區(qū)，多可用區(qū)的部署，最多可提供跨三個可用區(qū)的部署，以提高最好的可用性、持久性。存儲介質(zhì)上可選擇SSD、HDD來平衡成本。

Amazon FSx for Windows還有一項業(yè)界獨有的功能“數(shù)據(jù)去重”。當(dāng)企業(yè)的文件存在非常接近或一模一樣的文件時，會占用大量的存儲資源。通過這項功能能夠幫助企業(yè)將相同的文件只保留一份，從而最大程度節(jié)約存儲成本，目前該功能的準(zhǔn)確率高到80%。

此外，Amazon FSx for Windows還有微軟的AD集成，從而簡化存儲的權(quán)限管理、配額限定等管理工作。

高性能計算在過去幾十年時間中一直圍繞三個方向在持續(xù)努力，第一是計算節(jié)點能力，第二是網(wǎng)絡(luò)支撐能力，第三是文件存儲能否跟得上整個集群的響應(yīng)速度。所以，當(dāng)更復(fù)雜的應(yīng)用開始實現(xiàn)在云上面部署的時候，高性能計算是一個非常大的驅(qū)動力。

在2019年的全球超級計算機TOP500的榜單中，Descartes Labs使用AWS云資源運行標(biāo)準(zhǔn)的高性能計算測試，性能達到1.926 petaflops，躋身TOP500中的第136位。這也是TOP500榜單上第一個在公有云上運行的超級計算機，標(biāo)志著高性能計算工作負(fù)載跑上云端進入了嶄新的階段。

高性能計算工作負(fù)載上云，能夠彈性、靈活、快速和低成本的獲得超算的能力，為航空航天研究、金融風(fēng)控、自動駕駛等商業(yè)化發(fā)展鋪平了道路。

Amazon FSx for Lustre也是一項完全托管的高性能文件存儲服務(wù)，能提供亞毫秒級延遲、高達每秒數(shù)百GB的吞吐量和百萬級的IOPS，為計算密集型工作負(fù)載提供經(jīng)濟高效的高性能存儲?？蓮V泛應(yīng)用于機器學(xué)習(xí)、高性能計算、電子設(shè)計自動化、生命科學(xué)、自動駕駛和視頻渲染等需要高性能共享存儲的工作負(fù)載。

據(jù)了解，在中國市場已經(jīng)有許多半導(dǎo)體設(shè)計公司和半導(dǎo)體供應(yīng)商開始使用使用Amazon FSx for Lustre來運行EDA中的工作負(fù)載。