北京——2023年9月8日,亞馬遜云科技日前在一年一度的存儲服務創新日上宣布推出諸多亞馬遜云科技存儲服務的新功能,其中重點包括為支持人工智能/機器學習、大(da)數(shu)據(ju)分析等數(shu)據(ju)密集(ji)型工作(zuo)負載進(jin)一步提(ti)升(sheng)(sheng)Amazon Elastic File System(Amazon EFS)讀取和寫入性能,以(yi)及Amazon Elastic Block Store(Amazon EBS)的(de)可擴展性和性能等。亞(ya)馬遜云科技推(tui)出了Mountpoint for Amazon S3開(kai)源文件客(ke)戶端,為客(ke)戶提(ti)供(gong)高吞吐量訪問,降低基于Amazon S3構建的(de)數(shu)據(ju)湖場景(jing)下(xia)的(de)計算(suan)資(zi)源成本;并大(da)幅提(ti)升(sheng)(sheng)用戶從Amazon S3 Glacier冷存(cun)儲恢(hui)復數(shu)據(ju)的(de)速度。
此外,亞馬遜云(yun)科技Amazon FSx for Windows File Server支持更(geng)高的吞吐(tu)能(neng)力提升Windows場景工(gong)作負載(zai)運行性能(neng),推出(chu)Amazon FSx for Lustre數(shu)據按需釋放功能(neng)為(wei)高性能(neng)計算提供(gong)高性價比的共享存(cun)儲方(fang)案,Amazon FSx for OpenZFS支持多可用(yong)區部署(shu)為(wei)關鍵業務持續穩(wen)定(ding)運行提供(gong)有力保障等。
提升Amazon EFS讀取和寫入性能,為人工智能/機器學習和大數據分析等數據密集型工作負載提供更高性能支持
Amazon EFS提(ti)供無服(fu)務化的彈性(xing)(xing)共享文件存(cun)儲,專為對存(cun)儲容量(liang)和(he)(he)性(xing)(xing)能(neng)(neng)的有自(zi)動高(gao)擴展性(xing)(xing)需(xu)求的應用而設計(ji)。Amazon EFS現已支持高(gao)達(da)55,000 IOPS的讀取性(xing)(xing)能(neng)(neng)和(he)(he)25,000 IOPS的寫入性(xing)(xing)能(neng)(neng),從(cong)而可(ke)(ke)以更輕松地(di)支持亞馬遜(xun)云科技(ji)上(shang)的人工智能(neng)(neng)/機器(qi)學習、大數(shu)據(ju)分析及其他數(shu)據(ju)密集(ji)型工作(zuo)負(fu)載(zai)。客戶(hu)可(ke)(ke)以輕松地(di)在(zai)Amazon EFS上(shang)運行對IOPS有更高(gao)要求的工作(zuo)負(fu)載(zai),例如使(shi)用KubeFlow進行機器(qi)學習, 以及利用Domino Data Lab、Hadoop和(he)(he)Spark進行大數(shu)據(ju)處理。
提高高性能數據塊存儲Amazon EBS的可擴展性和性能,滿足客戶更多存儲需求
亞馬遜云(yun)科技在15年(nian)前(qian)推(tui)出了(le)高(gao)性(xing)(xing)能數(shu)據塊存(cun)儲(chu)Amazon EBS,如今Amazon EBS 每天處理(li)超(chao)過(guo)100萬億次的(de)I/O操作,每天創(chuang)建的(de) EBS 卷(juan)(juan)(juan)數(shu)量(liang)超(chao)過(guo)3.9億。作為 Amazon EC2 實(shi)(shi)例的(de)直連(lian)(lian)存(cun)儲(chu),為支持客戶更(geng)多的(de)工作負(fu)載,亞馬遜云(yun)科技不(bu)斷提(ti)高(gao)Amazon EBS的(de)可擴(kuo)展性(xing)(xing)和性(xing)(xing)能。亞馬遜云(yun)科技近期推(tui)出的(de)搭載定制第4代Intel Xeon Scalable處理(li)器的(de) Amazon EC2 M7i實(shi)(shi)例,客戶可以最多連(lian)(lian)接128個(ge)Amazon EBS卷(juan)(juan)(juan),比上一代M6i 實(shi)(shi)例的(de)28個(ge)卷(juan)(juan)(juan)大幅度增加。這一新特性(xing)(xing)可滿(man)足客戶多樣化場景的(de)存(cun)儲(chu)需求(qiu)(qiu),例如客戶在使用K8s時(shi)(shi)單個(ge)node掛載128個(ge)卷(juan)(juan)(juan),相應的(de)每個(ge)pod通過(guo)CSI使用Amazon EBS時(shi)(shi)也可以掛載更(geng)多卷(juan)(juan)(juan),提(ti)高(gao)配置(zhi)靈活性(xing)(xing),滿(man)足不(bu)同(tong)場景需求(qiu)(qiu)。同(tong)時(shi)(shi),Amazon EBS多卷(juan)(juan)(juan)快(kuai)照數(shu)量(liang)也提(ti)升至128,方便(bian)為連(lian)(lian)接到實(shi)(shi)例的(de)所(suo)有卷(juan)(juan)(juan)創(chuang)建崩潰一致(zhi)性(xing)(xing)備份。
推出Mountpoint for Amazon S3開源文件客戶端,提供高吞吐量訪問
Mountpoint for Amazon S3 現已正式可用(yong),這是一(yi)款(kuan)新(xin)的(de)開源(yuan)文件(jian)客(ke)(ke)戶(hu)端(duan),可提供高吞吐量訪問,降低(di)基于(yu)Amazon S3構建(jian)的(de)數據湖場景下的(de)計(ji)(ji)算資源(yuan)成本。Mountpoint for Amazon S3可將本地文件(jian)系(xi)統(tong)(tong)API調用(yong)轉換(huan)為對(dui)S3對(dui)象API調用(yong)。客(ke)(ke)戶(hu)使用(yong)Mountpoint for Amazon S3,可將 Amazon S3存(cun)儲桶作(zuo)為本地文件(jian)系(xi)統(tong)(tong)掛載到計(ji)(ji)算實例上,以(yi)便通過(guo)具有 Amazon S3 彈性存(cun)儲和吞吐量的(de)文件(jian)接口訪問客(ke)(ke)戶(hu)的(de)對(dui)象。Mountpoint for Amazon S3支(zhi)持對(dui)現有文件(jian)的(de)順序(xu)和隨(sui)機(ji)讀取操作(zuo),以(yi)及用(yong)于(yu)創建(jian)新(xin)文件(jian)的(de)順序(xu)寫入操作(zuo)。
Amazon S3 Glacier Flexible Retrieval加快客戶從歸檔中恢復數據的速度,將數據恢復時間縮短85%以上
客(ke)戶(hu)(hu)使用(yong)Amazon S3 Glacier Flexible Retrieval 無(wu)需額外(wai)費用(yong),即可將(jiang)數(shu)據恢(hui)(hui)復(fu)(fu)時(shi)間縮短85%以上。使用(yong) Amazon S3 Batch Operations時(shi),標準檢(jian)索層會自動應(ying)用(yong)更快(kuai)(kuai)的(de)數(shu)據恢(hui)(hui)復(fu)(fu),這些恢(hui)(hui)復(fu)(fu)操(cao)作可在(zai)幾分鐘內返回(hui)對(dui)象,客(ke)戶(hu)(hu)可以更快(kuai)(kuai)地處理恢(hui)(hui)復(fu)(fu)的(de)數(shu)據,并行處理恢(hui)(hui)復(fu)(fu)的(de)數(shu)據幫助客(ke)戶(hu)(hu)加(jia)快(kuai)(kuai)數(shu)據處理流程(cheng)并快(kuai)(kuai)速(su)響應(ying)業務(wu)需求。現在(zai),無(wu)論是對(dui)媒(mei)體進行轉碼、恢(hui)(hui)復(fu)(fu)運營備份、訓練機器學習模型,還是分析(xi)歷史(shi)數(shu)據,都可以加(jia)快(kuai)(kuai)客(ke)戶(hu)(hu)從歸檔中恢(hui)(hui)復(fu)(fu)數(shu)據的(de)速(su)度。
Amazon FSx for Windows File Server支持更高的吞吐能力和IOPS性能,提升處理性能密集型工作負載效率
Amazon FSx for Windows File Server新增四(si)個更高的吞(tun)吐量級(ji)別,將(jiang)文件系統(tong)最(zui)(zui)大可用吞(tun)吐從之前(qian)的2GB/s 提高到12GB/s,同時也相應提升(sheng)文件系統(tong)的IOPS性能(neng),最(zui)(zui)高可達 350,000 IOPS。Amazon FSx for Windows File Server的性能(neng)提升(sheng)可幫(bang)助客戶縮短處(chu)理 SQL Server 數據庫(ku)、媒體處(chu)理、云視頻編輯(ji)和虛擬桌面基礎(chu)設(she)施(VDI)等性能(neng)密集型(xing)工作(zuo)負載的時間。
Amazon FSx for Lustre推出數據按需釋放功能,提供高性價比的高性能共享存儲方案
Amazon FSx for Lustre 與 Amazon S3 原生(sheng)集成,客戶(hu)(hu)可(ke)(ke)(ke)以通過Amazon FSx for Lustre高性(xing)能文件(jian)系統(tong)按(an)需(xu)訪(fang)問(wen)他們存(cun)放在(zai)S3 中的海量數據。Amazon FSx for Lustre推出數據釋放功能,客戶(hu)(hu)可(ke)(ke)(ke)以通過這個功能按(an)需(xu)或者設置策略(lve)釋放Amazon FSx for Lustre上的不活(huo)躍(yue)(yue)數據,從而騰出文件(jian)系統(tong)存(cun)儲(chu)(chu)(chu)空(kong)間,以便(bian)可(ke)(ke)(ke)繼續(xu)從Amazon S3存(cun)儲(chu)(chu)(chu)桶(tong)加載業務所(suo)需(xu)的活(huo)躍(yue)(yue)數據到文件(jian)系統(tong)并提供(gong)高性(xing)能訪(fang)問(wen)。Amazon FSx for Lustre的新(xin)功能極大簡(jian)化了客戶(hu)(hu)的存(cun)儲(chu)(chu)(chu)管(guan)理,通過與Amazon S3的集成,為機器學(xue)習、大模型訓練、生(sheng)命科(ke)學(xue)、自動駕駛,氣象(xiang)預測(ce)等(deng)工作負載提供(gong)了高性(xing)價比的高性(xing)能共享存(cun)儲(chu)(chu)(chu)方案。
Amazon FSx for OpenZFS支持多可用區部署模式,為客戶業務的持續穩定運行提供有效保障
Amazon FSx for OpenZFS基于開源的OpenZFS 文件系統構建,廣泛應用于需要高性能、高擴展性和成本效益的工作負載,提供亞毫秒級延遲和高達10GB/秒的吞吐量,以及豐富的數據管理功能(例如快照、數據克隆和壓縮等)。Amazon FSx for OpenZFS推出多可用區部署模式,新的多可用區文件系統通過分布在不同可用區的高可用性文件服務器構建。當任何一個文件服務器甚至整個可用區不可用時,Amazon FSx for OpenZFS會自動進行故障切換,從而為應用提供高可用的文件存儲。Amazon FSx for OpenZFS多可用區部署模式為客戶的關鍵業務包括數據庫、核心交易平臺、金融數據分析,半導體芯片設計(ji)等工作(zuo)負載,以及需要跨多個可(ke)用(yong)(yong)區的高可(ke)用(yong)(yong)Web服務(wu)應用(yong)(yong)等業務(wu)的持續穩(wen)定運行提供了有效保障。