亞馬(ma)遜云(yun)(yun)科(ke)技自2006年推出對象存儲服務Amazon Simple Storage Service (Amazon S3)至(zhi)今,一直(zhi)不(bu)斷根據客(ke)戶(hu)需求(qiu)(qiu)持續(xu)豐富Amazon S3的(de)功能(neng)。目(mu)前,Amazon S3擁有超(chao)過 280 萬億個對象,平(ping)均每秒處理超(chao)過 1 億個請求(qiu)(qiu)。在Amazon S3 17周(zhou)年之(zhi)際,亞馬(ma)遜云(yun)(yun)科(ke)技宣(xuan)布推出諸多新的(de)服務及功能(neng),包括Amazon S3 的(de)開源文件(jian)客(ke)戶(hu)端Mountpoint for Amazon S3(內測版),可輕松查(cha)找、訂閱和(he)使(shi)用第三方數(shu)(shu)據文件(jian)的(de)Amazon Data Exchange for Amazon S3,Amazon S3 Multi-Region Access Points支持跨多個亞馬(ma)遜云(yun)(yun)科(ke)技賬戶(hu)間(jian)復(fu)制數(shu)(shu)據集(ji),以及Aliases for S3 Object Lambda Access Points自動(dong)為客(ke)戶(hu)呈現不(bu)同的(de)數(shu)(shu)據視圖等(deng)。
Amazon S3具有(you) 99.999999999%(11 個 9)數(shu)據(ju)(ju)持久(jiu)性(xing),旨(zhi)在為客(ke)戶(hu)提供具有(you)高持久(jiu)性(xing)的數(shu)據(ju)(ju)存儲(chu)。為了(le)保(bao)護(hu)客(ke)戶(hu)數(shu)據(ju)(ju)的完整性(xing),Amazon S3 每(mei)秒執(zhi)行(xing)超過(guo) 40億(yi)(yi)次校驗和(he)計算。多(duo)年來(lai),亞馬(ma)遜云科技持續(xu)豐富(fu)Amazon S3的功能,例如推出一系列的存儲(chu)類(lei)(lei),更經濟(ji)、高效地存儲(chu)客(ke)戶(hu)的數(shu)據(ju)(ju)。每(mei)天,客(ke)戶(hu)平均(jun)從 S3 Glacier Flexible Retrieval 和(he) S3 Glacier Deep Archive 存儲(chu)類(lei)(lei)中(zhong)恢復超過(guo)1PB數(shu)據(ju)(ju)。自推出 Amazon S3 Intelligent-Tiering 以(yi)來(lai),客(ke)戶(hu)使用(yong)(yong)該功能已經節省了(le) 10 億(yi)(yi)美元。2015 年,我(wo)們增加了(le)跨區域復制(zhi)數(shu)據(ju)(ju)的可能性(xing)。每(mei)周,Amazon S3 Replication都會(hui)移動超過(guo)100PB的數(shu)據(ju)(ju)。Amazon S3是(shi)數(shu)十萬個數(shu)據(ju)(ju)湖的核心。同時(shi)也(ye)成(cheng)為無(wu)(wu)服務器應(ying)(ying)用(yong)(yong)程序(xu)(xu)的關鍵組成(cheng),Amazon S3 每(mei)天向(xiang)無(wu)(wu)服務器應(ying)(ying)用(yong)(yong)程序(xu)(xu)發(fa)送(song)超過(guo)1,250億(yi)(yi)個事(shi)件通知。
我們持(chi)續基于(yu)客(ke)戶需求進(jin)行創新(xin),在(zai)Amazon S3 17周年之(zhi)際,我們推(tui)出諸多Amazon S3相關(guan)新(xin)的服務及(ji)功能,幫助客(ke)戶更方便的存儲、查(cha)詢、復制數據。
Mountpoint for Amazon S3(內測版):Amazon S3 的開源文件客戶端
Mountpoint for Amazon S3 是 Amazon S3 的開源文(wen)(wen)件客戶(hu)端(duan),客戶(hu)可(ke)以(yi)將其安裝在計(ji)算實(shi)例上(shang)。它將本(ben)地(di)文(wen)(wen)件存儲(chu) API 調用(yong)轉換為對 Amazon S3 中對象的 REST API 調用(yong)。客戶(hu)使用(yong) Mountpoint for Amazon S3 時,使用(yong)文(wen)(wen)件 API 訪問對象的數據湖應(ying)用(yong)程序(xu)可(ke)以(yi)實(shi)現(xian)較高的單實(shi)例傳輸(shu)速率,從而節(jie)省計(ji)算成本(ben)。
客(ke)戶(hu)可以通過在計算(suan)實例(li)的(de)本(ben)地掛(gua)載點安(an)裝 Amazon S3 存儲(chu)桶開始使用(yong) Mountpoint for Amazon S3。掛(gua)載后,應用(yong)程(cheng)序將對(dui)象(xiang)讀(du)取為本(ben)地可用(yong)的(de)文件。Mountpoint for Amazon S3 支(zhi)持對(dui)現有 S3 對(dui)象(xiang)執行順序和(he)隨機讀(du)取操作(zuo)。它可以作(zuo)為內(nei)測版下載用(yong)于(yu) Linux 操作(zuo)系統,尚不適用(yong)于(yu)生產(chan)工作(zuo)負載。我們希(xi)望能收(shou)集更多客(ke)戶(hu)反饋,進一步改進我們的(de)設計和(he)實施。欲開始使用(yong),客(ke)戶(hu)可訪問 Mountpoint for Amazon S3 GitHub 存儲(chu)庫(ku),閱讀(du)技術發布博客(ke)。
推出Amazon Data Exchange for Amazon S3
Amazon Data Exchange for Amazon S3 使(shi)(shi)客戶能夠輕松查找、訂閱(yue)和(he)(he)使(shi)(shi)用第(di)三(san)方數據(ju)(ju)文(wen)件(jian),從而更快地獲得(de)見解、優化(hua)存儲(chu)(chu)成本、簡(jian)化(hua)數據(ju)(ju)許可(ke)管理等。Data Exchange 訂閱(yue)用戶可(ke)以直接(jie)使(shi)(shi)用數據(ju)(ju)提供(gong)商的 Amazon S3 存儲(chu)(chu)桶中的文(wen)件(jian),通過亞馬(ma)遜云科技的服(fu)務進行分析,無需創建或管理其(qi)賬戶的副本。數據(ju)(ju)提供(gong)商可(ke)以許可(ke)對(dui)其(qi) Amazon S3 存儲(chu)(chu)桶中托管的數據(ju)(ju)進行就(jiu)地訪問。要詳細了解數據(ju)(ju)提供(gong)商如何簡(jian)化(hua)和(he)(he)擴展(zhan)對(dui)多個數據(ju)(ju)訂閱(yue)用戶的訪問管理,可(ke)以閱(yue)讀此博客。
Amazon S3 Multi-Region Access Points多區域接(jie)入點(dian)現(xian)已支持跨多個亞(ya)馬遜云(yun)科(ke)技賬戶復制數據集
我們于2021年9月推出(chu)了Amazon S3多(duo)(duo)區域(yu)接入點(dian),并(bing)于2022年11月增(zeng)加了故障(zhang)切換(huan)控制。Amazon S3 多(duo)(duo)區域(yu)接入點(dian)現(xian)在支持在多(duo)(duo)個亞馬(ma)遜云(yun)科(ke)技賬戶(hu)(hu)之間復制數(shu)據集。該功能簡化了跨(kua)區域(yu)或者跨(kua)賬號的(de)對象存儲訪問(wen),無需在應用程(cheng)序中開發(fa)復雜(za)的(de)請求路(lu)由(you)(you)(you)邏輯。它們為(wei)客戶(hu)(hu)的(de)跨(kua)多(duo)(duo)區域(yu)應用程(cheng)序提供單(dan)一的(de)全局接入點(dian),并(bing)根(gen)據客戶(hu)(hu)定義的(de)策(ce)略動態路(lu)由(you)(you)(you) S3 請求。這(zhe)可以幫(bang)助客戶(hu)(hu)輕松實現(xian)多(duo)(duo)區域(yu)韌性(xing)、基(ji)于延遲的(de)路(lu)由(you)(you)(you)和(he)故障(zhang)切換(huan),即(ji)使客戶(hu)(hu)的(de)數(shu)據存儲在多(duo)(duo)個亞馬(ma)遜云(yun)科(ke)技賬戶(hu)(hu)中也是如此。客戶(hu)(hu)可以在 Amazon S3 常見問(wen)題中了解(jie)相關更多(duo)(duo)信息。
將Aliases for S3 Object Lambda Access Points作為Amazon CloudFront分發源
亞馬遜云科技在(zai)2021年3月(yue)推(tui)出Amazon S3 Object Lambda ,允許(xu)客戶將自己的(de)代碼添(tian)加(jia)到 S3 GET、HEAD 和 LIST API 請(qing)求中,以(yi)便在(zai)數(shu)據(ju)返(fan)回到應用(yong)程序時對(dui)其(qi)進行修改。Aliases for S3 Object Lambda Access Points的(de)推(tui)出讓(rang)任(ren)何需要 S3 存(cun)儲桶名稱的(de)應用(yong)程序都可(ke)以(yi)根據(ju)請(qing)求者輕松呈現不(bu)同的(de)數(shu)據(ju)視(shi)圖(tu)。現在(zai),客戶可(ke)以(yi)使用(yong) Aliases for S3 Object Lambda Access Points作為 Amazon CloudFront 的(de)分發源,以(yi)修改所請(qing)求的(de)數(shu)據(ju)。例如(ru),客戶可(ke)以(yi)根據(ju)用(yong)戶訪(fang)問(wen)時使用(yong)的(de)設備(例如(ru)臺式機或智能手機)動(dong)態轉換圖(tu)像。