智能制造網(wǎng)APP
智能制造網(wǎng)手機(jī)站
智能制造網(wǎng)小程序
智能制造網(wǎng)官微
智能制造網(wǎng)服務(wù)號
智能控制
機(jī)器人
儀器儀表
物聯(lián)網(wǎng)
3D打印
工業(yè)軟件
回放
可再生能源的替代能源如風(fēng)能、太陽能和流體動力學(xué)工業(yè)油壓制動器
品牌
6月11日消息，根據(jù)國際調(diào)研機(jī)構(gòu) IDC 發(fā)布的《數(shù)據(jù)時代2025》預(yù)測，全球數(shù)據(jù)總量將從 2018年的33ZB 增至 2025 年的175ZB，增長超過5倍。
中國電子信息產(chǎn)業(yè)發(fā)展研究院發(fā)布的《中國數(shù)字經(jīng)濟(jì)發(fā)展現(xiàn)狀與趨勢洞察》顯示，中國已成為數(shù)據(jù)量最大、數(shù)據(jù)類型最豐富的國家之一。預(yù)計到2025年，中國數(shù)據(jù)總量在全球占比將接近30%。
數(shù)據(jù)總量、數(shù)據(jù)類型如此之多，可謂“橫看成嶺側(cè)成峰，遠(yuǎn)近高低各不同”。面對紛繁的數(shù)據(jù)，存儲能力作為云廠商的基本功如何創(chuàng)新升級？近期，亞馬遜云科技大中華區(qū)產(chǎn)品部總經(jīng)理陳曉建分享了亞馬遜云科技在存儲領(lǐng)域的實踐創(chuàng)新。
在陳曉建看來，數(shù)據(jù)快速增長給存儲帶來三方面新挑戰(zhàn)：
第一、敏捷和成本之間的平衡。市場上更快的數(shù)據(jù)存取服務(wù)往往需要更高的費用來獲取，如何應(yīng)對海量數(shù)據(jù)增長所帶來的成本急速上升與數(shù)據(jù)存儲服務(wù)敏捷性能之間根深蒂固的矛盾。
第二，數(shù)據(jù)本身多樣化的需求。企業(yè)業(yè)務(wù)數(shù)據(jù)來自于各個渠道，各業(yè)務(wù)數(shù)據(jù)本身性質(zhì)不同，使用方式也不一樣，如何設(shè)計不同的存儲服務(wù)滿足不同業(yè)務(wù)的需求？
第三，數(shù)據(jù)安全與合規(guī)的問題。
面對這三個挑戰(zhàn)，亞馬遜云科技通過三種不同對策來解決：
第一，智能分層。通過智能分層徹底解決數(shù)據(jù)的成本和數(shù)據(jù)的可用性、敏捷性之間的矛盾。
第二，專門構(gòu)建。開發(fā)多種針對于不同場景下數(shù)據(jù)應(yīng)用的存儲產(chǎn)品來解決企業(yè)應(yīng)用多種多樣，需求各有不同的問題。
第三，統(tǒng)一數(shù)據(jù)保護(hù)。通過一站式云服務(wù)備份系統(tǒng)，解決數(shù)據(jù)安全合規(guī)的問題，同時也解決數(shù)據(jù)備份所帶來成本增加的問題。
數(shù)據(jù)有冷熱 智能分層
從8層對象存儲Amazon S3 到4層文件存儲Amazon EFS
2006年3月14日亞馬遜云科技推出第一個對象存儲產(chǎn)品Amazon S3，至今已經(jīng)整整16年。
陳曉建稱：“談到數(shù)據(jù)存儲，每個用戶都會關(guān)心成本。16年來Amazon S3非常重要的工作就是不斷優(yōu)化成本，為用戶節(jié)約存儲所需要花的錢。16年間，整個存儲成本降低了大約7倍，一份數(shù)據(jù)在2006年的時候如果需要100塊錢存儲的話，到今天只需要花15塊錢。”
Amazon S3如何做到節(jié)省成本的同時又不能影響到用戶的數(shù)據(jù)存儲體驗？
陳曉建介紹，將數(shù)據(jù)按照訪問頻度，即冷熱程度(訪問越頻繁則越熱)進(jìn)行智能分層來存儲，是數(shù)據(jù)存儲“降成本”和“保敏捷”非常重要的一個解決方法。
在過去一年，亞馬遜云科技進(jìn)一步細(xì)化其對象存儲服務(wù)Amazon S3的存儲層級。2021年12月份推出了革命性新產(chǎn)品Amazon S3 Glacier Instant Retrieval。它的價格和普通Glacier產(chǎn)品相當(dāng)，但是它的用戶數(shù)據(jù)的取回速度升級至毫秒級。
“我們估算發(fā)現(xiàn)，客戶如果將每年僅訪問幾次的數(shù)據(jù)從 Amazon S3 Standard-IA 遷移到Amazon S3 Glacier Instant Retrieval ，可節(jié)省高達(dá)近70%的存儲成本”，陳曉建舉例表示，有了Amazon S3 Glacier Instant Retrieval，用戶數(shù)據(jù)存儲可以兼顧低成本和高性能。
隨著Amazon S3 Glacier Instant Retrieval的推出，至此，Amazon S3的存儲層級達(dá)到8級。
Amazon S3存儲層級如此之多，新的問題隨之而來：對于普通用戶而言又該如何因應(yīng)自身業(yè)務(wù)需要來選擇最合適的存儲層級呢？
為了幫助用戶判斷數(shù)據(jù)的溫度，實現(xiàn)根據(jù)數(shù)據(jù)溫度的變化進(jìn)行存儲策略調(diào)整，2018年亞馬遜云科技推出Amazon S3智能分層服務(wù)，它會對每一份數(shù)據(jù)的實際訪問頻率做智能分析，再自動判斷把數(shù)據(jù)分到合適的存儲層級，徹底解決用戶的存儲選擇困惑。
另外，亞馬遜云科技還將這一“智能分層思路”擴(kuò)展至云原生文件存儲Amazon EFS。
據(jù)陳曉建介紹，目前Amazon EFS提供了四種存儲等級分層，客戶可以制定數(shù)據(jù)生命周期策略，將數(shù)據(jù)移動到非頻繁訪問層，需要訪問時可以自動移動數(shù)據(jù)到標(biāo)準(zhǔn)層，通過這項分層存儲功能，可幫助客戶節(jié)省高達(dá)72%的存儲成本。
專門構(gòu)建
不同數(shù)據(jù)類型的來源不同、使用方式不一樣、用戶需求也不同。陳曉建表示，亞馬遜云科技的應(yīng)對策略是專門構(gòu)建不同的云存儲服務(wù)。目前，亞馬遜云科技存儲服務(wù)已經(jīng)覆蓋了對象存儲、塊存儲、文件存儲、數(shù)據(jù)備份、數(shù)據(jù)容災(zāi)、以及數(shù)據(jù)傳輸與邊緣處理各個方面，用戶可根據(jù)自身需求靈活選擇。
為了幫助用戶應(yīng)對不同工作負(fù)載，在云端輕松且經(jīng)濟(jì)地啟動和運行主流的文件系統(tǒng)，亞馬遜云科技在過去一年不斷豐富“專門構(gòu)建”的Amazon FSx文件存儲系列服務(wù)，在Amazon FSx for Windows File Server基礎(chǔ)上，新推出新一代Amazon FSx for Lustre、基于開源OpenZFS 文件系統(tǒng)構(gòu)建的Amazon FSx for OpenZFS以及云上首個完整且全面托管NetApp ONTAP文件存儲系統(tǒng)的Amazon FSx for NetApp ONTAP。
其中新一代Amazon FSx for Lustre跟上一代相比，能夠更好地支持HPC計算密集型工作負(fù)載，可提供5倍于前一代服務(wù)的單位存儲吞吐量，每TB存儲的吞吐量高達(dá)1GB/秒。Amazon FSx for OpenZFS基于開源的OpenZFS 文件系統(tǒng)構(gòu)建，適用于對可擴(kuò)展性、性能和成本效率要求較高的工作負(fù)載，如機(jī)器學(xué)習(xí)、電子芯片設(shè)計自動化、應(yīng)用程序構(gòu)建環(huán)境、媒體處理和金融分析等。
統(tǒng)一數(shù)據(jù)保護(hù)
在存儲數(shù)據(jù)的保護(hù)方面，Amazon Backup可統(tǒng)一保護(hù)用戶應(yīng)用程序的數(shù)據(jù)，跨越亞馬遜云科技的計算、數(shù)據(jù)庫以及文件，對象和塊存儲服務(wù)。
陳曉建稱，在過去一年，亞馬遜云科技將Amazon Backup擴(kuò)展至Amazon S3和VMware工作負(fù)載，讓用戶使用統(tǒng)一的數(shù)據(jù)保護(hù)策略，即可配置、管理和監(jiān)督數(shù)據(jù)的備份與恢復(fù)，此外還涵蓋Amazon Elastic Compute Cloud (Amazon EC2)、 Amazon EBS、Amazon Relational Database Service (Amazon RDS)、Amazon Aurora、Amazon DynamoDB、Amazon DocumentDB、Amazon Neptune、Amazon FSx、Amazon EFS和Amazon Storage Gateway。用戶還可以使用Amazon Backup Audit Manager生成審計報告來幫助其滿足合規(guī)要求，并使用Amazon Backup中內(nèi)置的細(xì)粒度訪問控制以及Amazon Backup Vault Lock，保持備份不變，防止意外或惡意刪除。
“2006年到今天整整16年時間，我們持續(xù)了解客戶訴求并進(jìn)行科技創(chuàng)新。僅2021年一年亞馬遜云科技在存儲方面就頒布了130多項新的特性和功能”，陳曉建總結(jié)道，亞馬遜云科技存儲服務(wù)已經(jīng)成為IT行業(yè)的“水”和“電”，讓各行各業(yè)的業(yè)務(wù)都能從存儲服務(wù)中獲得價值。
原標(biāo)題：亞馬遜云科技陳曉建：數(shù)據(jù)也有冷熱，如何存儲才能更省更快？
浙公網(wǎng)安備 33010602000006號
智能制造網(wǎng)APP
智能制造網(wǎng)小程序
微信公眾號
