首页 > 热点 >

亚马逊云科技陈晓建:数据也有冷热,如何存储才能更省更快?

发布时间:2022-12-06 12:37      来源:TechWeb  阅读量:10460  会员投稿

根据国际调研机构IDC发布的《数据时代2025》,全球数据量将从2018年的33ZB增长到2025年的175ZB,增长超过5倍。

亚马逊云科技陈晓建:数据也有冷热,如何存储才能更省更快?

中国电子信息产业发展研究院发布的《中国数字经济发展现状及趋势洞察》显示,中国已成为数据量最大,数据类型最丰富的国家之一预计到2025年,中国的数据总量将占全球的近30%

数据总量和类型之多,可谓看做边上的一座山峰,距离不同面对海量数据,作为云厂商的基本功,如何创新升级存储容量最近几天,亚马逊云技术大中华区产品部总经理陈分享了亚马逊云技术在存储领域的实践创新

在陈看来,数据的快速增长给存储带来了三大新挑战:

首先,敏捷性和成本之间的平衡市场上更快的数据访问服务通常需要更高的费用来获得如何处理海量数据增长导致的成本快速增加与数据存储服务的敏捷性能之间的深层次矛盾

第二,数据本身多样化的需求如何设计不同的存储服务来满足不同业务的需求

第三,数据安全合规的问题。

面对这三个挑战,亚马逊云技术通过三种不同的对策来解决它们:

第一,智能分层通过智能分层,可以彻底解决数据成本,数据可用性和敏捷性之间的矛盾

第二,特殊施工针对不同场景的数据应用开发多种存储产品,解决各种企业应用和不同需求的问题

第三,统一数据保护通过一站式云服务备份系统,解决了数据的安全性和合规性问题,也解决了数据备份带来的成本增加问题

冷热数据的智能分层

从8层对象存储亚马逊S3到4层文件存储亚马逊EFS

日前,亚马逊云技术推出首款对象存储产品亚马逊S3,至今已有16年。

陈对说:说到数据存储,每个用户都会关心成本在过去的16年里,亚马逊S3非常重要的工作就是不断优化成本,为用户节省存储费用16年来,整个存储成本降低了7倍左右在2006年,如果一个数据需要存储100元,今天只需要15元

亚马逊如何在不影响用户数据存储体验的情况下节约成本。

陈介绍,将数据按照访问频率即冷热程度存储在智能层,就是数据存储降低成本和敏捷一个非常重要的解决方案

在过去的一年中,亚马逊云技术进一步完善了其对象存储服务亚马逊S3的存储层次结构2021年12月,一款革命性的新产品亚马逊S3冰川即时检索推出其价格与普通冰川产品相当,但其用户数据的检索速度升级到毫秒级

我们估计,通过将一年只访问几次的数据从亚马逊S3标准—IA迁移到亚马逊S3冰川即时检索陈举例说,表示,有了亚马逊冰川即时检索,用户数据存储可以兼顾低成本和高性能。

伴随着亚马逊S3冰川即时检索的推出,亚马逊S3的存储水平已经达到了8级。

亚马逊的存储层如此之多,一个新的问题产生了:普通用户如何根据自己的业务需求选择最合适的存储层。

为了帮助用户判断数据的温度,并根据数据温度的变化调整存储策略,亚马逊云技术在2018年推出了亚马逊S3智能分层服务,该服务将智能分析每一个数据的实际访问频率,进而自动判断要分类到合适存储级别的数据,彻底解决用户的存储选择困惑。

另外,亚马逊云技术也会把这个等级思维扩展到云原生文件存储亚马逊EFS。

据陈介绍,亚马逊目前提供四个存储层客户可以制定数据生命周期战略,将数据移动到不常访问的层,并在需要访问时自动将数据移动到标准层通过这种分层存储功能,客户可以节省高达72%的存储成本

专业化建设

为了帮助用户应对不同的工作负载,轻松经济地在云端启动和运行主流文件系统,亚马逊云技术在过去一年不断丰富建立一个特殊的在基于开源文件系统的亚马逊FSx for Windows File Server,亚马逊FSx for Lustre,亚马逊FSX for OpenZFS,首款亚马逊FSX for NetApp ONTAP,将NetApp ONTAP文件存储系统完全,完整托管在云端的基础上,

与上一代相比,新一代Amazon FSx for Lustre可以更好地支持HPC计算密集型工作负载,提供5倍于上一代服务的单位存储吞吐量,每TB存储的吞吐量高达1GB/ s,Amazon FSx for OpenZFS基于开源的OpenZFS文件系统构建,适用于对可扩展性,性能和成本效率有较高要求的工作负载,如机器学习,电子芯片设计自动化,应用构建环境,媒体处理和金融分析等。

统一数据保护

在存储数据保护方面,亚马逊备份可以统一保护用户应用的数据,横跨亚马逊云技术的计算,数据库和文件,对象和块存储服务。

陈表示,在过去的一年中,亚马逊云技术将亚马逊备份扩展到亚马逊和VMware工作负载,允许用户通过使用统一的数据保护策略来配置,管理和监督数据备份和恢复它还涵盖了亚马逊弹性计算云,亚马逊EBS,亚马逊关系数据库服务,亚马逊Aurora,亚马逊DynamoDB,亚马逊DocumentDB,亚马逊Neptune,亚马逊FSx,亚马逊EFS和亚马逊存储网关用户还可以使用Amazon Backup Audit Manager生成审计报告,帮助他们满足合规性要求,并使用Amazon Backup内置的细粒度访问控制和Amazon Backup Vault Lock来保持备份不变,防止意外或恶意删除

从2006年到今天,16年来,我们一直在不断了解客户需求,进行技术创新仅在2021年,亚马逊云技术就在存储方面颁布了130多项新特性和功能陈总结说,亚马逊云技术存储服务已经成为IT行业的Rdquo和Rdquo,让各行各业的企业都能从存储服务中获得价值

(责编:文辉)

郑重声明:此文内容为本网站转载企业宣传资讯,目的在于传播更多信息,与本站立场无关。仅供读者参考,并请自行核实相关内容。

最新资讯