不断增加的数据会给企业带来很多问题,因为数据不仅仅是简单的存储在物理介质上,还有大量的问题需要业务层关注。
一是敏捷和成本,如何处理海量数据增长导致的成本快速增加和数据存储服务敏捷性能之间的深层次矛盾;二是数据多样化的需求,如何设计不同的存储服务来满足不同业务的需求;第三,数据安全和数据合规。

亚马逊云技术在2006年推出的第一项服务是存储服务亚马逊S3。截至目前,亚马逊云技术16年来已经形成了完整而强大的存储服务阵容。亚马逊云技术的存储服务“Family Bucket”涵盖对象存储、块存储、文件存储、备份、容灾、数据传输和边缘处理。
亚马逊云技术大中华区产品部总经理陈表示,亚马逊云技术在存储领域不断创新,以应对数据爆炸带来的三大技术挑战。一、智能分层:通过智能分层解决成本和敏捷性的矛盾;二、专项建设:根据不同企业的应用场景,开发专项云存储服务,满足不同应用的数据存储需求;第三,统一数据保护,通过一站式备份软件解决云数据备份需求。
陈肖剑,亚马逊科技大中华区产品部总经理
智能分层
随着数据量的增加,存储的成本必然会上升。这时候,是牺牲成本来维持一定的读写性能,还是牺牲读写性能来保证成本不会大幅上升,就成了企业的一大挑战。陈指出,亚马逊云技术16年来做的非常重要的工作就是不断优化成本。
亚马逊的成本在下降。以S3标准频繁接入层为例,16年价格下降了7倍。2021年12月,宣布S3标准非频繁接入层和S3单区非频繁接入层存储价格将在全球9个地区再降31%。
亚马逊技术开发了多达八个存储层,以满足热、暖、冷、冻等不同的访问层,并应对企业业务不同的数据访问频率,同时兼顾性能和数据存储成本。
在去年的re:Invent大会上,亚马逊云技术推出了亚马逊S3冰川即时检索归档存储,重新定义了归档存储,实现了归档数据的低成本快速检索,为音视频、手机相册、日志档案、图片资料等每季度访问一次、需要毫秒级检索的海量数据提供低成本存储分层。凭借与亚马逊S3冰川相当的定价,毫秒级的检索性能,用户可以将冷数据视为热数据,保证三个可用区域11个9的数据持久性。
针对数据冷热问题,2018年,亚马逊云技术推出亚马逊S3智能分层功能,针对访问模式未知的海量数据。Amazon可以在不同的存储层之间自动移动数据,实现高达68%的成本节约。国内某互联网公司,在数据访问性能不变的情况下,智能分层数十Pb的数据,节省了62%的成本。

此外,继亚马逊S3之后,数据分层首次扩展到文件存储亚马逊EFS。亚马逊EFS提供四个存储级别,可以节省高达72%的存储成本。
专业化建设
在这个阶段,数据的类型很多,可以分为两类:云原生的现代应用和传统的云企业应用。
对于云原生现代应用,如网站托管、数据湖、数字营销、云相册、音视频分享、电子商务平台、社交媒体等应用,客户可以使用亚马逊S3和云原生无服务器文件存储亚马逊EFS。
端云企业应用,如ERP/CRM、数据库、自动驾驶、生命科学、混合云、仿真、天气分析、EDA、视频渲染等。亚马逊云技术提供亚马逊EBS IO2 BX和亚马逊FSx系列服务。亚马逊EBS IO2 BX是为离线数据中心的SAN存储上运行的应用程序而设计的。
“企业应用程序主要分为四类:基于Windows的应用程序、高性能计算、各种企业应用程序和大数据环境。所以亚马逊云技术打造了亚马逊FSx家族,这是一个专门为各种企业应用打造的共享文件存储。”陈对说:
FSX =文件系统,X表示多种文件存储选项,专为企业的不同业务需求而构建。
亚马逊FSx for Windows文件服务器于2018年11月推出,完美支持Windows服务器工作负载。
2021年11月,面向HPC计算密集型工作负载发布了新一代亚马逊FSx for Lustre,帮助客户快速完成高性能计算,如基因测序、新药研发、自动驾驶模拟、半导体设计等任务。

用于Lustre的新一代亚马逊FSx包括两大功能。首先,与当前一代相比,它提供了5倍的吞吐量,以及各种数据库、计算和存储网关。提供图形管理控制台,提供基于策略的备份解决方案,并简化备份管理。通过集中式备份监控和日志记录以及数据安全和权限管理服务,确保备份数据的安全性和合规性。通过对热数据和冷数据进行分层来降低成本。
亚马逊为关键数据提供可靠保护,包括:所有备份数据支持KMS加密;备份操作权限和数据访问权限可以通过IAM细粒度授权;亚马逊备份的数据集中备份和备份库锁定功能,可以有效防止勒索软件的攻击,将生产数据备份到备份库中,设置备份库锁定功能,备份库中的数据不会被病毒或恶意操作更改或删除。备份库支持热和冷分层。最近的备份数据存储在热备份库中,一周或一个月后的数据可以根据策略自动迁移到冷备份库中。冷备份库的价格是热备份库的20%。
澳大利亚领先的独立油气生产商桑托斯(Santos)采用了亚马逊备份,不仅备份时间减少了80%,相关运营成本也降低了50%。最重要的是,备份任务的成功率从80%提高到100%,完全满足了合规性要求。
写在最后
亚马逊技术存储服务已经成为IT行业的“水”和“电”,使各行各业的企业都能从存储服务中获得价值。目前亚马逊云技术依然保持着Day1的这种心态,把自己当成2006年3月14日发布的第一个存储服务。还有很多新功能有待开发,为用户带来更多价值。


