适用于您的数据的理想 Amazon S3 存储类 – 快速指南

适用于您的数据的理想 Amazon S3 存储类 | 兹曼达

为您的数据存储要求找到合适的 Amazon AWS S3 存储类对于确保成本优化至关重要。 了解存储类之间的差异并权衡它们的特性可以帮助您为数据确定正确的存储类。 在此博客中,您将了解如何针对特定用例利用每个 Amazon S3 存储类以及正确的 EBR 解决方案。

在执行备份时,您可以充分利用这些不同的存储类别。 如果您可以直接从备份和恢复解决方案本身配置存储,那么存储配置将更容易处理,就像 Zmanda EBR 解决方案允许您这样做一样。 Zmanda 允许您在 AWS S3 中备份多达五个存储类别。 让我们通过 Zmanda 的强大备份支持来探索 AWS S3 存储类的优势。

我们的博客 亚马逊概览 将帮助您更好地了解其存储类。 所以,如果您是我们的新手 AWS系列,我们建议您快速阅读本系列的上一篇博客。

AWS S3 中的存储类型

单一类型的云存储无法满足现代企业的存储需求。 仅使用一种云存储类型很难实现成本优化,因此 AWS S3 可根据您的不同需求提供选择。

有些数据会被频繁访问,例如您每次付款时都会用到的信用卡密码,而其他数据则很少被访问,例如您童年的照片。 还创建了 AWS 存储类来满足此类不同的访问需求。

每次开始备份时将特定数据存储到特定存储类听起来工作量很大,不是吗? 那么,幸运的是,Zmanda 允许您配置 AWS S3 存储类以直接从 Zmanda管理控制台 (ZMC) 本身。

要为您的实施选择正确的 AWS S3 存储类,必须更好地了解 AWS S3 的存储类。 要理解这一点,我们首先要了解如何根据响应时间对数据处理进行分类。  

数据处理根据响应时间分为三种类型。 他们是:

  • 即时的: 当立即需要数据处理结果时使用。 例如,假设您对软件的免费试用施加限制。 在这种情况下,您将需要知道试用用户何时立即用完他们的配额,而不是稍后。
实时
  • 近实时:  当很快但不是立即需要数据处理结果时使用。 在近乎实时的数据处理中,结果反映的是最近的数据,而不是现在的数据。 举例来说,在获得从数据集中识别销售线索的运营情报的情况下。 确定那些更有可能购买的销售线索,然后关注他们,而不是关注每一个线索。
  • 批次:  当不需要立即获得数据处理结果时使用,可以接受数小时或数天的延迟。 例如,在按月周期完成的工资单活动的情况下。

如果将 Zmanda 支持的 AWS S3 存储类分为实时类和准实时类,则如下所示:

实时(毫秒访问)近实时
S3标准S3 Glacier 灵活检索(1 分钟到 12 小时)
S3 标准-不频繁访问
S3 One Zone-不常访问
S3 减少冗余存储

以上分类只是按照访问次数来分类。 如前所述,当您将 AWS S3 用作 ZMC 中的目标时,您可以选择要备份到的存储类别。 这种 AWS S3 选项配置的便利性使 Zmanda 真正以用户为中心。

备份到云端时,良好的互联网连接是不容妥协的。 但是,如果您的互联网不断断断续续,我们的 云备份稳定性 功能将使您的备份和恢复运行而不会出现任何问题。 您可以放心,琐碎的连接问题不会妨碍您的备份和恢复过程。 此功能无需您干预,由 Zmanda 自动启用。

S3标准

S3 标准是所有对象的默认存储类。 如果在上传到 S3 的过程中没有指定任何存储类,数据将自动存储在 S3 标准中。 为了实现高持久性 (99.999999999%),存储在 S3 Standard 上的数据至少存储在三个可用区中。 这 高度灵活 支持同地域复制或跨地域复制。 因此,即使整个可用区出现故障,您的数据安全也能得到保证。 它支持实时访问,是最昂贵的存储类。 您需要按每 GB 的存储和 API 调用付费。

因此,您已经将大部分预算花在了 AWS S3 上,而且您的预算很紧张。 但是在备份和恢复解决方案上妥协不是一种选择。 在这种情况下,Zmanda 将使您能够毫无妥协地充分利用 AWS S3 支出。 仅仅因为 S3 标准很昂贵,您的备份解决方案(阅读 Zmanda)就不必太贵。 Zmanda 的许可政策根据备份的端点数量向您收费。 您可以选择备份数 TB 甚至数 PB 的数据,但 Zmanda 许可费用不会受其影响。 这使您的业务易于扩展,而无需过多考虑成本因素。

当您想要备份大量关键数据(例如动态网站、云应用程序、移动和游戏应用程序以及内容分发的数据)时,S3 标准是理想之选。 通过 Zmanda 的成本优势,您可以充分利用 AWS S3 存储。

您可以在 ZMC 上配置备份集以将您的数据备份到 S3 标准存储类。 这消除了协调 ZMC 和 AWS S3 屏幕之间的开销。 您可以在“存储”页面上执行此操作。

AWS S3 的云存储下拉菜单
ZMC 中 AWS S3 的存储选项下拉列表

接下来,我们将了解 S3 Standard Infrequent Access (S3 IA) 存储类

S3 标准不频繁访问 (S3 IA)

S3 IA 存储类适用于可能每月或每年访问一次,但在访问时立即需要它的数据。 即使访问不频繁,存储在 S3 IA 中的数据也可以立即访问,即以毫秒为单位。 与 S3 标准相比,您需要支付的每 GB 存储费用更低。 但是,您需要支付每 GB 的检索费用。

它可以帮助您降低成本,同时长期存储不常访问的数据。 因此,S3 IA 是长期存储和灾难恢复用例的理想选择。

为了简化 AWS S3 UI 和 Zmanda UI 之间的协调,ZMC 上的存储页面允许您设置数据备份,以便它们发生在 S3 标准 IA 存储类中。

什么是 S3 生命周期策略?

S3 生命周期策略 允许您配置 AWS 应如何处理存储在 S3 中的对象,具体取决于对象的年龄。 通过 S3 生命周期策略,您可以将对象移动到另一个存储类、将其存档,甚至可以在特定时间段(例如 30 天)后将其删除。

定义 S3 生命周期策略的优点是移动/存档/删除操作可以自动化。 这为您节省了监视对象和不时处理它们的麻烦。 Zmanda 允许您实现与我们刚刚学习的功能类似的功能。

Zmanda 中的备份配置通过 备份集. 备份集将通过七个不同的屏幕进行配置。 每个屏幕都允许您控制备份集的不同方面,例如备份什么、备份到哪里、应该如何使用暂存等。在标题为备份媒体的备份配置的最后一个屏幕上,您可以配置许多特定于媒体的选项. 可用的选项之一是 保留期限. 此选项允许您指定备份应保留多长时间。

但是,如果存储集已存档,即使数据保留期已过,也不会从 AWS S3 中删除数据。 在下面的屏幕截图中,Amazon S3 被用于永久保留的存档。

永久保留的 AWS S3
AWS S3 永久保留存档

请注意,AWS 有一些存储类转换 不支持. 例如,S3 生命周期策略不会将对象从任何存储类转换为 S3 标准或减少冗余存储 (RRS)。 此外,S3 生命周期策略转换和到期是 收费.

S3一区不频繁访问(S3一区IA)

S3 One Zone IA 适用于不太重要的数据,可能每月或每年访问一次,但当您需要访问它时,您会立即需要它。 One Zone IA 和 S3 IA 之间的区别在于没有跨多个区域的数据复制 可用区 在 One Zone IA 中。 您在 S3 One Zone IA 中存储的任何数据都存储在单个可用区中以降低成本。 它比 S20 IA 存储类便宜 3%。 这里的权衡是,如果存储数据的可用区被破坏,那么您的数据就会丢失。 因此,One Zone IA 的耐用性 在单个可用区中为 99.999999999%。

S3 One Zone IA 非常适合非关键数据,例如备份数据的额外副本或易于重新创建的数据。 同样,与 S3 IA 相比,您将按每 GB 的价格收取较低的费用,而每 GB 的检索费用与 S3 IA 相同。

如果您希望将数据备份到 S3 Standard One Zone IA 存储级别,您可以通过 ZMC(存储页面)本身轻松设置。

S3 减少冗余存储 (RRS)

S3 Reduced Redundancy Storage 适用于您可能经常访问的非关键数据。 存储在这个类中的数据有 较少的冗余 与S3 Standard相比,即RRS的耐用性为99.99%。

当您需要高可用性存储来分发可重现的内容(如处理过的数据或缩略图)时,您可以使用 RRS。 根据 AWS 的说法,S3 标准类比 RRS 更具成本效益,因此建议使用 S3 标准。 对于相同的存储量,RRS 的成本略高于 S3 标准。

如果您要通过 Zmanda 备份可复制的内容,那么使用 RRS 就不会出错。 您可以获得高度可用的 AWS 存储和 Zmanda 以用户为中心的功能(如分段上传 API)的综合优势。 ZMC 的存储屏幕将为您提供备份到 S3 减少冗余存储的必要配置选项。

S3 Glacier 灵活检索(以前称为 S3 Glacier)

S3 Glacier 灵活检索用于归档不需要立即访问的数据。 如果您需要在牺牲访问速度的同时节省资金,那么 S3 Glacier 灵活检索非常适合您。 访问速度的折衷是因为存储类数据已归档。 需要先提取数据,然后才能使用它。 因此,您通常必须等待几分钟到几小时(接近实时)才能使用它。

尽管成本低,但您仍然可以获得与 S3 标准相同的高持久性,因为存储在此类中的数据会在至少 3 个可用区之间进行复制。

备份到 S3 Glacier 灵活检索非常适合合规性原因的数据归档、涉及大量数据的灾难恢复以及异地数据存储需求。 您的存储费用将低于 S3 One Zone IA,并且批量检索是免费的。

如果您正在考虑用于长期存储的其他存储选项,那么您可能想知道如何 磁带存储 与 S3 叠加。

为了使存档更容易,Zmanda 允许您直接从 ZMC 本身启用存档到 Glacier。 在 Backup Where 页面上,您有一个 Archive to glacier 选项的复选框,包括旁边的天数。 假设您希望将存储在 AWS S3 上的数据自动存档到 AWS S3 Glacier。 在这种情况下,您需要选中该复选框并指定归档应该发生的天数。 保存此配置后,相应备份集备份的数据将自动存档在 S3 Glacier Flexible Retrieval 存储类中。 归档将在数据在 AWS S3 存储中花费指定的天数后自动发生。 因此,您不必担心将数据移动到 S3 Flexible Retrieval Glacier 存储类,因为 Zmanda 会为您做这件事。

存档到 Glacier 选项
存档到 Glacier 选项

S3 比。 胶带

随着磁带容量的发展,它相对于 S3 的成本和速度的优势不容忽视。

S3 与磁带

价格

当您选择磁带存储数据时,您将花费大量资金进行设置。 您必须购买磁带库、介质和驱动器才能进行设置。 值得庆幸的是,维护和墨盒更换成本(约 15 美元)很低。 虽然 磁带的预期寿命 在湿度受控的环境中增加,这不是必需的。

有大量数据要存储(读取 PB 级)的企业更喜欢将磁带与 Zmanda 一起使用。 一些例子是研究设施、超级计算机实验室、天气预报站和大学。 在 S3 上存储如此大量的数据成本很高,不可取。 如果将如此庞大的数据存储在S3上,所产生的成本几乎等同于一个磁带库的成本(约18,000美元)。

与一次性投资不同的是,这笔巨额成本将每月支付一次。 总而言之,如果您要长期存储大量数据,磁带优于 S3。

请注意,当您将备份保存在磁带上时,您还将负责标记磁带并使它们井井有条。 的责任 保护磁带 盗窃和物理损坏也会落在你身上。

在云方面,您不需要在前期花费太多,因为像 AWS 这样的云服务提供商将处理所有基础设施的设置和维护。 已经在使用许多 AWS 服务的企业如果使用 AWS S3 来满足其存储需求,则可以获得折扣。 一些例子包括软件公司和中小型企业。 因此,磁带和 AWS S3 都以各自的方式提供成本优势。 选择哪一个取决于您的存储需求。

迅速的

就像大多数技术一样,磁带已经发展了很多。 最新的LTO-9 支持 最大未压缩速度为每秒 400 MB,最大压缩速度为每秒 1000 MB。 磁带在未来几天只会变得更快。 如果您需要更高的速度,您可以完全灵活地升级您的磁带库。 

另一方面,AWS S3 的速度受限于您拥有的带宽。 如果您有大量数据要存储在 S3 上,投资增加带宽是明智之举。

Zmanda 允许您通过客户端并行备份优化带宽使用。 您可以通过配置备份方式页面的客户端并行备份字段来设置它。 Client Parallel Backups 字段中的值 1 将按顺序备份客户端上的所有源。 如果客户端具有必要的 CPU 和网络资源,您可以行使此选项。

请注意,客户端并行备份对于磁带存储不可行,因为它不支持并行写入。

如果您希望从 S3 进行高速检索以进行恢复,您可以将关键数据存储在高速类中。

速度方面说完了,接下来我们再分析一下安全的角度。

安保行业

AWS S3 为您提供强大的访问管理工具和加密​​来保护您的数据。 S3 阻止公共访问功能允许您在账户或存储桶级别限制对对象的公共访问。

AWS S3 允许您使用以下功能完全自由地配置谁可以访问什么:

  • 访问控制列表 授权用户访问单个对象。
  • 存储桶策略 为 Amazon S3 存储桶中的对象设置权限。
  • 查询字符串验证 通过临时 URL 为用户提供临时访问权限(有时间限制)。
  • AWS 身份和访问管理 创建用户并配置他们的访问权限。

来到磁带,你有独特的能力 气隙 你的数据。 除非正在写入或读取磁带,否则磁带不会连接到网络。 因此,所有包含您的数据的磁带都不需要一直插入驱动器中。

为了破坏存储在磁带上的数据,必须先将磁带插入驱动器。 因此,通过互联网窃取或破坏您的数据的网络罪犯将很难实现他们的目标。 为了加强保护,您可以在将数据存储到磁带之前对其进行加密。

清楚了解 AWS S3 与磁带存储后,选择适合您需求的备份目标就相对容易了。

Zmanda 的前进之路

AWS S3 存储类是独一无二的,在明智地选择时可以提供最佳服务。 现在您已经清楚地了解了 AWS S3 的每个存储类是如何独一无二的,您可以为您的备份存储调用。 一旦存储类最终确定, 兹曼达 可以为您处理配置和备份处理。

无论是磁带还是 AWS S3,还是两者的结合 3-2-1 存储策略, Zmanda 非常适合这一切。 我们用户友好的 ZMC 控制台可以在您的入围媒体和数据之间提供无缝集成。 它是满足所有备份和恢复要求的一站式目的地。

Zmanda 将继续推出新功能,使您的备份和恢复更加轻松。 客户驱动的增强功能始终是我们季度发布的一部分。 冰川存档、不可变备份、云备份稳定等,都是在开发时考虑到用户的便利性。 要了解 Zmanda 的真正多才多艺,请采取 免费试用. 如果您需要 Zmanda 方面的帮助,请随时联系我们 支持团队 或发送邮件至我们的 销售团队. 我们的专家团队将很乐意帮助您完成 Zmanda 之旅。


探索更多主题