Идеальный класс хранилища Amazon S3 для ваших данных — краткое руководство

Идеальный класс хранилища Amazon S3 для ваших данных | Зманда

Выбор подходящего класса хранилища Amazon AWS S3 для ваших требований к хранению данных имеет важное значение для обеспечения оптимизации затрат. Понимание различий между классами хранения и взвешивание их функций может помочь вам выбрать правильный класс хранения для ваших данных. В этом блоге вы узнаете, как можно использовать каждый класс хранилища Amazon S3 для конкретных случаев использования вместе с правильным решением EBR.

Вы можете максимально эффективно использовать эти разнообразные классы хранилищ при выполнении резервного копирования. С конфигурациями хранилища будет проще работать, если вы сможете настроить хранилище непосредственно из самого решения для резервного копирования и восстановления, как это позволяет решение Zmanda EBR. Zmanda предлагает вам резервное копирование до пяти классов хранилищ в AWS S3. Давайте рассмотрим сильные стороны классов хранилищ AWS S3 с надежной поддержкой резервного копирования от Zmanda.

Наш блог на Обзор AWS поможет вам лучше понять его классы хранения. Итак, если вы новичок в нашем серия AWS, мы рекомендуем вам быстро прочитать предыдущий блог в этой серии.

Типы хранилищ в AWS S3

Один тип облачного хранилища не будет соответствовать современным потребностям бизнеса в хранении данных. Трудно добиться оптимизации затрат, используя только один тип облачного хранилища, поэтому AWS S3 предлагает вам выбор в соответствии с вашими различными потребностями.

В то время как некоторые данные доступны часто, например PIN-код вашей кредитной карты, который используется каждый раз, когда вы совершаете платеж, доступ к другим данным осуществляется редко, например к вашим детским фотографиям. Классы хранилищ AWS также создаются для удовлетворения таких особых потребностей в доступе.

Хранение определенных данных в определенных классах хранилища каждый раз при запуске резервного копирования звучит как много работы, не так ли? Что ж, к счастью для вас, Zmanda позволяет настроить класс хранилища AWS S3 для резервного копирования прямо с Консоль управления Zmanda (ZMC) самостоятельно.

Чтобы правильно выбрать класс хранилища AWS S3 для своей реализации, необходимо лучше понимать классы хранилища AWS S3. Чтобы понять это, мы сначала узнаем, как классифицируется обработка данных на основе времени отклика.  

Обработка данных подразделяется на три типа в зависимости от времени отклика. Они есть:

  • В реальном времени: Это используется, когда результаты обработки данных нужны немедленно. Например, предположим, что вы устанавливаете ограничения на бесплатную пробную версию своего программного обеспечения. В этом случае вам нужно будет знать, когда пробные пользователи исчерпают свою квоту сразу, а не позже.
Переводы
  • Почти в реальном времени:  Это используется, когда результаты обработки данных нужны в ближайшее время, но не сразу. При обработке данных в режиме, близком к реальному времени, результаты отражают данные недавнего прошлого, а не настоящего. Скажем, например, в случае получения операционной аналитики, когда потенциальные клиенты распознаются из наборов данных. Выявление тех потенциальных клиентов, которые с большей вероятностью совершат покупку, а затем сосредоточьтесь на них, а не на каждом потенциальном клиенте.
  • Партия:  Это используется, когда результаты обработки данных не нужны немедленно, и допустима задержка в несколько часов или дней. Скажем, например, в случае операций по начислению заработной платы, которые выполняются в месячных циклах.

Если классы хранения AWS S3, поддерживаемые Zmanda, разделить на категории реального времени и почти реального времени, они будут выглядеть следующим образом:

В режиме реального времени (миллисекундный доступ)Почти в реальном времени
Стандарт S3Гибкое извлечение S3 Glacier (от 1 минуты до 12 часов)
S3 Standard — нечастый доступ
S3 One Zone — нечастый доступ
S3 хранилище с уменьшенной избыточностью

Приведенная выше классификация относится только к времени доступа. Как обсуждалось ранее, вы можете выбрать класс хранилища, на который хотите выполнять резервное копирование, когда используете AWS S3 в качестве цели в ZMC. Это удобство в настройке вариантов выбора AWS S3 делает Zmanda действительно ориентированным на пользователя.

При резервном копировании в облако хорошее подключение к Интернету не подлежит обсуждению. Однако, если ваш интернет периодически прерывается, наш стабильность резервных копий в облаке функция будет поддерживать ваши резервные копии и восстановление без каких-либо сбоев. Вы можете быть уверены, что тривиальные проблемы с подключением не помешают процессам резервного копирования и восстановления. Эта функция не требует вашего вмешательства и автоматически активируется Zmanda.

Стандарт S3

Стандарт S3 — это класс хранения по умолчанию для всех объектов. Если вы не укажете какой-либо класс хранения во время загрузки в S3, данные автоматически сохраняются в стандарте S3. Для обеспечения высокой надежности (99.999999999%) данные, хранящиеся в S3 Standard, хранятся как минимум в трех зонах доступности. Трансформируемость доступна репликация в одном регионе или репликация между регионами. В результате безопасность ваших данных гарантирована, даже если вся зона доступности не работает. Он поддерживает доступ в режиме реального времени и является самым дорогим классом хранения. Плата взимается за хранилище по гигабайтам и вызовы API.

Итак, вы потратили большую часть своего бюджета на AWS S3, и у вас мало средств. Но компрометировать решение для резервного копирования и восстановления нельзя. В такой ситуации Zmanda позволит вам получить максимальную отдачу от ваших расходов на AWS S3 без каких-либо компромиссов. Просто потому, что стандарт S3 дорог, ваше решение для резервного копирования (читай Zmanda) не обязательно должно быть дорогим. Политика лицензирования Zmanda взимает плату в зависимости от количества резервных копий конечных точек. Вы можете создавать резервные копии терабайтов или даже петабайтов данных, но это не повлияет на стоимость лицензирования Zmanda. Это позволяет легко масштабировать ваш бизнес, не задумываясь о факторе затрат.

Если вы хотите создать резервную копию значительного объема критически важных данных, таких как динамические веб-сайты, облачные приложения, мобильные и игровые приложения, а также распространение контента, стандарт S3 идеально подходит. Вы получаете лучшее от хранилища AWS S3 с ценовыми преимуществами Zmanda.

Вы можете настроить набор резервных копий на ZMC для резервного копирования данных в класс хранилища S3 Standard. Это устраняет накладные расходы на координацию между экранами ZMC и AWS S3. Это можно сделать на странице Хранилище.

Раскрывающийся список облачного хранилища для AWS S3
Раскрывающийся список вариантов хранения для AWS S3 в ZMC

Далее мы узнаем о классе хранилища S3 Standard Infrequent Access (S3 IA).

Стандартный нечастый доступ S3 (S3 IA)

Класс хранения S3 IA предназначен для данных, доступ к которым может осуществляться раз в месяц или раз в год, но при доступе к ним они нужны вам немедленно. Несмотря на нечастый доступ, к данным, хранящимся в S3 IA, можно получить доступ мгновенно, т. е. за миллисекунды. С вас будет взиматься более низкая цена за гигабайт хранилища по сравнению со стандартом S3. Тем не менее, вы будете обязаны платить сбор за извлечение за ГБ.

Это помогает сократить расходы, сохраняя при этом редко используемые данные в течение длительного времени. Следовательно, S3 IA идеально подходит для долгосрочного хранения и аварийного восстановления.

Чтобы упростить координацию между пользовательским интерфейсом AWS S3 и пользовательским интерфейсом Zmanda, на странице «Хранилище» в ZMC можно настроить резервное копирование данных таким образом, чтобы они выполнялись в хранилище класса S3 Standard IA.

Что такое политики жизненного цикла S3?

Политики жизненного цикла S3 позволяют настроить, как AWS должен обрабатывать объекты, хранящиеся в S3, в зависимости от их возраста. С помощью политик жизненного цикла S3 вы можете либо переместить свой объект в другой класс хранения, либо заархивировать его, либо даже удалить его по истечении определенного периода времени, например, 30 дней.

Преимущество определения политик жизненного цикла S3 заключается в том, что действия перемещения/архивирования/удаления могут быть автоматизированы. Это избавляет вас от необходимости следить за объектами и время от времени иметь с ними дело. Zmanda позволяет реализовать аналогичную функциональность, подобную той, которую мы только что изучили.

Настройка резервных копий в Zmanda происходит через резервные наборы. Набор резервных копий будет настроен с помощью семи различных экранов. Каждый экран позволяет вам управлять различными аспектами набора резервных копий, например, что резервировать, где создавать резервные копии, как следует использовать промежуточное хранение и т. д. На последнем экране конфигурации резервного копирования под названием «Резервный носитель» вы можете настроить множество параметров для конкретных носителей. . Одним из доступных вариантов является Период консервации. Этот параметр позволяет указать, как долго должны храниться резервные копии.

Однако если набор хранилищ заархивирован, данные не будут удалены из AWS S3, даже если срок хранения данных истек. На приведенном ниже снимке экрана Amazon S3 используется для архивирования с бессрочным хранением.

AWS S3 с бессрочным хранением
AWS S3 для архивирования с бессрочным хранением

Обратите внимание, что существуют некоторые переходы классов хранения, которые AWS не поддерживает. Скажем, например, политики жизненного цикла S3 не переводят объекты из любого класса хранения в стандартное хранилище S3 или хранилище с уменьшенной избыточностью (RRS). Кроме того, переходы и истечения срока действия политик жизненного цикла S3 оплата.

Нечастый доступ S3 One Zone (S3 One Zone IA)

S3 One Zone IA предназначена для менее важных данных, к которым можно обращаться раз в месяц или раз в год, но когда вам нужно получить к ним доступ, они нужны вам немедленно. Разница между One Zone IA и S3 IA заключается в отсутствии репликации данных между несколькими зонами. Зоны доступности в одной зоне IA. Все данные, которые вы храните в S3 One Zone IA, хранятся в одной зоне доступности для сокращения расходов. Это на 20% дешевле, чем хранилище класса S3 IA. Компромисс здесь заключается в том, что если зона доступности, в которой хранятся данные, будет уничтожена, ваши данные будут потеряны. Следовательно, долговечность One Zone IA составляет 99.999999999% в одной зоне доступности.

S3 One Zone IA идеально подходит для некритичных данных, таких как дополнительные копии резервных копий данных или легко воссоздаваемые данные. Здесь снова будет взиматься более низкая цена за гигабайт по сравнению с S3 IA и плата за извлечение за ГБ такая же, как у S3 IA.

Если вы хотите создать резервную копию своих данных в хранилище класса S3 Standard One Zone IA, вы можете легко настроить его через ZMC (страница хранилища).

S3 хранилище с уменьшенной избыточностью (RRS)

Хранилище с уменьшенной избыточностью S3 предназначено для некритических данных, к которым вы, вероятно, будете часто обращаться. Данные, хранящиеся в этом классе, меньшая избыточность по сравнению с S3 Standard, т. е. долговечность RRS составляет 99.99%.

Вы можете использовать RRS, когда вам нужно высокодоступное хранилище для распространения воспроизводимого контента, такого как обработанные данные или эскизы. Согласно AWS, класс S3 Standard более экономичен, чем RRS, поэтому рекомендуется использовать стандарт S3. RRS стоит немного дороже, чем стандартный S3, при том же объеме хранилища.

Если вы создаете резервную копию воспроизводимого контента через Zmanda, вы не ошибетесь с RRS. Вы получаете совокупное преимущество высокодоступного хранилища AWS вместе с ориентированными на пользователя функциями Zmanda, такими как API многокомпонентной загрузки. Экран «Хранилище» ZMC предоставит вам необходимые параметры конфигурации для резервного копирования в хранилище с уменьшенной избыточностью S3.

S3 Glacier Flexible Retrieval (ранее S3 Glacier)

S3 Glacier Flexible Retrieval предназначен для архивирования данных, к которым нет необходимости обращаться мгновенно. Если вам нужна экономия денег при снижении скорости доступа, S3 Glacier Flexible Retrieval как раз для вас. Компромисс в скорости доступа заключается в том, что данные класса хранения архивируются. Данные должны быть извлечены, прежде чем вы сможете их использовать. В результате вам обычно приходится ждать от нескольких минут до нескольких часов (почти в реальном времени), прежде чем использовать его.

Несмотря на низкую стоимость, вы по-прежнему получаете такую ​​же высокую надежность, как и стандарт S3, поскольку данные, хранящиеся в этом классе, реплицируются как минимум в 3 зонах доступности.

Резервное копирование в S3 Glacier Flexible Retrieval идеально подходит для архивации данных по соображениям соответствия требованиям, аварийного восстановления, включающего большие наборы данных, и потребностей в удаленном хранении данных. Плата за хранение будет меньше, чем в S3 One Zone IA, а массовое извлечение бесплатно.

Если вы рассматриваете другие варианты хранения для долговременного хранения, вам может быть интересно узнать, как ленточное хранилище складывается против S3.

Чтобы упростить архивирование, Zmanda позволяет включить архивирование в Glacier прямо из самого ZMC. На странице Backup Where у вас есть флажок для параметра Archive to glacier, включая количество дней рядом с ним. Предположим, вы хотите автоматически архивировать данные, хранящиеся на AWS S3, в AWS S3 Glacier. В этом случае вам необходимо установить флажок и указать количество дней, через которое должно произойти архивирование. После сохранения этой конфигурации данные, зарезервированные соответствующим набором резервных копий, будут автоматически заархивированы в класс хранения S3 Glacier Flexible Retrieval. Архивирование произойдет автоматически после того, как данные проведут указанное количество дней в хранилище AWS S3. Следовательно, вам не нужно беспокоиться о перемещении данных в класс хранилища S3 Flexible Retrieval Glacier, так как Zmanda сделает это за вас.

Архивировать в Glacier
Архивировать в Glacier

S3 Против. Лента

Учитывая то, как увеличилась емкость лент, невозможно игнорировать преимущества, которые они предлагают по сравнению со стоимостью и скоростью S3.

S3 против ленты

Цена

Когда вы выбираете ленту для хранения своих данных, вы потратите много денег на ее настройку. Для установки необходимо купить ленточную библиотеку, носители и дисководы. К счастью, затраты на техническое обслуживание и замену картриджа (приблизительно 15 долларов США) невелики. Хотя срок службы ленты увеличивается в среде с регулируемой влажностью, это не является необходимостью.

Предприятия, которые должны хранить много данных (читай петабайты), предпочитают использовать ленту с Zmanda. Некоторыми примерами являются исследовательские центры, суперкомпьютерные лаборатории, станции прогноза погоды и университеты. Хранение таких огромных объемов данных на S3 будет стоить дорого и нецелесообразно. Если такие огромные объемы данных будут храниться на S3, понесенные затраты будут почти равны стоимости библиотеки смены ленты (примерно 18,000 XNUMX долларов США).

Эти огромные затраты будут применяться каждый месяц, в отличие от ленты, где это единовременное вложение. Подводя итог, можно сказать, что если вы храните большие объемы данных в течение длительного времени, ленты лучше, чем S3.

Обратите внимание, что при сохранении резервной копии на лентах вы также несете ответственность за маркировку лент и их организацию. Ответственность защита лент от кражи и физических повреждений тоже ляжет на вас.

Что касается облака, вам не нужно вкладывать большие средства, поскольку поставщики облачных услуг, такие как AWS, возьмут на себя всю настройку и обслуживание инфраструктуры. Предприятия, которые уже используют многие сервисы AWS, могут получить скидки, если они используют AWS S3 для своих потребностей в хранении. Некоторые примеры включают фирмы-разработчики программного обеспечения и предприятия малого и среднего бизнеса. Таким образом, ленты и AWS S3 по-своему предлагают преимущества с точки зрения затрат. Выбор которого зависит только от ваших требований к хранению.

Скорость

Как и большинство технологий, ленты претерпели значительные изменения. Последний LTO-9 поддерживает максимальная скорость без сжатия 400 МБ в секунду и максимальная скорость со сжатием 1000 МБ в секунду. Ленты станут только быстрее в ближайшие дни. Если вам нужна более высокая скорость, у вас есть полная гибкость для обновления вашей ленточной библиотеки. 

С другой стороны, скорость AWS S3 ограничена имеющейся у вас пропускной способностью. Если у вас есть большой объем данных для хранения на S3, было бы разумно инвестировать в увеличение пропускной способности.

Zmanda позволяет оптимизировать использование полосы пропускания за счет параллельного резервного копирования клиентов. Вы можете установить его, настроив поле Client Parallel Backups на странице Backup How. Значение 1 в поле Client Parallel Backups обеспечивает последовательное резервное копирование всех источников на клиенте. Вы можете воспользоваться этой опцией, если у клиента есть необходимые ресурсы ЦП и сети.

Обратите внимание, что параллельное резервное копирование клиента невозможно для ленточного хранилища, поскольку оно не поддерживает параллельную запись.

Если вам требуется высокоскоростное извлечение из S3 для восстановления, вы можете хранить критически важные данные в высокоскоростных классах.

После рассмотрения аспекта скорости, далее мы проанализируем угол безопасности.

Безопасность

AWS S3 предлагает вам мощные инструменты управления доступом и шифрование для защиты ваших данных. Функции S3 Block Public Access позволяют ограничить публичный доступ к вашим объектам на уровне учетной записи или корзины.

AWS S3 предоставляет вам полную свободу в настройке того, кто и к чему имеет доступ, с помощью следующих функций:

  • Списки контроля доступа к разрешить пользователям доступ к отдельным объектам.
  • Политики сегмента для настроить разрешения для объектов в корзине Amazon S3.
  • Аутентификация строки запроса для предоставлять пользователям временный доступ (с временными ограничениями) через временные URL-адреса.
  • AWS Identity and Access Management для создавать пользователей и настраивать их доступ.

Что касается кассет, у вас есть уникальная возможность воздушный зазор ваши данные. Ленты не подключаются к сети, если на них не выполняется запись или чтение. Таким образом, все ленты с вашими данными не нужно постоянно вставлять в дисководы.

Чтобы повредить данные, хранящиеся на лентах, сначала необходимо вставить ленту в дисковод. Таким образом, киберпреступникам, которые крадут или искажают ваши данные через Интернет, будет трудно достичь своих целей. Для дополнительной защиты вы можете зашифровать данные перед их сохранением на лентах.

Имея четкое представление о том, чем AWS S3 отличается от ленточных хранилищ, выбрать цель резервного копирования для своих нужд относительно просто.

Путь вперед со Змандой

Классы хранилищ AWS S3 уникальны и могут работать лучше всего при разумном выборе. Теперь, когда у вас есть четкое представление об уникальности каждого класса хранилища AWS S3, вы можете обратиться к своему хранилищу резервных копий. Как только класс хранения будет завершен, Zmanda может позаботиться о конфигурации и резервном копировании для вас.

Будь то ленты или AWS S3, или их комбинация, как стратегия хранения 3-2-1, Zmanda идеально подходит для всего этого. Наша удобная в использовании консоль ZMC может обеспечить бесшовную интеграцию между выбранными вами медиафайлами и данными. Это универсальное место для всех требований резервного копирования и восстановления.

Zmanda продолжит предлагать новые функции, которые сделают резервное копирование и восстановление еще проще. Усовершенствования, ориентированные на клиентов, всегда являются частью наших ежеквартальных выпусков. Архив на ледник, неизменяемые резервные копии, стабилизация облачных резервных копий и т. д. — все это было разработано с учетом удобства пользователя. Чтобы узнать, насколько универсальна Зманда, возьмите бесплатная пробная версия. Если вам нужна помощь с Zmanda, не стесняйтесь обращаться к нашим команда поддержки или напишите нам на почту Отдел продаж. Наша команда экспертов будет рада помочь вам в путешествии по Зманде.


Исследуйте другие темы