Idealna klasa pamięci masowej Amazon S3 dla Twoich danych — krótki przewodnik

Idealna klasa pamięci masowej Amazon S3 dla Twoich danych | Żmanda

Znalezienie odpowiedniej klasy pamięci masowej Amazon AWS S3 dla Twoich wymagań w zakresie przechowywania danych jest niezbędne do zapewnienia optymalizacji kosztów. Zrozumienie różnic między klasami pamięci masowej i rozważenie ich funkcji może pomóc w podjęciu decyzji o właściwej klasie pamięci masowej dla danych. Na tym blogu dowiesz się, w jaki sposób każdą klasę pamięci masowej Amazon S3 można wykorzystać do określonych przypadków użycia wraz z odpowiednim rozwiązaniem EBR.

Podczas tworzenia kopii zapasowych możesz w pełni wykorzystać te różnorodne klasy pamięci masowej. Konfiguracje pamięci masowej będą prostsze w obsłudze, jeśli możesz skonfigurować pamięć masową bezpośrednio z samego rozwiązania do tworzenia kopii zapasowych i odzyskiwania, tak jak pozwala na to rozwiązanie Zmanda EBR. Zmanda oferuje tworzenie kopii zapasowych do pięciu klas pamięci masowej w ramach AWS S3. Zbadajmy mocne strony klas pamięci masowej AWS S3 z silnym wsparciem tworzenia kopii zapasowych od Zmanda.

Nasz blog dot Omówienie AWS pomoże ci lepiej zrozumieć jego klasy przechowywania. Więc jeśli jesteś nowy w naszym Seria AWS, zalecamy szybkie zapoznanie się z poprzednim blogiem z tej serii.

Rodzaje pamięci masowej w AWS S3

Pojedynczy rodzaj pamięci masowej w chmurze nie zaspokoi współczesnych potrzeb biznesowych w zakresie pamięci masowej. Trudno jest osiągnąć optymalizację kosztów za pomocą tylko jednego typu pamięci masowej w chmurze, dlatego AWS S3 oferuje wybór dostosowany do różnych potrzeb.

Podczas gdy dostęp do niektórych danych jest częsty, na przykład PIN do karty kredytowej, który jest używany za każdym razem, gdy dokonujesz płatności, dostęp do innych uzyskuje się rzadko, na przykład do zdjęć z dzieciństwa. Klasy pamięci masowej AWS są również tworzone w celu zaspokojenia takich różnych potrzeb w zakresie dostępu.

Przechowywanie określonych danych w określonych klasach pamięci za każdym razem, gdy rozpoczynasz tworzenie kopii zapasowej, brzmi jak dużo pracy, prawda? Cóż, na szczęście dla ciebie, Zmanda pozwala skonfigurować klasę pamięci masowej AWS S3 do tworzenia kopii zapasowych bezpośrednio z Konsola zarządzania Zmanda (ZMC).

Aby wybrać odpowiednią klasę pamięci masowej AWS S3 do swojej implementacji, niezbędne jest lepsze zrozumienie klas pamięci masowej AWS S3. Aby to zrozumieć, najpierw dowiemy się, w jaki sposób przetwarzanie danych jest klasyfikowane na podstawie czasów odpowiedzi.  

Przetwarzanie danych dzieli się na trzy typy w zależności od czasu odpowiedzi. Oni są:

  • Czas rzeczywisty: Jest to wykorzystywane, gdy wyniki przetwarzania danych są potrzebne natychmiast. Załóżmy na przykład, że narzucasz limity bezpłatnej wersji próbnej swojego oprogramowania. W takim przypadku musisz wiedzieć, kiedy użytkownicy próbni wyczerpią swój limit natychmiast, a nie później.
W czasie rzeczywistym
  • Blisko prawdziwego czasu:  Jest to używane, gdy wyniki przetwarzania danych są potrzebne wkrótce, ale nie natychmiast. W przypadku przetwarzania danych w czasie zbliżonym do rzeczywistego wyniki odzwierciedlają dane z niedalekiej przeszłości, a nie teraźniejszość. Powiedzmy na przykład w przypadku pozyskiwania informacji operacyjnych, w których leady sprzedażowe są rozpoznawane na podstawie zbiorów danych. Zidentyfikowanie tych leadów sprzedażowych, które są bardziej skłonne do zakupu, a następnie skupienie się na nich zamiast skupiania się na każdym leadzie.
  • Partia:  Stosuje się to, gdy wyniki przetwarzania danych nie są potrzebne natychmiast, a opóźnienie o godziny lub dni jest dopuszczalne. Powiedzmy na przykład w przypadku czynności płacowych, które są wykonywane w cyklach miesięcznych.

Jeśli klasy pamięci masowej AWS S3 obsługiwane przez Zmanda zostaną podzielone na kategorie czasu rzeczywistego i zbliżonego do czasu rzeczywistego, będą wyglądać następująco:

W czasie rzeczywistym (dostęp w milisekundach)Blisko prawdziwego czasu
Standard S3S3 Glacier Flexible Retrieve (od 1 minuty do 12 godzin)
Dostęp standardowy S3 — rzadki
S3 Jedna strefa — rzadki dostęp
Pamięć masowa S3 o ograniczonej nadmiarowości

Powyższa klasyfikacja dotyczy tylko czasów dostępu. Jak omówiono wcześniej, możesz wybrać klasę pamięci, do której chcesz tworzyć kopie zapasowe, gdy jako cel w ZMC wykorzystasz AWS S3. Ta wygoda w konfiguracji wyborów AWS S3 sprawia, że ​​Zmanda jest naprawdę zorientowana na użytkownika.

Podczas tworzenia kopii zapasowych w chmurze dobra łączność internetowa nie podlega negocjacjom. Jeśli jednak Twój internet od czasu do czasu się psuje, nasz stabilność kopii zapasowych w chmurze funkcja sprawi, że kopie zapasowe i przywracanie będą działać bez żadnych problemów. Możesz mieć pewność, że trywialne problemy z łącznością nie zakłócą procesów tworzenia kopii zapasowych i odzyskiwania. Ta funkcja nie wymaga Twojej interwencji i jest automatycznie włączana przez Zmanda.

Standard S3

Standard S3 jest domyślną klasą przechowywania dla wszystkich obiektów. Jeśli nie określisz żadnej klasy przechowywania podczas przesyłania do S3, dane zostaną automatycznie zapisane w standardzie S3. Aby zapewnić wysoką trwałość (99.999999999%), dane przechowywane na S3 Standard są przechowywane w co najmniej trzech Strefach Dostępności. The Elastyczność dostępna jest replikacja tego samego regionu lub replikacja między regionami. Dzięki temu Twoje dane są bezpieczne nawet w przypadku awarii całej Strefy Dostępności. Obsługuje dostęp w czasie rzeczywistym i jest najdroższą klasą pamięci masowej. Opłata jest naliczana za gigabajt i wywołania interfejsu API.

Więc wydałeś większość swojego budżetu na AWS S3 i masz mało. Jednak kompromis w kwestii rozwiązania do tworzenia kopii zapasowych i odzyskiwania danych nie wchodzi w grę. W takiej sytuacji Zmanda pozwoli Ci maksymalnie wykorzystać wydatki na AWS S3 bez żadnych kompromisów. Tylko dlatego, że standard S3 jest drogi, twoje rozwiązanie do tworzenia kopii zapasowych (czytaj Zmanda) nie musi być drogie. Zasady licencjonowania Zmanda obciążają Cię na podstawie liczby punktów końcowych, których kopie zapasowe są tworzone. Możesz wybrać tworzenie kopii zapasowych terabajtów, a nawet petabajtów danych, ale koszty licencji Zmanda pozostają niezmienione. Dzięki temu Twoja firma jest łatwa do skalowania bez zastanawiania się nad czynnikiem kosztowym.

Standard S3 jest idealny do tworzenia kopii zapasowych znacznych ilości krytycznych danych, takich jak dynamiczne strony internetowe, aplikacje w chmurze, aplikacje mobilne i gry oraz dystrybucja treści. Otrzymujesz to, co najlepsze z pamięci masowej AWS S3 z korzyściami kosztowymi Zmanda.

Możesz skonfigurować zestaw kopii zapasowych w ZMC, aby tworzyć kopie zapasowe danych w klasie pamięci masowej S3 Standard. Eliminuje to narzut związany z koordynacją między ekranami ZMC i AWS S3. Możesz to zrobić na stronie Przechowywanie.

Lista rozwijana Cloud Storage dla AWS S3
Lista rozwijana opcji pamięci dla AWS S3 w ZMC

Następnie poznamy klasę pamięci S3 Standard Infrequent Access (S3 IA).

S3 standardowy rzadki dostęp (S3 IA)

Klasa pamięci masowej S3 IA jest przeznaczona do przechowywania danych, które prawdopodobnie będą dostępne raz w miesiącu lub raz w roku, ale gdy uzyskasz do nich dostęp, potrzebujesz ich natychmiast. Mimo że dostęp jest rzadki, dostęp do danych przechowywanych w S3 IA można uzyskać natychmiast, tj. w ciągu milisekund. Zostaniesz obciążony niższą ceną za gigabajt w porównaniu ze standardem S3. Będziesz jednak zobowiązany do uiszczenia opłaty za odzyskanie GB.

Pomaga obniżyć koszty, jednocześnie przechowując rzadko używane dane przez długi czas. W związku z tym S3 IA idealnie nadaje się do przechowywania długoterminowego i odzyskiwania danych po awarii.

Aby uprościć koordynację między AWS S3 UI i Zmanda UI, strona Storage w ZMC umożliwia skonfigurowanie kopii zapasowych danych w taki sposób, aby odbywały się one w klasie pamięci masowej S3 Standard IA.

Czym są zasady cyklu życia S3?

Zasady cyklu życia S3 pozwalają skonfigurować sposób, w jaki AWS ma obsługiwać obiekty przechowywane w S3, w zależności od ich wieku. Dzięki zasadom cyklu życia S3 możesz przenieść swój obiekt do innej klasy pamięci masowej, zarchiwizować go, a nawet usunąć po pewnym czasie, na przykład 30 dni.

Zaletą definiowania zasad cyklu życia S3 jest to, że czynności przenoszenia/archiwizacji/usuwania można zautomatyzować. Oszczędza to kłopotów z monitorowaniem obiektów i zajmowaniem się nimi od czasu do czasu. Zmanda pozwala zaimplementować podobną funkcjonalność, jak ta, której właśnie się nauczyliśmy.

Konfiguracja kopii zapasowych w Zmanda odbywa się za pośrednictwem zestawy zapasowe. Zestaw kopii zapasowych zostanie skonfigurowany za pomocą siedmiu różnych ekranów. Każdy ekran umożliwia kontrolowanie różnych aspektów zestawu kopii zapasowych, takich jak to, co i gdzie wykonać kopię zapasową, w jaki sposób należy zastosować etapowanie itp. Na ostatnim ekranie konfiguracji kopii zapasowej, zatytułowanym Nośnik kopii zapasowej, można skonfigurować wiele opcji specyficznych dla nośnika . Jedną z dostępnych opcji jest tzw Okres przechowywania. Ta opcja pozwala określić, jak długo kopie zapasowe mają być przechowywane.

Jeśli jednak zestaw pamięci zostanie zarchiwizowany, dane nie zostaną usunięte z AWS S3, nawet jeśli okres przechowywania danych dobiegnie końca. Na poniższym zrzucie ekranu Amazon S3 jest używany do archiwizacji z zachowaniem na zawsze.

AWS S3 z wieczną retencją
AWS S3 do archiwizacji z możliwością wiecznego przechowywania

Należy pamiętać, że istnieją pewne przejścia klas pamięci, które AWS nie wspiera. Załóżmy na przykład, że zasady cyklu życia S3 nie powodują przenoszenia obiektów z żadnej klasy pamięci masowej do S3 Standard lub RRS (Reduced Redundancy Storage). Ponadto przejścia i wygaśnięcia zasad cykli życia S3 są podlegający opłacie.

S3 Jedna strefa - rzadki dostęp (S3 Jedna strefa IA)

S3 One Zone IA jest przeznaczony dla mniej krytycznych danych, do których można uzyskać dostęp raz w miesiącu lub raz w roku, ale kiedy potrzebujesz do nich dostępu, potrzebujesz ich natychmiast. Różnica między One Zone IA i S3 IA polega na tym, że nie ma replikacji danych między wieloma Strefy dostępności w jednej strefie IA. Wszelkie dane przechowywane w S3 One Zone IA są przechowywane w jednej strefie dostępności w celu obniżenia kosztów. Jest o 20% tańszy niż pamięć klasy S3 IA. Kompromis polega na tym, że jeśli strefa dostępności, w której przechowywane są dane, zostanie zniszczona, dane zostaną utracone. Stąd trwałość One Zone IA wynosi 99.999999999% w jednej Strefie Dostępności.

S3 One Zone IA jest idealny do przechowywania danych niekrytycznych, takich jak dodatkowe kopie danych kopii zapasowych lub dane, które można łatwo odtworzyć. Tutaj znowu zostaniesz obciążony niższą ceną za gigabajt w porównaniu do S3 IA i opłatą za pobieranie za GB taką samą, jak w przypadku S3 IA.

Jeśli chcesz utworzyć kopię zapasową swoich danych w klasie pamięci masowej S3 Standard One Zone IA, możesz ją łatwo skonfigurować za pomocą samej ZMC (strony przechowywania).

Pamięć masowa o ograniczonej nadmiarowości S3 (RRS)

Pamięć masowa S3 o ograniczonej redundancji jest przeznaczona do przechowywania danych niekrytycznych, do których prawdopodobnie często będziesz mieć dostęp. Dane przechowywane w tej klasie mają mniejsza redundancja w porównaniu do S3 Standard, czyli trwałość RRS wynosi 99.99%.

Możesz użyć RRS, gdy potrzebujesz wysoce dostępnej pamięci masowej do dystrybucji powtarzalnych treści, takich jak przetworzone dane lub miniatury. Według AWS klasa S3 Standard jest bardziej opłacalna niż RRS i dlatego zaleca korzystanie ze standardu S3. RRS kosztuje nieco więcej niż standard S3 za tę samą ilość miejsca.

Jeśli tworzysz kopię zapasową odtwarzalnych treści za pośrednictwem Zmanda, nie możesz się pomylić z RRS. Otrzymujesz połączone korzyści z wysoce dostępnej pamięci masowej AWS wraz z zorientowanymi na użytkownika funkcjami Zmanda, takimi jak wieloczęściowy interfejs API do przesyłania. Ekran Przechowywanie w ZMC zawiera niezbędne opcje konfiguracji do tworzenia kopii zapasowych w pamięci masowej S3 o ograniczonej redundancji.

S3 Glacier Flexible Retrieval (dawniej S3 Glacier)

S3 Glacier Flexible Retrieval służy do archiwizacji danych, do których nie trzeba mieć natychmiastowego dostępu. Jeśli potrzebujesz oszczędzać pieniądze, poświęcając szybkość dostępu, S3 Glacier Flexible Retrieval jest właśnie dla Ciebie. Kompromis w szybkości dostępu wynika z tego, że dane klasy pamięci są archiwizowane. Dane muszą zostać wyodrębnione, zanim będzie można ich użyć. W rezultacie zwykle trzeba czekać od minut do godzin (prawie w czasie rzeczywistym) przed użyciem.

Pomimo niskiego kosztu nadal otrzymujesz taką samą wysoką trwałość jak standard S3, ponieważ dane przechowywane w tej klasie są replikowane w co najmniej 3 strefach dostępności.

Tworzenie kopii zapasowych w S3 Glacier Flexible Retrieval doskonale nadaje się do archiwizacji danych ze względu na zgodność, odzyskiwania po awarii obejmującego duże zestawy danych oraz potrzeby przechowywania danych poza siedzibą firmy. Opłata za przechowywanie będzie niższa niż w S3 One Zone IA, a pobieranie zbiorcze jest bezpłatne.

Jeśli rozważasz inne opcje długoterminowego przechowywania, być może chciałbyś wiedzieć, jak to zrobić pamięć taśmowa kumuluje się z S3.

Aby ułatwić archiwizację, Zmanda umożliwia włączenie archiwizacji do Glacier bezpośrednio z samego ZMC. Na stronie Gdzie kopia zapasowa znajduje się pole wyboru dla opcji Zarchiwizuj na lodowcu, w tym Liczba dni obok niej. Załóżmy, że chcesz automatycznie zarchiwizować dane przechowywane na AWS S3 do AWS S3 Glacier. W takim przypadku należy zaznaczyć checkbox i określić liczbę dni, po których ma nastąpić archiwizacja. Po zapisaniu tej konfiguracji dane, których kopia zapasowa została utworzona przez odpowiedni zestaw kopii zapasowych, zostaną automatycznie zarchiwizowane w klasie pamięci masowej S3 Glacier Flexible Retrieval. Archiwizacja nastąpi automatycznie po spędzeniu przez dane określonej liczby dni w magazynie AWS S3. Dlatego nie musisz się martwić o przeniesienie danych do klasy przechowywania S3 Flexible Retrieval Glacier, ponieważ Zmanda zrobi to za Ciebie.

Opcja archiwum do lodowca
Opcja archiwum do lodowca

S3 vs. Taśma

Biorąc pod uwagę sposób, w jaki taśmy ewoluowały pod względem pojemności, nie można zignorować przewagi, jaką oferuje w porównaniu z kosztem i szybkością S3.

S3 kontra taśma

Koszty:

Wybierając taśmę do przechowywania danych, wydasz dużo pieniędzy na jej konfigurację. Musisz kupić bibliotekę taśm, nośniki i napędy, aby ją skonfigurować. Na szczęście koszty konserwacji i wymiany wkładu (około 15 USD) są niskie. Chociaż żywotność taśmy wzrasta w środowisku o kontrolowanej wilgotności, nie jest to konieczne.

Przedsiębiorstwa, które mają dużo danych do przechowywania (czytaj petabajty), wolą używać taśm z Zmanda. Niektóre przykłady to obiekty badawcze, laboratoria superkomputerów, stacje prognozy pogody i uniwersytety. Przechowywanie tak ogromnych ilości danych na S3 kosztowałoby dużo i nie jest wskazane. W przypadku przechowywania tak ogromnych ilości danych w S3 poniesiony koszt byłby prawie równy kosztowi biblioteki zmieniacza taśm (około 18,000 XNUMX USD).

Ten ogromny koszt będzie naliczany co miesiąc, w przeciwieństwie do taśmy, gdzie jest to jednorazowa inwestycja. Podsumowując, jeśli przechowujesz duże ilości danych przez dłuższy czas, taśmy są lepsze niż S3.

Pamiętaj, że podczas zapisywania kopii zapasowej na taśmach będziesz również odpowiedzialny za etykietowanie taśm i utrzymywanie ich w porządku. Odpowiedzialność chroniące taśmy od kradzieży i szkód fizycznych również spadną na ciebie.

Na froncie chmury nie musisz wydawać dużo z góry, ponieważ dostawcy usług w chmurze, tacy jak AWS, zajmą się całą konfiguracją i konserwacją infrastruktury. Przedsiębiorstwa, które już korzystają z wielu usług AWS, mogą uzyskać zniżki, jeśli będą wykorzystywać AWS S3 do swoich potrzeb w zakresie pamięci masowej. Niektóre przykłady obejmują firmy programistyczne oraz małe i średnie firmy. Tak więc zarówno taśmy, jak i AWS S3 oferują na swój sposób korzyści finansowe. Wybór zależy wyłącznie od wymagań dotyczących przechowywania.

Prędkość

Podobnie jak większość technologii, taśmy bardzo ewoluowały. Najnowszy LTO-9 wspiera maksymalna prędkość bez kompresji 400 MB na sekundę i maksymalna prędkość po kompresji 1000 MB na sekundę. Taśmy staną się szybsze dopiero w najbliższych dniach. W przypadku, gdy potrzebujesz większej szybkości, masz całkowitą swobodę rozbudowy swojej biblioteki taśm. 

Z drugiej strony prędkość AWS S3 jest ograniczona posiadaną przepustowością. Jeśli masz dużą ilość danych do przechowywania w S3, mądrze byłoby zainwestować w zwiększenie przepustowości.

Zmanda pozwala zoptymalizować wykorzystanie przepustowości poprzez równoległe kopie zapasowe klientów. Można to ustawić, konfigurując pole Równoległe kopie zapasowe klienta na stronie Jak tworzyć kopie zapasowe. Wartość 1 w polu Równoległe kopie zapasowe klienta powoduje sekwencyjne tworzenie kopii zapasowych wszystkich źródeł na kliencie. Możesz skorzystać z tej opcji, jeśli klient ma niezbędne zasoby procesora i sieci.

Należy pamiętać, że tworzenie równoległych kopii zapasowych klienta nie jest możliwe w przypadku pamięci taśmowej, ponieważ nie obsługuje ona zapisu równoległego.

Jeśli chcesz uzyskać szybkie pobieranie z S3 w celu przywrócenia, możesz przechowywać krytyczne dane w klasach o dużej szybkości.

Mając omówiony aspekt szybkości, przeanalizujemy następnie kąt bezpieczeństwa.

Bezpieczeństwo

AWS S3 oferuje potężne narzędzia do zarządzania dostępem i szyfrowanie w celu zabezpieczenia danych. Funkcje S3 Block Public Access umożliwiają ograniczenie publicznego dostępu do obiektów na poziomie konta lub zasobnika.

AWS S3 zapewnia całkowitą swobodę w konfigurowaniu, kto może uzyskiwać dostęp do czego, korzystając z następujących funkcji:

  • Listy kontroli dostępu do upoważniać użytkowników do dostępu do poszczególnych obiektów.
  • Zasady zasobnika do skonfiguruj uprawnienia dla obiektów w segmencie Amazon S3.
  • Uwierzytelnianie ciągu zapytania do dać użytkownikom tymczasowy dostęp (z ograniczeniami czasowymi) za pośrednictwem tymczasowych adresów URL.
  • Zarządzanie tożsamością i dostępem AWS do tworzyć użytkowników i konfigurować ich dostęp.

Jeśli chodzi o taśmy, masz wyjątkową zdolność szczelina powietrzna Twoje dane. Taśmy nie są podłączone do sieci, chyba że są zapisywane lub odczytywane. Tak więc wszystkie taśmy, na których znajdują się twoje dane, nie muszą być cały czas wkładane do napędów.

Aby uszkodzić dane zapisane na taśmach, należy najpierw włożyć taśmę do napędu. Tak więc cyberprzestępcy, którzy kradną lub uszkadzają Twoje dane przez Internet, będą mieli trudności z osiągnięciem swoich celów. Dla dodatkowej ochrony możesz zaszyfrować dane przed zapisaniem ich na taśmach.

Dzięki jasnemu zrozumieniu różnicy między AWS S3 a pamięcią taśmową wybór miejsca docelowego kopii zapasowej dla własnych potrzeb jest stosunkowo łatwy.

Droga naprzód z Zmanda

Klasy pamięci masowej AWS S3 są unikalne i mogą najlepiej służyć, jeśli zostaną mądrze wybrane. Teraz, gdy już wiesz, w jaki sposób każda klasa pamięci masowej AWS S3 jest wyjątkowa, możesz zadzwonić do magazynu kopii zapasowych. Po sfinalizowaniu klasy pamięci, Żmanda może zająć się konfiguracją i obsługą kopii zapasowych.

Niezależnie od tego, czy są to taśmy, czy AWS S3, czy też kombinacja obu jako strategia przechowywania 3-2-1, Zmanda idealnie pasuje do tego wszystkiego. Nasza przyjazna dla użytkownika konsola ZMC może zapewnić bezproblemową integrację między wybranymi mediami i danymi. Jest to miejsce, w którym można spełnić wszystkie wymagania dotyczące tworzenia kopii zapasowych i odzyskiwania danych.

Zmanda będzie nadal wprowadzać nowe funkcje, które jeszcze bardziej ułatwią tworzenie kopii zapasowych i odzyskiwanie. Udoskonalenia zorientowane na potrzeby klientów są zawsze częścią naszych kwartalnych wydań. Archiwum na lodowiec, niezmienne kopie zapasowe, stabilizacja kopii zapasowych w chmurze itp. zostały opracowane z myślą o wygodzie użytkownika. Aby odkryć, jak naprawdę wszechstronna jest Zmanda, weź Przetestuj za darmo. Jeśli potrzebujesz pomocy z Zmanda, skontaktuj się z nami Zespół wsparcia lub napisz do nas Zespół sprzedaży. Nasz zespół ekspertów z przyjemnością pomoże Ci w podróży Zmanda.


Przeglądaj więcej tematów