Datenabrufzeit - Amazon Glacier

1467
an0o0nym

Die Amazon Glacier-FAQ- Seite enthält mehrere Punkte, die die Zeit zum Abrufen von Daten von Amazon Glacier beschreiben. Zum Beispiel:

Mit Standard-Abrufen können Sie innerhalb weniger Stunden auf alle Ihre Archive zugreifen. Standardabrufe werden normalerweise innerhalb von 3 bis 5 Stunden abgeschlossen ...

&

... Massenabrufe werden normalerweise innerhalb von 5 bis 12 Stunden abgeschlossen.

Warum dauert das Abrufen von Daten von Amazon Glacier im Vergleich zu anderen Speicherklassen so lange?

0

3 Antworten auf die Frage

2
hymie

Warum dauert es so lange? Weil es so gestaltet ist.

Amazon Glacier wurde speziell als kostengünstiger Speicherdienst mit geringem Zugriff für "Datenarchivierung und Langzeitsicherung" entwickelt. Wenn Sie regelmäßig sofortigen Zugriff auf Ihre Daten haben möchten, benötigen Sie etwa Amazon S3, einen kostengünstigen Speicherdienst mit sofortigem Zugriff.

Bitte beachten Sie auch, dass es "Gletscher" heißt und Gletscher sind nicht dafür bekannt, dass sie schnell sind.

Ich vermute, dass sie Bandlaufwerke oder ähnliches verwenden, aber ich kann weder zu den technischen Aspekten Stellung nehmen, noch kann ich diese Informationen auf den Webseiten von Amazon finden.

Einfach ausgedrückt: Der Datenträgertyp und seine E / A-Größe (die aufgrund der zugrunde liegenden Technologie an einem bestimmten Grenzwert begrenzt ist) sind die Hauptursachen für den langwierigen Prozess des Datenabrufs aus Amazon Glacier. Ist das korrekt? an0o0nym vor 6 Jahren 0
@ an0o0nym Nicht ganz. Wie gesagt, es wurde gebaut, um zuverlässig zu sein, aber nicht schnell. AWS investierte also in Zuverlässigkeit und senkte die Kosten in Bezug auf Geschwindigkeit. Zum Beispiel können sie einen Bandwechsler pro X-Bänder anstelle von 10 haben. Wenn der Wechsler alle Warteschlangen vor Ihrer Anfrage bearbeitet hat und eventuell mit Ihrer beginnt, dann erfolgt die Datenübertragung schnell. Es ist nur meine Vermutung. Putnik vor 6 Jahren 0
1
Adir Akerman

Der Amazonas-Gletscher besteht aus zwei Schritten: dem Abruf und dem Download. Es wurde für eine Langzeitspeicherung erstellt, für die kein häufiger Abruf erforderlich ist. wie Cloud-Backups . Abfrageanforderungen dauern normalerweise 3 bis 5 Stunden. Anschließend werden die Daten in einen Bereitstellungsbereich gestellt, damit der Kunde sie herunterladen kann. Abgerufene Daten werden 24 Stunden lang bereitgestellt. Daher ist es wichtig, die Daten innerhalb dieses Zeitraums herunterzuladen. Die Downloadzeit hängt von Ihrer Bandbreite ab. Der Grund für die lange Zeit ist, dass Amazon Glacier niedriger als andere Speicheroptionen kalkuliert, die für einen häufigeren Datenzugriff gedacht sind.

Glacier verfügt jedoch über verschiedene Arten des Datenabrufs. Bei Bedarf haben sie den Abruf beschleunigt, so dass die Daten schneller verfügbar sind, und zwar bereits nach 1 bis 5 Minuten. Dieser Typ ist teurer als der Standard-Gletscher-Datenabruf. AWS bietet eine FAQ mit zusätzlichen Details zu den verschiedenen Arten von Abrufen: https://aws.amazon.com/glacier/faqs/ .

Warum haben Sie auf N2WS verlinkt? bertieb vor 6 Jahren 0
0
an0o0nym

Ich habe dies auf der Glacier Wiki-Seite gefunden :

ZDNet sagt, dass Glacier laut privaten E-Mails "billige Hardwarekomponenten" verwendet. Im Jahr 2012 zitierte ZDNet einen ehemaligen Mitarbeiter von Amazon mit der Aussage, dass Glacier auf benutzerdefinierten Low-RPM-Festplattenlaufwerken basiert, die an angepasste Logikplatinen angeschlossen sind, auf denen jeweils nur ein Prozent der Festplatten eines Racks mit voller Geschwindigkeit gedreht werden kann. (Eine ähnliche Technologie wird auch von Facebook verwendet.)

Einige Benutzer glauben, dass die zugrunde liegende Hardware für Glacier-Speicher bandbasiert ist, da Amazon Glacier als direkten Konkurrenten für Bandsicherungsdienste (sowohl lokal als auch cloudbasiert) positioniert hat. Diese Verwirrung wird durch die Tatsache verstärkt, dass bei Glacier Verzögerungen beim Archivabruf (3 bis 5 Stunden, bevor Archive verfügbar sind) ähnlich sind wie bei bandbasierten Systemen und ein Preismodell, das ein häufiges Abrufen von Daten verhindert.

Das Register behauptete, Glacier läuft auf Spectra T-Finity-Bandbibliotheken mit LTO-6-Bändern. Andere haben Amazon mit offline geschichteten magnetischen Aufzeichnungslaufwerken, optischen Blu-ray-Discs oder einer anderen proprietären Speichertechnologie vermutet.