View a markdown version of this page

Bereitstellungs- und Speicherklassenoptionen für FSx for Lustre-Dateisysteme - FSx für Lustre

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Bereitstellungs- und Speicherklassenoptionen für FSx for Lustre-Dateisysteme

Amazon FSx for Lustre bietet zwei Bereitstellungsoptionen für Dateisysteme: persistent und Scratch. Es bietet drei Speicherklassen: SSD (Solid-State-Laufwerk) und HDD (Festplattenlaufwerk). Intelligent-Tiering

Sie wählen den Bereitstellungstyp und die Speicherklasse des Dateisystems, wenn Sie ein neues Dateisystem mit der AWS-Managementkonsole AWS Command Line Interface (AWS CLI) oder der Amazon FSx for Lustre-API erstellen. Weitere Informationen finden Sie unter Schritt 1: Erstellen Sie Ihr FSx for Lustre-Dateisystem und CreateFileSystemin der Amazon FSx API-Referenz.

Persistente Dateisysteme

Persistente Dateisysteme sind für längerfristige Speicherung und Workloads konzipiert. Bei SSD- und HDD-based Dateisystemen werden Daten automatisch innerhalb derselben Availability Zone repliziert, in der sich das Dateisystem befindet. Bei Intelligent-Tiering Dateisystemen werden Daten über mehrere Availability Zones hinweg repliziert. Die an die Dateiserver angehängten Datenvolumen werden unabhängig von den Dateiservern repliziert, an die sie angeschlossen sind.

Amazon FSx überwacht persistente Dateisysteme kontinuierlich auf Hardwarefehler und ersetzt bei einem Ausfall automatisch Infrastrukturkomponenten. Wenn in einem persistenten Dateisystem ein Dateiserver nicht verfügbar ist, wird er innerhalb von Minuten nach dem Ausfall automatisch ersetzt. Während dieser Zeit werden Anfragen von Clients nach Daten auf diesem Server transparent wiederholt und sind schließlich erfolgreich, nachdem der Dateiserver ersetzt wurde. Daten auf persistenten Dateisystemen werden auf Festplatten repliziert, und ausgefallene Festplatten werden automatisch und transparent ersetzt.

Verwenden Sie persistente Dateisysteme für die längerfristige Speicherung und für durchsatzorientierte Workloads, die über einen längeren Zeitraum oder unbegrenzt ausgeführt werden und die empfindlich auf Verfügbarkeitsunterbrechungen reagieren können.

Persistente Bereitstellungstypen verschlüsseln automatisch Daten während der Übertragung, wenn auf sie von Amazon EC2 EC2-Instances zugegriffen wird, die Verschlüsselung bei der Übertragung unterstützen.

Amazon FSx for Lustre unterstützt zwei persistente Bereitstellungstypen: Persistent 1 und Persistent 2.

Bereitstellungstyp Persistent 2

Persistent 2 ist die neueste Generation des Bereitstellungstyps Persistent und eignet sich am besten für Anwendungsfälle, die eine längerfristige Speicherung erfordern und die höchsten IOPS- und Durchsatzraten erfordern. Persistent 2-Dateisysteme unterstützen SSD und Speicherklassen. Intelligent-Tiering

Sie können Persistent 2-Dateisysteme mit einer Metadatenkonfiguration und aktiviertem EFA mithilfe der Amazon FSx-Konsole und der Amazon FSx-API erstellen. AWS Command Line Interface

Persistent: 1 Bereitstellungstyp

Der Bereitstellungstyp Persistent 1 eignet sich gut für Anwendungsfälle, die eine längerfristige Speicherung erfordern. Die Bereitstellungstypen Persistent 1 unterstützen die Speicherklassen SSD (Solid State Drive) und HDD (Hard Disk Drive).

Sie können Bereitstellungstypen Persistent 1 nur mithilfe der AWS CLI und der Amazon FSx-API erstellen.

Scratch-Dateisysteme

Scratch-Dateisysteme sind für die temporäre Speicherung und die kurzfristigere Verarbeitung von Daten konzipiert. Daten werden nicht repliziert und bleiben auch dann nicht erhalten, wenn ein Dateiserver ausfällt. Scratch-Dateisysteme bieten einen hohen Burst-Durchsatz, der bis zum Sechsfachen des Basisdurchsatzes von 200 MBps pro TiB Speicherkapazität beträgt. Weitere Informationen finden Sie unter Leistungsmerkmale der SSD- und HDD-Speicherklassen.

Verwenden Sie Scratch-Dateisysteme, wenn Sie kostenoptimierten Speicher für kurzfristige, verarbeitungsintensive Workloads benötigen.

In einem Scratch-Dateisystem werden Dateiserver nicht ersetzt, wenn sie ausfallen und Daten nicht repliziert werden. Wenn ein Dateiserver oder eine Speicherfestplatte in einem Scratch-Dateisystem nicht mehr verfügbar ist, sind Dateien, die auf anderen Servern gespeichert sind, weiterhin zugänglich. Wenn Clients versuchen, auf Daten zuzugreifen, die sich auf dem nicht verfügbaren Server oder der Festplatte befinden, tritt bei den Clients sofort ein I/O Fehler auf.

Die folgende Tabelle zeigt die Verfügbarkeit oder Beständigkeit, für die Scratch-Dateisysteme mit Beispielgrößen im Laufe eines Tages und einer Woche konzipiert sind. Da größere Dateisysteme über mehr Dateiserver und mehr Festplatten verfügen, steigt die Ausfallwahrscheinlichkeit.

Dateisystemgröße (TiB) Anzahl der Dateiserver Availability/durability über einen Tag Availability/durability über eine Woche

1.2

2

99,9 %

99,4%

2.4

2

99,9 %

99,4%

4,8

3

99,8%

99,2%

9,6

5

99,8%

98,6%

50,4

22

99,1%

93,9%

IP-Adressen für Dateisysteme

Jedes FSx for Lustre-Dateisystem benötigt eine IP-Adresse für jeden Metadatenserver (MDS) und eine IP-Adresse für jeden Speicherserver (OSS).

Dateisysteme, die die SSD- oder HDD-Speicherklasse verwenden
Typ des Dateisystems Durchsatz, MBps/TiB Speicher pro Betriebssystem
Persistent 2 EFA* 125 38,4 TiB pro Betriebssystem
250 19,2 TiB pro Betriebssystem
500 9,6 TiB pro Betriebssystem
1000 4,8 TiB pro Betriebssystem
Persistent 2 Nicht-EFA* 125, 250, 500, 1000 2,4 TiB pro Betriebssystem
Persistent 1 SSD 50, 100, 200 2,4 TiB pro Betriebssystem
Persistente Festplatte 12 6 TiB pro Betriebssystem
40 1,8 TiB pro Betriebssystem
Kratzer 2 200 2,4 TiB pro Betriebssystem
Kratzer 1 200 3,6 TiB pro Betriebssystem
Dateisysteme, die die Intelligent-Tiering Speicherklasse verwenden
Typ des Dateisystems Durchsatz pro Betriebssystem
Intelligent-Tiering*

4000 Mbit/s pro Betriebssystem

Anmerkung

* Amazon FSx stellt einen Metadatenserver für jeweils 12.000 Metadaten-IOPS auf Persistent 2 SSD- und Intelligent-Tiering Dateisystemen bereit, die mit Metadatenkonfiguration konfiguriert sind.

Amazon FSx for Intelligent-Tiering Lustre-Dateisysteme unterstützen maximal 512 TiB Speicher pro Betriebssystem.

FSx for Lustre-Speicherklassen

Amazon FSx for Lustre bietet Speicherklassen für Solid State Drive (SSD) und Hard Disk Drive (HDD), die für unterschiedliche Datenverarbeitungsanforderungen optimiert sind: Intelligent-Tiering

  • Die SSD-Speicherklasse bietet Zugriff mit geringer Latenz (unter einer Millisekunde) auf Ihren gesamten Datensatz. Die SSD-Speicherklasse wird bereitgestellt, was bedeutet, dass Sie eine Dateisystemgröße angeben und die Speicherkosten für die Menge des bereitgestellten Speichers zahlen. Verwenden Sie die SSD-Speicherklasse für latenzempfindliche Workloads, die die Leistung eines All-Flash-Speichers für alle Daten erfordern.

    Persistent 2-Dateisysteme mit SSD-Speicher unterstützen im Vergleich zu Persistent 1-Dateisystemen einen höheren Durchsatz pro Speichereinheit (d. h. 250, 500 oder 1000 MBps pro TiB). Bei einem Persistent 1-Dateisystem mit SSD-Speicher beträgt der Durchsatz pro Speichereinheit entweder 50, 100 oder 200 MBps pro TiB. Bei einem Scratch-Dateisystem mit SSD-Speicher beträgt der Durchsatz pro Speichereinheit 200 MBps pro TiB.

  • Die Intelligent-Tiering Speicherklasse bietet vollständig elastischen, intelligent gestaffelten Speicher. Elastizität bedeutet, dass Sie für die Menge der gespeicherten Daten zahlen und keine Dateisystemgröße angeben müssen. Intelligentes Tiering bedeutet, dass Sie automatisch weniger für das Speichern von Daten zahlen, auf die Sie in letzter Zeit nicht zugegriffen haben. Diese Speicherklasse optimiert automatisch die Kosten, indem kalte Daten auf kostengünstigere Speicherstufen aufgeteilt werden. Sie können einen optionalen SSD-Lesecache für den Zugriff auf Ihre häufig abgerufenen Daten mit geringer Latenz (unter einer Millisekunde) bereitstellen. Die Intelligent-Tiering Speicherklasse bietet für die meisten Workloads das beste Preis-Leistungs-Verhältnis. Verwenden Sie die Intelligent-Tiering Speicherklasse für Cache-freundliche Workloads, die nicht die Leistung eines All-Flash-Speichers für alle Daten erfordern. Intelligent-Tiering Dateisysteme unterstützen Durchsatzkapazitäten in Schritten von 4000 MBps.

  • Die HDD-Speicherklasse kann für Workloads verwendet werden, die eine konsistente Latenz im einstelligen Millisekundenbereich für alle Daten benötigen. Sie können einen optionalen SSD-Lesecache bereitstellen, der auf 20% Ihrer Festplattenspeicherkapazität ausgelegt ist, um Zugriff mit geringer Latenz auf häufig abgerufene Daten zu ermöglichen. Beim Festplattenspeicher geben Sie eine Dateisystemgröße an und zahlen für die Menge an Speicher, die Sie bereitstellen. Bei einem Persistent 1-Dateisystem mit Festplattenspeicher beträgt der Durchsatz pro Speichereinheit entweder 12 oder 40 MBps pro TiB.

Weitere Informationen zur Leistung dieser Speicherklassen finden Sie unter Leistungsmerkmale der SSD- und HDD-Speicherklassen undIntelligent-Tiering Leistungsmerkmale der Speicherklasse.

Wie die Intelligent-Tiering Speicherklasse Daten unterteilt

Die Amazon Intelligent-Tiering FSx-Speicherklasse speichert Daten automatisch in drei Zugriffsebenen. Sie wurde entwickelt, um die Speicherkosten zu optimieren, indem Daten automatisch auf die kostengünstigste Zugriffsebene verschoben werden, ohne dass sich dies auf die Leistung oder den Betriebsaufwand auswirkt. Die Intelligent-Tiering Speicherklasse stuft Daten automatisch auf der Grundlage der letzten Zugriffszeit ab und optimiert so automatisch die Kosten für weniger aktive Daten:

  • Daten, auf die in den letzten 30 Tagen zugegriffen wurde, werden in der Stufe für häufigen Zugriff gespeichert.

  • Daten, auf die an 30 aufeinanderfolgenden Tagen nicht zugegriffen wurde, werden automatisch in die Stufe für seltenen Zugriff verschoben und kosten weniger als Daten in der Stufe für häufigen Zugriff.

  • Daten, auf die innerhalb von 90 aufeinanderfolgenden Tagen nicht zugegriffen wurde, werden automatisch in den Tarif Archive Instant Access verschoben und kosten weniger als Daten im Tarif für seltenen Zugriff.

Wenn Sie auf Daten der Stufen Infrequent Access oder Archive Instant Access zugreifen, werden die Daten automatisch wieder in die Stufe für häufigen Zugriff verschoben. Darüber hinaus könnten Operationen wie das Ändern der Durchsatzkapazität (wodurch Daten zwischen den OSTs neu verteilt werden), das Re-Striping von Dateien oder Verzeichnissen oder die Verwendung von `lfs migrate` einige Daten zurück in die Stufe für häufigen Zugriff verschieben.

Jeder Zugriff auf Daten, die nicht zwischengespeichert wurden, weist unabhängig von der Datenebene dieselben Leistungsmerkmale auf, und es fallen keine zusätzlichen IOPS-, Abruf- oder Übergangskosten an, die über Ihre normalen Betriebskosten hinausgehen. read/write

Art der Bereitstellung, Verfügbarkeit

Die Bereitstellungstypen Scratch 2, Persistent 1 und Persistent 2 sind in den folgenden Versionen verfügbar AWS-Regionen:

AWS-Region Persistent 2 Hartnäckig 1 Kratzer 2

US East (Ohio)

USA Ost (Nord-Virginia)

Lokale Zone USA Ost (Atlanta)

✓ *

Lokale Zone USA Ost (Dallas)

✓ *

Lokale Zone USA Ost (South Bend)

✓ *

USA West (Nordkalifornien)

Lokale Zone USA West (Los Angeles)

USA West (Oregon)

Lokale Zone USA West (Phoenix)

✓ *

Afrika (Kapstadt)

Asien-Pazifik (Neuseeland)

✓ *

Asien-Pazifik (Hongkong)

Asien-Pazifik (Hyderabad)

Asien-Pazifik (Jakarta)

Asien-Pazifik (Malaysia)

✓ *

Asien-Pazifik (Melbourne)

Asien-Pazifik (Mumbai)

Asien-Pazifik (Osaka)

Asien-Pazifik (Seoul)

Asien-Pazifik (Singapur)

Asien-Pazifik (Sydney)

Asien-Pazifik (Taipeh)

✓ *

Asien-Pazifik (Thailand)

✓ *

Asien-Pazifik (Tokio)

Canada (Central)

Kanada West (Calgary)

✓ *

Europe (Frankfurt)

Europa (Irland)

Europa (London)

Europa (Milan)

Europa (Paris)

Europa (Spain)

Europa (Stockholm)

Europa (Zürich)

Israel (Tel Aviv)

✓ *

Mexiko (Zentral)

✓ *

Middle East (Bahrain)

Naher Osten (VAE)

Südamerika (São Paulo)

AWS GovCloud (US-East)

AWS GovCloud (US-West)

Anmerkung

* Diese AWS-Regionen Unterstützungs Persistent-125 - und Persistent-250 Dateisysteme mit SSD-Speicherklasse ohne EFA.