Was ist Amazon File Cache?
Amazon File Cache ist ein verwalteter Hochgeschwindigkeits-Cache, der Daten aus verschiedenen Speicherquellen in einem einheitlichen Namespace zusammenführt. Der Cache basiert auf Lustre-Technologie und bietet Sub-Millisekunden-Latenzen und Hunderte GB/s Durchsatz für Workloads, die schnellen Zugriff auf verteilte Daten benötigen.
Der Service unterstützt On-Premises-NFS-Dateisysteme und Amazon S3 als Datenquellen. Daten werden automatisch beim ersten Zugriff in den Cache geladen und stehen anschließend mit voller Lustre-Performance zur Verfügung.
Kernfunktionen
- Multi-Source-Cache: Vereinheitlichung von Daten aus On-Premises-NFS und S3 in einem Namespace
- Lustre-basierte Performance: Sub-Millisekunden-Latenzen und Hunderte GB/s Durchsatz
- Automatisches Caching: Daten werden beim ersten Zugriff transparent aus den Quellen geladen
- POSIX-kompatibel: Standard-Dateisystem-Interface für bestehende Linux-Anwendungen
- Temporärer Betrieb: Optimiert für zeitlich begrenzte Workloads ohne langfristigen Speicher
Typische Anwendungsfälle
Cloud Bursting: Unternehmen verarbeiten Daten, die in On-Premises-NFS-Systemen liegen, mit AWS-Compute-Ressourcen. File Cache bietet lokale Performance für entfernte Daten und eliminiert die Notwendigkeit, Daten vorher komplett nach AWS zu kopieren.
HPC-Datenverarbeitung: Wissenschaftliche Berechnungen und Simulationen greifen auf Daten aus verschiedenen Quellen zu. File Cache vereinheitlicht den Zugriff und liefert die für HPC nötige Performance.
Batch-Verarbeitung: Zeitlich begrenzte Verarbeitungsjobs erstellen einen temporären File Cache, verarbeiten die Daten mit hoher Performance und entfernen den Cache nach Abschluss. Das minimiert Kosten für Storage.
Vorteile
- Einheitlicher Zugriff auf verteilte Datenquellen
- Lustre-Performance ohne permanenten Speicheraufwand
- Transparentes Caching ohne Anwendungsänderungen
- Kosteneffizient für temporäre und wiederkehrende Workloads
Integration mit innFactory
Als AWS Reseller unterstützt innFactory Sie bei Amazon File Cache: Hybrid-Storage-Architektur, Cache-Konfiguration für HPC-Workloads, Integration mit On-Premises-NFS-Systemen und Performance-Optimierung.
Typische Anwendungsfälle
Häufig gestellte Fragen
Was ist Amazon File Cache?
Amazon File Cache ist ein Hochgeschwindigkeits-Cache, der Daten aus verschiedenen Quellen (On-Premises NFS, S3) in einem einheitlichen, leistungsstarken Dateisystem-Cache in AWS zusammenführt. Der Cache basiert auf der Lustre-Technologie.
Wie funktioniert der Cache?
File Cache erstellt einen temporären, leistungsstarken Lustre-basierten Cache in AWS. Daten werden beim ersten Zugriff automatisch aus den konfigurierten Quellen geladen und lokal gecacht. Der Cache bietet Sub-Millisekunden-Latenzen für nachfolgende Zugriffe.
Wann sollte ich File Cache statt FSx for Lustre verwenden?
File Cache ist ideal für temporäre Workloads, die Daten aus mehreren Quellen gleichzeitig benötigen, besonders wenn die Daten in On-Premises-NFS-Systemen liegen. FSx for Lustre eignet sich besser für dauerhafte Workloads mit S3-Integration.