Lustre HPC Filesystem-Anwendungen auf Basis Quantum QXS Hybrid Storage

München, Starnberg, 20. März 2017 - Sehr hohe Lese- und Schreib-Performance für parallele Filesysteme; Automatisiertes Realtime Data Tiering im Sekundenbereich...

Zum Hintergrund: Anwendungsszenarien bei parallelen Hochleistungs-Filesystemen sind die wissenschaftliche Forschung, Biowissenschaften, Erdöl- und Gasförderung, seismische Exploration oder auch Cybersecurity. Dies rechenintensiven Analyseanwendungen erfordern massive Kapazitäten zur parallelen Datenverarbeitung sowie einen Speicher mit hoher Streaming-Performance bei Lese- und Schreibvorgängen. Die Quantum QXS Hybrid Storage-Arrays erzielen laut Herstellerangabe eine extrem hohe I/O-Leistung und erfüllen somit die Anforderungen von Applikationen für parallele HPC (High Performance Computing) Dateisysteme an den Storage.

Automatisiertes Realtime Data Tiering

Mit Q-Tier umfasst Quantum QXS Hybrid Storage zudem eine Software, die intelligentes Data Tiering in Echtzeit ermöglicht und Daten je nach aktuellen Zugriffsmustern zwischen den Speicherebenen in einem Array (Flash, hochperformante HDDs und kostengünstigere HDDs) verschiebt. Im Gegensatz zu hybriden Speicher-Arrays, die Daten einmal täglich verschieben, um während der Hauptbelastungszeit die Performance nicht zu beinträchtigen, sind die QXS-Arrays mit dedizierten Prozessoren und zwei Aktiv/Aktiv-Controllern ausgestattet und können Daten alle 5 Sekunden übertragen. Vorteil: damit steht aktiven Workloads ohne Performanceeinschränkungen immer die schnellste Speicherebene (Tier) zur Verfügung. Effekt: Die am dringendsten benötigten Daten profitieren vom höchstmöglichen I/O und gleichzeitig werden mögliche Leistungsengpässe beseitigt.


Typische Dateisystem-Anwendungen sind Lustre, GPFS, HPSS oder HPC Scale-Out-Storage StorNext 5 von Quantum. In der folgenden Abbildung wird Lustre als Dateisystem verwendet, eine ähnliche Konfiguration ist aber auch mit anderen Filesystemen möglich.

Abb. 1: QXS-Storage in Kombination mit Lustre (Bildquelle: Quantum)


Weitere Informationen erhalten Sie beim Hersteller unter folgendem Link:

> Quantum QXS Storage für HPC-Systeme