Frankfurt/M., 08. Dez. 2023 - Storage-Neuerungen und Validierung von Dell PowerScale für NVIDIA DGX SuperPOD; Speicher-Performance als kritischer Erfolgsfaktor für KI-Einsatz…
Zur Ankündigungsübersicht: Der Hersteller kündigt zahlreiche Storage-Neuerungen und eine Validierung von Dell PowerScale für NVIDIA DGX SuperPOD an. Updates der Dell PowerScale OneFS Software vereinfachen die Datenvorbereitung sowie das Training, das Finetuning und die Anwendung von KI-Modellen. Neue Dell-PowerScale-Systeme bieten bis zu 200 Prozent mehr Leistung bei Lese- und Schreibvorgängen von gestreamten Daten. Dell PowerScale wird die voraussichtlich erste für NVIDIA DGX SuperPOD validierte Ethernet-Storage-Lösung sein. Dell APEX File Storage for Microsoft Azure bietet leistungsstarke File-Performance und Funktionen für anspruchsvolle KI- und ML-Workloads. Nachfolgend finden Sie einen kompakten Überblick zu den Neuerungen (Quelle: Dell Technologies).
Dell Technologies erweitert PowerScale OneFS, Betriebssystem der Scale-out-File-Storage-Lösung Dell PowerScale
Mit den Updates der Software sollen Unternehmen KI-Modelle schneller vorbereiten, trainieren, feinjustieren und einsetzen können. Zudem wurden neue All-Flash-Storage-Systeme der PowerScale-Reihe angekündigt: sie basieren auf neuesten Dell-PowerEdge-Servern und bieten laut internen Tests des Herstellers bis zu zweimal schnellere Lese- und Schreibvorgänge bei gestreamten Daten. Ein neues intelligentes Scale-out-Feature von Dell PowerScale soll außerdem für eine bessere GPU-Auslastung sorgen und kann damit einen höheren Datendurchsatz beim Training, bei der Optimierung und beim Einsatz von Künstlicher Intelligenz ermöglichen.
Validierung von Dell PowerScale für NVIDIA DGX SuperPOD
Gemeinsam mit NVIDIA arbeitet Dell Technologies an einer Validierung von Dell PowerScale für die schlüsselfertige KI-Infrastruktur NVIDIA DGX SuperPOD. Unternehmen sollen künftig die Möglichkeit haben, eine zertifizierte Kombination aus DGX-Systemen von NVIDIA, Dell PowerScale Storage sowie Quantum-2-InfiniBand- und Spectrum-Ethernet-Netzwerklösungen von NVIDIA zu nutzen. Dell PowerScale ist laut Anbieter die voraussichtlich erste für NVIDIA DGX SuperPOD validierte Ethernet-Storage-Lösung, um KI- und Generative-KI-Projekte mittels einer zuverlässigen Gesamtlösung zu beschleunigen.
Neue File-Storage-Lösung für Microsoft Azure
Dell Technologies erweitert sein APEX-Portfolio für die Public Cloud um APEX File Storage for Microsoft Azure. Die neue Lösung soll für eine leistungsstarke File Performance sorgen und unterstützt File-Management-Funktionalitäten in Microsoft Azure, mit denen Unternehmen die Anforderungen anspruchsvoller KI- und ML-Anwendungen wie Azure OpenAI und Azure AI Vision erfüllen können.
Das neue Dell APEX File Storage for Azure ermöglicht es Unternehmen ebenso wie das bereits bestehende Dell APEX File Storage for AWS, KI und generative KI aus der Cloud mit Daten zu nutzen, die sich entweder in öffentlichen Clouds oder on-premises befinden. Dabei profitieren sie von verbessertem Datenzugriff und einer optimierten Datenbeweglichkeit.
Die Integration von Dell Apex File Storage for Azure und AWS in Databricks macht es möglich, aus einer Vielzahl von Sprachmodellen auszuwählen und Bibliotheken von Databricks MosaicML zu verwenden, um ein Foundation Model mit eigenen in Dell APEX File Storage gespeicherten Daten weiterzutrainieren. Dadurch erhalten Unternehmen maximale Flexibilität in Multicloud-Umgebungen.
Offenes Data Lakehouse mit Starburst geplant
Die Zusammenarbeit mit Databricks ist eine von mehreren Partnerschaften im Rahmen eines Datenmanagement-Ökosystems. Zudem plant Dell Technologies ein offenes Data Lakehouse, mit dem Unternehmen Erkenntnisse aus ihren Daten gewinnen können, völlig unabhängig von deren Speicherort.
Das Data Lakehouse soll die Analytics-Software von Starburst mit Dell-PowerEdge-Servern sowie File- und Objekt-Storage-Systemen der Reihen Dell PowerScale, Dell ECS und Dell ObjectScale integrieren.
Abb.: Dell Technologies und Starburst data lakehouse solution. AI Anywhere on Data Everywhere... (Bildquelle: Dell Technologies).
Kommentar Arthur Lewis, President Infrastructure Solutions Group bei Dell Technologies: „Die Storage-Performance ist ein entscheidender Faktor für den Erfolg von KI und generativer KI. Indem wir Bottlenecks beim Datenzugriff beseitigen, die den Durchsatz und die Skalierung rechenintensiver Anwendungen beschränken, helfen wir Unternehmen dabei, ihre Daten in die sprichwörtliche Goldgrube für Künstliche Intelligenz zu verwandeln.“
Zur Verfügbarkeit (Quelle Anbieter):
- "Die Erweiterungen von Dell PowerScale OneFS werden noch im Laufe dieses Monats weltweit verfügbar sein.
- Die Dell-PowerScale-All-Flash-Systeme der nächsten Generation und das neue intelligente Scale-out-Feature werden in der ersten Jahreshälfte 2024 zur Verfügung stehen.
- Die Validierung von Dell PowerScale für NVIDIA DGX SuperPOD wird voraussichtlich im ersten Quartal 2024 abgeschlossen sein.
- Dell APEX File Storage for Microsoft Azure wird im ersten Halbjahr 2024 verfügbar sein.
- Die Integration von Dell APEX File Storage for AWS in Databricks und MosaicML ist ab sofort verfügbar. Die Integration von Dell APEX File Storage for Microsoft Azure wird im ersten Halbjahr 2024 erfolgen.
- Die offene Data-Lakehouse-Lösung von Dell Technologies Dell wird im ersten Halbjahr 2024 verfügbar sein."
Querverweis:
Unser Beitrag > Project Helix: Dell Technologies und NVIDIA zur lokalen Entwicklung generativer KI-Modelle
Unser Beitrag > Capgemini Research Institute: Mehr Vorteile als Risiken beim Einsatz von generativer KI
Unser Beitrag > IT-Container-Bereitstellung mit neuer Dell APEX Cloud Platform for Red Hat OpenShift