Cloudian vereinfacht KI-Datenspeicherung mit einer kostengünstigen, skalierbaren und leistungsstarken Objektspeicherlösung
München– 18. November 2024 – Cloudian, weltweit führend im Bereich sicherer S3-kompatibler KI-Datenlake-Plattformen, gab heute die Integration seiner Speicherlösung mit der NVIDIA Magnum IO™ GPUDirect® Storage technology bekannt. Cloudian HyperStore® mit GPUDirect-Zugriff vereinfacht das Management von KI-Trainings- und Inferenzdatensätzen – im Petabyte- und Exabyte-Bereich – und reduziert gleichzeitig die Kosten, indem komplexe Datenmigrationen und veraltete Dateispeicherebenen vermieden werden.
Wesentliche Vorteile von NVIDIA GPUDirect Storage für Objektspeicher in KI-Trainings- und Inferenz-Workflows:
- Unbegrenzte Skalierbarkeit: Erweitern Sie mühelos auf Exabyte-Skala ohne Unterbrechung und unterstützen Sie wachsende KI-Datensätze ohne zusätzliche Verwaltungsaufwände.
- Keine Datenmigrationen: Betreiben Sie einen einzigen, einheitlichen Data Lake, ohne ständig Daten zwischen Ebenen verschieben zu müssen.
- Hohe Leistung: Liefert über 200 GB/s von einem einzelnen System mit einer Leistung, die über einen Zeitraum von 30 Minuten ohne Daten-Caching aufrechterhalten wird.
- Reduzierte Kosten: Entfernt die Notwendigkeit für veraltete Dateispeicherebenen und senkt so die Infrastrukturkosten.
- Keine Kernel-Modifikationen: Beseitigt die Sicherheitslücken von anbietergetriebenen Kernel-Modifikationen und reduziert potenzielle Schwachstellen.
- Maximierte CPU für KI-Workloads: Reduziert die CPU-Last während der Datenübertragung um 45 %, wodurch Rechenressourcen für die KI-Verarbeitung freigesetzt werden.
- Integrierte Metadaten: Reichhaltige Metadaten ermöglichen schnelle Suchvorgänge ohne externe Datenbanken.
„Cloudian ist stolz darauf, an der Spitze der Transformation zu stehen, wie Unternehmen und KI-Hyperscaler Daten nutzen, um die Kraft der KI zu realisieren“, sagte Michael Tso, CEO von Cloudian. „Zu lange waren KI-Nutzer mit der unnötigen Komplexität und den Leistungsengpässen veralteter Speicherlösungen belastet. Mit der Integration von GPUDirect Storage ermöglichen wir es KI-Workflows, direkt auf eine einfach skalierbare Speicherarchitektur zuzugreifen, sodass Organisationen das volle Potenzial ihrer Daten ausschöpfen können.“
„Bei Supermicro setzen wir uns dafür ein, die fortschrittlichsten und effizientesten Lösungen für KI und Deep Learning bereitzustellen“, sagte Michael McNerney, SVP Marketing und Netzwerksicherheit. „Cloudians Integration von NVIDIA GPUDirect Storage in die HyperStore-Reihe von Objektspeicher-Appliances, die auf Supermicro-Systemen basieren, einschließlich der Hyper 2U- und 1U-Server, der hochdichten SuperStorage-90-Bay-Speicherserver und der Simply Double 2U-24-Bay-Speicherserver, stellt eine bedeutende Innovation in der Nutzung von Objektspeicher für KI-Workloads dar. Dies wird unseren gemeinsamen Kunden ermöglichen, leistungsfähigere und kosteneffizientere KI-Infrastrukturen im großen Maßstab einzusetzen.“
„Schnelle, konsistente und skalierbare Leistung in Objektspeichersystemen ist entscheidend für KI-Workflows“, sagte Rob Davis, Vice President für Speichertechnologie bei NVIDIA. „Sie ermöglicht Echtzeitverarbeitung und Entscheidungsfindung, die für Anwendungen wie Betrugserkennung und personalisierte Empfehlungen unerlässlich sind.“
Vereinfacht das Datenmanagement, Exabyte-Skala eliminiert Datenmigration
Veraltete dateibasierte Speichersysteme in KI-Workflows erfordern häufige Datenverschiebungen zwischen Langzeit- und Hochgeschwindigkeitsspeicher, was die Verwaltung erschwert. Mit der Lösung von Cloudian erfolgen KI-Training und Inferenz direkt auf den Daten vor Ort, wodurch Workflows beschleunigt und häufige Migrationen eliminiert werden. Die unbegrenzte Skalierbarkeit von Cloudian HyperStore ermöglicht es KI-Datenlakes, auf Exabyte-Niveau zu wachsen, während die zentrale Verwaltung eine einfache, einheitliche Kontrolle über Multi-Rechenzentrums- und Multi-Tenant-Umgebungen sicherstellt.
Schneller Datendurchsatz für höhere GPU-Auslastung
NVIDIA GPUDirect Storage mit NVIDIA ConnectX und NVIDIA BlueField -Netzwerktechnologien optimiert die Datenübertragungsgeschwindigkeit, indem die direkte Kommunikation zwischen NVIDIA-GPUs und mehreren Cloudian-Speicherknoten ermöglicht wird, wodurch die CPU umgangen wird. Diese direkte parallele Datenübertragung sorgt für eine konsistente und skalierbare Leistung, die eine bessere GPU-Auslastung und geringere GPU-Kommunikationslatenz ermöglicht.
Reduzierte Speicherkosten
Das Management der enormen Datensätze, die für KI-Workflows benötigt werden, kann sowohl kostspielig als auch ressourcenintensiv sein. Die softwaredefinierte Plattform von Cloudian hilft, diese Herausforderungen zu bewältigen, indem die Notwendigkeit einer separaten Dateispeicherebene entfällt. Da KI-Workflows direkt innerhalb des objektbasierten Data Lakes ablaufen, können Organisationen das Datenmanagement vereinfachen und gleichzeitig die Betriebs- und Kapitalausgaben sowie die Gesamtkomplexität erheblich reduzieren.
Keine Kernel-Level-Modifikationen
GPUDirect für Objektspeicher erfordert keine anbietergetriebenen Kernel-Level-Modifikationen. Anders als Dateilösungen reduziert dieser Ansatz potenzielle Schwachstellen, die typischerweise mit Kernel-Änderungen verbunden sind. Durch den Verzicht auf solche Änderungen wird die Systemadministration vereinfacht, die Angriffsfläche verringert und das Risiko von Sicherheitsverletzungen gesenkt.
Integrierte Metadaten für Einfachheit und beschleunigte Suche
Metadaten verbessern KI-Workflows, indem sie eine schnelle Datenentdeckung, -wiederherstellung und -zugriffssteuerung ermöglichen. Cloudian beschleunigt KI-Datensuchen durch integrierte Metadatenunterstützung, die einfaches Tagging, Klassifizierung und Indexierung großer Datensätze ermöglicht. Im Gegensatz zu veralteten dateibasierten Systemen, die auf starre Verzeichnisstrukturen und separate Datenbanken zur Metadatenverwaltung angewiesen sind, verwaltet Cloudian Metadaten nativ innerhalb der Objektspeicherplattform, vereinfacht Workflows und beschleunigt KI-Trainings- und Inferenzprozesse.
Erhöhte Datensicherheit
Datenschutz und Sicherheit haben für Unternehmen, die KI einführen, höchste Priorität, wie von Forrester-Analysten festgestellt wurde. Cloudian geht auf diese Bedenken mit der umfassendsten Palette an Sicherheitsfunktionen der Branche ein. Dazu gehören erweiterte Zugriffskontrollen, Verschlüsselungsprotokolle, integriertes Schlüsselmanagement und S3 Object Lock zum Schutz vor Ransomware, um sicherzustellen, dass sensible KI-Daten während ihres gesamten Lebenszyklus sicher bleiben.
Cloudian HyperStore mit NVIDIA Magnum IO GPUDirect Storage-Technologie ist ab sofort verfügbar. Für weitere Informationen wenden Sie sich an Cloudian oder einen autorisierten Cloudian-Reseller.
Cloudian HyperStore mit NVIDIA Magnum IO GPUDirect Storage-Technologie ist ab sofort verfügbar. Für weitere Informationen kontaktieren Sie bitte Cloudian oder einen autorisierten Cloudian-Reseller.
Kundenzitate zur Unterstützung
„Bei Central Technology setzen wir uns dafür ein, innovative Lösungen zu erforschen, um unsere KI-Initiativen voranzutreiben“, sagte Sam Walsh, Regional Director bei Central Technology. „Die Integration von GPUDirect für Objektspeicher von Cloudian bietet eine leistungsstarke Möglichkeit, unser Datenmanagement zu optimieren und unsere KI-Workflows zu verbessern. Diese Technologie verspricht nicht nur verbesserte Skalierbarkeit und Leistung, sondern vereinfacht auch das Datenmanagement und passt perfekt zu unserem Ziel, die KI-Fähigkeiten zu verbessern und gleichzeitig die Infrastrukturkosten zu optimieren. Als führender Managed Service Provider auf nationaler Ebene sind wir bestens gerüstet, unsere Erkenntnisse und Prozesse zu nutzen, um maßgeschneiderte Lösungen für unsere Kunden anzubieten, während der KI-Markt weiterhin wächst.“
„Als Pioniere in der KI-gesteuerten Prozessoptimierung freut sich ControlExpert über die Integration von GPUDirect für Objektspeicher von Cloudian, insbesondere da wir bereits Cloudian S3 in unseren Betrieb integriert haben“, sagte Dr. Sebastian Schoenen, Director of Innovation & Technology bei ControlExpert GmbH. „Diese Technologie hat das Potenzial, unser Datenmanagement erheblich zu vereinfachen und unsere KI-Workflows durch die Reduzierung komplexer Datenmigrationen und den direkten, hochgeschwindigkeits-Zugriff auf unsere umfangreichen Datensätze zu beschleunigen. Dies passt perfekt zur Mission von ControlExpert, die digitale Transformation in unserer Branche voranzutreiben.“
„Bei Softsource vBridge haben wir aus erster Hand gesehen, wie Herausforderungen im Datenmanagement die KI-Einführung behindern können“, sagte David Small, Group Technology Officer von Softsource vBridge. „Cloudians GPUDirect für Objektspeicher wird den gesamten KI-Datenlebenszyklus vereinfachen, was der Schlüssel zur Demokratisierung von KI in verschiedenen Geschäftsfeldern sein könnte, sodass Unternehmen jeder Größe das Potenzial ihrer Daten nutzen können. Besonders freuen wir uns darüber, wie dies KI-Projekte für unsere mittelständischen Kunden beschleunigen könnte, die bisher der Meinung waren, dass Unternehmens-KI-Lösungen für sie unerreichbar sind.“
Für weitere Informationen besuchen Sie bitte Cloudian.com oder entdecken Sie Cloudians Einblicke zu GPUDirect in unserem neuesten Blogbeitrag.
Media Contact
Tanja Reichartz
treichartz@cloudian.com