NexGen-Speicherplattform – WekaFS™ mit Cloudian HyperStore

Cloudian HyperStore und das Weka-Dateisystem bieten eine hochleistungsfähige Speicherlösung für die Verarbeitung iterativer, analytischer Workloads mit einem exabytegroßen, kostengünstigen privaten Cloud-Speicherpool – alles einfach unter einem einzigen Namespace verwaltet, für optimierte betriebliche Abläufe.

Herausforderungen

Unternehmen verbrauchen und erzeugen mehr Daten als je zuvor. Daher wenden viele KI/ML auf diese großen Datensätze an, um bessere Entscheidungen in Beinahe-/Echtzeit zu treffen und neue Einnahmequellen zu erschließen. Diese fortschrittlichen analytischen Workloads erzeugen und nutzen riesige Datensätze, die neue Herausforderungen an die Datenspeicherung stellen. Herkömmliche Speichersysteme können die Verarbeitungsanforderungen oder die Skalierbarkeit, die für iterative Analyse-Workloads erforderlich sind, einfach nicht bewältigen. Dies führt zu Engpässen bei der Produktivität und datengesteuerten Entscheidungsfindung. Somit ist die größte Herausforderung für Unternehmen heute, zeitnahe Erkenntnisse aus Daten zu gewinnen und gleichzeitig das schnelle Wachstum dieser strategischen Ressource managen zu müssen.

Lösung

Mit der integrierten Speicherlösung von WekaFS und Cloudian HyperStore™ können Sie die Herausforderungen meistern, die mit der Beschleunigung und Skalierung Ihrer Datenpipeline verbunden sind. Gleichzeitig senkt sie die mit der Datenanalyse verbundenen Speicherkosten insgesamt. WekaFS ist ein verteiltes, skalierbares und POSIX-konformes Dateisystem, das auf einer modernen Architektur mit NVMe-Flash basiert und Ethernet- oder InfiniBand-Transport unterstützt, mit niedriger Latenz und Hochleistungszugriff über mehrere Protokolle (POSIX, NFS, SMB, S3, GPUDirect Storage, CSI). WekaFS verteilt die Metadaten im gesamten Cluster über patentierte Mechanismen, die Hotspots verhindern und so die Leistung maximieren. Die Leistung ist planbar, konsistent und mit linearer Skalierung, wenn weitere Hosts zum Speichercluster hinzugefügt werden. HyperStore von Cloudian ergänzt WekaFS und ist über die Tiering-Funktion von Weka integriert. So wird die Lösung um einen kostengünstigen, softwaredefinierten Objektspeicher mit Exabyte-Skalierung ergänzt. Cloudian ermöglicht ein unterbrechungsfreies, modulares Wachstum vom Terabyte-bis in den Exabyte-Bereich. Integrierte Funktionen für Datenredundanz bieten eine nahezu 100%ige Datenbeständigkeit („14 Nines“). Eine separate Datensicherung ist damit hinfällig.

Kombiniert vereinheitlichen und vereinfachen WekaFS und Cloudian Hyperstore die Datenpipeline für leistungsintensive Workloads und beschleunigte DataOps – das alles mit Gesamtbetriebskosten, die im Vergleich zu herkömmlichen Speichersystemen um 1/3 geringer sind.

1Weka-Cloudian integrated solution for high performance storage use cases

Hohe Leistungsfähigkeit
WekaFS ist eine Lösung mit extrem niedriger Latenz und hohem Durchsatz, die speziell für Umgebungen mit gleichzeitigen Workloads entwickelt wurde. Sie ist so konzipiert, dass sie Engpässe in Rechenclustern beseitigt und wertvolle Verarbeitungszeiten verkürzt. Somit eignet sie sich perfekt für iterative Arbeitslasten wie KI/maschinelles Lernen. WekaFS ist weltweit das schnellste gemeinsam genutzte parallele Dateisystem: Es ist 3× schneller als lokale Dateisysteme und 10× schneller als herkömmliche NAS.

Skalierbar
Cloudian HyperStore bringt die Flexibilität und Skalierbarkeit der Cloud in Ihr eigenes Rechenzentrum. Mit uns können Sie klein anfangen und nach Bedarf wachsen. Organisationen können HyperStore zunächst als kleine Konfiguration mit nur drei Speicherknoten implementieren und bedarfsgerecht bis auf mehrere tausend Knoten skalieren. Dabei kann es sich um physische oder virtuelle Knoten handeln, die auf branchenüblicher x86-Hardware ausgeführt werden. Im Gegensatz zu einigen anderen Systemen erfordert HyperStore keine identischen Knoten, sondern erlaubt das Hinzufügen von heterogenen Knoten jeder Größe. Damit ist eine Skalierbarkeit über mehrere Rechenzentren oder Einrichtungen weltweit gegeben.

Sicher
Mit den umfassenden Sicherheitsfunktionen der Lösung können Sie eine sichere Speicherlösung bereitstellen, die FIPS-, CFTC 4511-, SEC 17 a4- und Common Criteria-konform und auf Kapazitätsebene zertifiziert ist. Sicherheitsmerkmale:

• Datenverschlüsselung und transparente Schlüsselverwaltung
• Serverseitige Verschlüsselung nach AES-256 für ruhende Daten
• SSL-Verschlüsselung für Datenübertragungen (HTTPS)
• Rollenbasierte Zugriffssteuerung mit bestimmten Zugriffsebenen
• Granulare Speicherrichtlinien und Audit-Trails
• Datenintegrität durch Speicherung im unveränderbaren und nicht löschbaren WORM (Write Once Read Multiple)-Format
• Extrem kurze RTO, die eine nahezu sofortige Wiederherstellung von Dateien nach einem Ransomware-Angriff ermöglicht
• Flexible RPO-Planung, um sämtliche Anforderungen an den Schutz von Dateien zu erfüllen

Robust
Die Lösung bietet eine hohe Datenbeständigkeit mit der Option, Daten durch Replikation oder Erasure-Coding zu schützen und zu verteilen. Je nach SLA und Kostenziel lassen sich die Anzahl der Replikate oder das gewünschte EC-Schema konfigurieren. Die Speicherrichtlinien bieten außerdem eine granulare Kontrolle der Datenspeicherung über mehrere Rechenzentren hinweg, wobei Faktoren wie Kosteneffizienz, Sicherheitsebene und physische Nähe berücksichtigt werden.

Mandantenfähig
Die Lösung ermöglicht mehrere Benutzer auf einer gemeinsamen Infrastruktur, ohne die Sicherheit zu beeinträchtigen. Granulare Zugriffssteuerung und Audit-Protokollierungsfunktionen ermöglichen die Steuerung und logische Trennung des Datenzugriffs. Benutzer können auf sichere Weise auf Daten derselben Knoten zugreifen, ohne eine Beeinträchtigung des Betriebs. Administratoren können die Servicequalität zudem durch Beschränken der Nutzungsraten und durch Festlegen von Kontingenten für einzelne Gruppen oder Benutzer steuern.

Wirtschaftlich
Die Lösung läuft auf standardmäßiger x86-Hardware mit lokalen NVMeSSDs und senkt im Vergleich zum herkömmlichen Speicher die Speicherkosten für analytische Workloads um 1/3.