Objektspeicher entwickelten sich im vergangenen Jahrzehnt zu einer Lösung für das plötzliche Aufkommen riesiger Mengen unstrukturierter Daten.
Unstrukturierte Daten lassen sich nur schwer in herkömmlichen Datenbanken organisieren, die einen stark strukturierten Ansatz bevorzugen. Soziale Medien, E-Mails, Fotos, Videos, Audiodateien und viele weitere moderne Daten sind größtenteils unstrukturiert.
Objektbasierter Speicher ist dank Vorteilen wie Skalierbarkeit und Flexibilität eine intelligente Möglichkeit, solche Daten in der Cloud oder vor Ort zu archivieren, zu sichern oder aufzubewahren. Objektspeicher ebneten den Weg für Speicher im Terabyte- und sogar im Petabyte-Bereich.
Hier sind einige der wichtigsten Trends, die Unternehmen und IT-Teams derzeit am Markt für Cloud-Objektspeicher beobachten:
1. Rasantes Wachstum
Objektspeicher, die vor einigen Jahren noch kaum eine Rolle spielten, haben inzwischen stark an Bedeutung gewonnen.
Unternehmen speichern inzwischen ungefähr genauso viele Daten in der Cloud wie lokal – laut IDC fast 80 PB pro Jahr.
„In den kommenden fünf Jahren werden 80 % dieser Daten unstrukturiert sein (also datei- und/oder objektbasierte Daten)“, sagte Eric Burgener, Analyst bei IDC.
„Die Wachstumsraten der Daten in der Public Cloud, angetrieben sowohl durch das Wachstum von Datei- als auch von Objektspeichern, lagen über den Wachstumsraten lokaler Speicher.“
Bei Objektspeichern gehören Archivierung und Content-Anwendungen zu den wichtigsten Workloads.
Zu den von Anwendern besonders geschätzten Funktionen von Objektspeichern gehören die Integration in beschleunigte Rechenplattformen, Quality of Service, die Integration in zahlreiche Tools und Software-Stacks für künstliche Intelligenz (KI) sowie die Unterstützung leistungsstarker Speicherebenen, die Flash-Medien nutzen.
2. Analysen im großen Maßstab
Vom Sog der Datengravitation bis hin zu strengeren Data-Governance-Vorgaben stellt die wachsende Datenmenge Organisationen, die sich an die Cloud-Transformation machen, weiterhin vor Herausforderungen.
Die Fähigkeit, Daten im großen Maßstab zu analysieren, bleibt jedoch eine zentrale Priorität, da Unternehmen nach Echtzeiterkenntnissen streben und ihre Daten besser nutzen wollen, sagte Rob Lee, CTO von Pure Storage.
Daher setzen Unternehmen zunehmend auf hybride Architekturen über Public und Private Clouds hinweg, um die Vorteile cloudbasierter Datenanalysen für kritische Datenbestände in ihrer gesamten IT-Landschaft zu nutzen.
So hat Pure Storage beispielsweise seine FlashBlade-Objektspeicherlösung auf die Data-Cloud-Plattform von Snowflake gebracht, um die Nutzung von Cloud-Analysen für lokale Daten zu verbessern und Unternehmen mehr Kontrolle und Flexibilität bei ihren Daten-Workloads zu bieten.
3. Speicheroptimierung
Wir stehen kurz vor dem Beginn des Zettabyte-Zeitalters der Datenspeicherung.
Laut IDC werden die weltweit gespeicherten Daten im Jahr 2022 fast 6 ZB erreichen.
Allein 1 ZB würde 55 Millionen Festplatten mit 18 TB (HDDs) oder 55 Millionen der neuesten LTO-9-Bandkassetten mit 18 TB erfordern.
Bei einer derart großen Datenmenge ist es entscheidend für den Wettbewerbsvorteil, die richtigen Daten am richtigen Ort, zur richtigen Zeit und zu den richtigen Kosten verfügbar zu machen. Genau hier kommt die Speicheroptimierung ins Spiel.
„Intelligentes Datenmanagement wird erforderlich sein und mehrere Speicherebenen, aktive Archive sowie innovative S3-kompatible Archivierungslösungen für Objektspeicher nutzen“, sagte Rich Gadomski, Tape Evangelist bei Fujifilm Recording Media USA.
„Nirgendwo wird dies deutlicher als in digitalen Langzeitarchiven und Hochleistungsrechenumgebungen, in denen lediglich teure Objektspeicher mithilfe einer S3-kompatiblen API auf kostengünstige Bandsysteme ausgelagert werden müssen.“
4. Ermöglichung hybrider Cloud-Architekturen
Angesichts des stetig wachsenden Drucks, Kosten zu sparen und schneller Innovationen hervorzubringen, benötigen Unternehmen dringend mehr Agilität, Flexibilität und Effizienz bei Public-Cloud-Diensten.
Da unstrukturierte Daten der größte, am schnellsten wachsende und am schwierigsten zu verwaltende Datensatz für die IT sind, möchten Unternehmen diese Daten unbedingt in die Cloud verlagern.
Leider können sich Daten nicht schneller bewegen als das Licht. Die Übertragung von 1 PB Daten über eine Verbindung mit 100 Mbit/s würde selbst unter idealen Bedingungen drei Jahre dauern. Selbst bei einer Geschwindigkeit von 1 Gbit/s würde die Migration mehr als vier Monate in Anspruch nehmen.
Von den Kosten für den Datenzugriff über Latenzen und unzureichendes Cloud-Know-how bis hin zu weiteren Hindernissen macht allein das Migrationsproblem eine vollständige Cloud-Migration für große Datensätze undurchführbar.
„Hybrider Cloud-Speicher ist ein attraktiver Kompromiss, mit dem Unternehmen ihre sensiblen und häufig verwendeten Daten aus Gründen des Datenschutzes und des einfachen Zugriffs lokal vorhalten und gleichzeitig ihre selten benötigten, nicht proprietären Daten in die Cloud verschieben können“, sagte Tanya Loughlin, Direktorin für Hitachi Content-Platform-Produktmarketing.
„In vielen Fällen investieren Kunden lieber in einen lokalen Dienst als in lokale Investitionsausgaben, um von einem Pay-per-Use-Modell zu profitieren. Ein Kunde verfügt beispielsweise über Daten (Bilder, Sprache, Video, Audio), während die Systeme für KI, ML und Bilderkennung zu teuer und komplex für den lokalen Betrieb sind.“
Diese Dienste sind in der Cloud verfügbar, und die Verarbeitung großer Datenmengen ist über diese Dienste deutlich kostengünstiger.
Statt sämtliche Daten in die Cloud zu verschieben, können Kunden Daten zur Verarbeitung vorübergehend in die Cloud übertragen und die Cloud-Daten löschen, sobald die Ergebnisse vorliegen. Objektspeicher werden genutzt, um in hybriden Cloud-Umgebungen schneller mehr Daten speichern zu können.
5. Kontrolle über die Cloud
Da die meisten Daten weder sensibel noch häufig genutzt werden, haben sich viele Unternehmen dafür entschieden, ihre weniger wertvollen Daten in einem vertretbaren Tempo und zu geringen Kosten in die Cloud auszulagern.
Wichtige und neue Daten können sie lokal speichern, um schnelle Schreibvorgänge, Zugriffe mit geringer Latenz sowie vollständige Kontrolle über Sicherheit, Compliance und Governance zu gewährleisten.
Die Frage ist nun jedoch, wie sich steuern lässt, was in die Cloud gelangt und was lokal bleibt. Wenn der IT für ihre Dateidaten nur die Verzeichnisstruktur, Dateinamen, Zeitpunkte des letzten Zugriffs und Ähnliches zur Verfügung stehen, wird es ihr schwerfallen sicherzustellen, dass die richtigen Daten zur richtigen Zeit am richtigen Ort sind.
Hier macht ein lokaler Objektspeicher hybriden Cloud-Speicher zur Realität. Objektspeicher bringen Cloud-Speicher in die Rechenzentren der Kunden und bieten dieselben Funktionen, die Anwender von Cloud-Speichern erwarten: mühelosen Datenschutz, zuverlässige Datenverfügbarkeit, enorme Skalierbarkeit, einfache Verwaltung und geringere Kosten als herkömmliche Dateidienste.
„Die besten Objektspeicher für eine hybride Cloud-Speicherarchitektur verfügen über integrierte oder eingebundene Tools wie Content-Indizierung, Metadatenextraktion und Storage-Tiering. Sie liefern die nötige Intelligenz, um Daten automatisch über lokale Flash-, Festplatten- und Wechselmedien-Speicherebenen sowie mehrere Cloud-Dienste hinweg zu verwalten – damit die IT vollständige Transparenz und Kontrolle über ihre Daten hat, unabhängig davon, wo diese gespeichert sind“, sagte Loughlin von Hitachi Vantara.