Von Paula Dallabetta

Es war eine dunkle und stürmige Nacht.
Das Telefon klingelt. Es ist das Büro.
Dein Herz sinkt vor Überraschung und Entsetzen.
Ihre Systeme sind nicht mehr im Speicher…

Dies ist ein Alptraumszenario für viele Speichersystemadministratoren. Sie tun alles, um Ihre Speicheranforderungen zu verstehen. Sie kaufen den Speicher, den Sie für nötig halten - sogar ein bisschen mehr (oder viel mehr), damit Sie etwas Spielraum für unvorhergesehene Szenarien haben. Dennoch werden Sie überrascht und es geht Ihnen der Speicher aus .

Eine Sache, die Systemadministratoren oft überrascht, ist die sogenannte "Small File Tax". Es stellt sich heraus, dass ältere Scale-Out-Speichersysteme beim Verwalten kleiner Dateien keine besonders gute Arbeit leisten. Mit klein meinen wir alles unter 128KB. Kleine Dateien belegen das Zwei- bis Dreifache des erwarteten Speichers - das ist eine ziemlich hohe Steuer, wenn es viele davon gibt.

Dies liegt daran, dass diese Systeme auf einem jahrzehntealten Design basieren, das sie zwingt, Dateien unter einem 128KB-Schwellenwert zu spiegeln (oder doppelt zu spiegeln, manchmal sogar dreifach zu spiegeln). Bei der Spiegelung kleiner Dateien wird nicht nur eine äußerst ineffiziente Codierung verwendet, der dafür erforderliche Speicherplatz wird auch von dem abgezogen, was der Anbieter häufig als nutzbare Kapazität angibt. Ein vorheriger Blog-Beitrag enthält nähere Informationen dazu („Kann ich 100% meiner Kapazität wirklich nutzen? Mit Qumulo lautet die Antwort Ja!").

Die Spiegelung ist äußerst ineffizient, da lediglich zwei oder drei vollständige Kopien der zu schützenden Daten erstellt werden, die sich auf verschiedenen Datenträgern befinden. Dies ist zwar im Hinblick auf den Datenschutz wirksam, reduziert jedoch den verfügbaren Speicherplatz bei Doppelspiegelung um die Hälfte und bei Dreifachspiegelung um zwei Drittel. Im Terabyte-Bereich ist dies unglaublich ineffizient. Im Petabyte-Bereich ist es verwunderlich, dass ein Anbieter von Ihnen verlangt, dass Sie die Hälfte bis zwei Drittel Ihres Speichers für den Datenschutz verwenden.

Es gibt einen Weg, diesen Albtraum zu beenden.

Im Maßstab ist es ineffizient, kleine Dateien einfach durch Erstellen von Kopien zu schützen. Qumulo verstand das schon früh. Wir haben einen grundlegend anderen Ansatz für den Datenschutz entwickelt, bei dem der Schutz auf Block- und Dateiebene erfolgt. Durch die Verwendung unserer benutzerdefinierten Löschcodierung auf Blockebene und nicht auf Dateiebene können Daten effektiv geschützt werden, ohne dass eine Eins-zu-Eins-Kopie des gesamten Datenvolumens erstellt werden muss.

Wenn Sie nicht auf Dateiebene, sondern auf Blockebene arbeiten, müssen Sie nicht jede Datei einzeln schützen. Stattdessen werden Blockdaten in teilweise redundante Segmente codiert, die auf unterschiedlichen physischen Medien gespeichert werden.

Beim Verwalten kleiner Dateien bietet der Schutz auf Blockebene eine Speichereffizienz von bis zu 40 Prozent, die über den dateibasierten Schutz hinausgeht. Sie erhalten sogar eine 20-prozentuale Steigerung der Effizienz bei großen Dateien. In der Tat können Sie Milliarden kleiner Dateien genauso effizient speichern wie große.

Hier ist ein Beispiel für die Steuer für kleine Dateien, die von einem echten Qumulo-Kunden vor Ort erhoben wurde.

Altes Wettbewerbersystem Vor Migration Qumulo Hybrid Cloud-Dateispeicher Nach Migration

Dieser Kunde hat ungefähr 30 Millionen kleine Dateien von einem älteren Speichercluster auf einen Qumulo-Cluster migriert. Das Dialogfeld auf der linken Seite (Legacy-Wettbewerbersystem - Vor der Migration) zeigt den Speicherplatz an, den diese Dateien auf dem System des Legacy-Anbieters in Anspruch genommen haben. Es spiegelt kleine Dateien wider. Das Dialogfeld auf der rechten Seite (Qumulo Hybrid Cloud-Dateispeicher - Nach der Migration) Zeigt den Speicherplatz an, den die Dateien im Qumulo-Cluster belegen.

In diesem Beispiel aus der Praxis sehen Sie das Ergebnis der Steuer auf kleine Dateien des Vorgängerverkäufers: Speichern dieser Dateien belegt mehr als das Dreifache des gespeicherten Benutzerdateibytes an nutzbarem Speicherplatz! Das Speichern von 33.2TB Dateidaten erforderte 9.33TB Nutzkapazität. Im Qumulo-Cluster wurde nur 9.49TB benötigt. Qumulo eliminiert die Steuer auf kleine Dateien und speichert kleine Dateien genauso effizient wie große Dateien.

Sie fragen sich möglicherweise: "Welche Auswirkungen hat diese Steuer auf kleine Dateien auf meinen Speicher?"

Bei älteren Systemen ist es unmöglich zu sagen, wie viel Speicherplatz Sie verwenden, es sei denn, Sie wissen im Voraus, wie groß jede zu schreibende Datei genau ist, wie viele die 129KB-Schwelle unterschreiten und rechnen anschließend mit jeder Datei. Sprechen Sie über einen Albtraum, besonders wenn Sie mit Milliarden von Dateien zu tun haben!

Infolgedessen ist es unmöglich zu wissen, wie viel Kapazität Sie tatsächlich haben - oder wann Ihnen die Kapazität ausgeht. Stattdessen müssen Sie eine Überversorgung sicherstellen, um sicherzustellen, dass Sie abgesichert sind. Das bedeutet, dass Sie auf zwei Arten Geld verschwenden: Zum einen für die „nutzbare“ Kapazität, die Sie durch die Steuer auf kleine Dateien verlieren, und zum anderen für die zusätzliche Kapazität, die Sie kaufen.

Mit Qumulo können Sie viel einfacher abschätzen, wie viel Speicherplatz Sie benötigen. Anstatt auf das Beste zu hoffen oder mit komplexen Schätzungen der Mischung aus großen und kleinen Dateien in Ihren Workloads zu ringen und zu hoffen, dass sie nicht zu weit vom Ziel entfernt sind, können Sie einfach auf der Web-Benutzeroberfläche nachsehen, wie viel Speicherplatz verfügbar ist . Ihre gespeicherten Dateien belegen den gleichen Speicherplatz, unabhängig davon, wie viele groß oder klein sind. Keine "Small File Tax". Keine Überraschungen. Kein Überkauf. Keine Überversorgung.

Qumulo bietet auch die Möglichkeit, die Leistung, Kapazität und Nutzung in Echtzeit zu überwachen, selbst wenn die Anzahl der Dateien in Milliardenhöhe liegt. Mit unserer Echtzeitanalyse können Sie Einblicke gewinnen und Probleme vermeiden, bevor sie auftreten. Darüber hinaus können Sie das zukünftige Wachstum effizient planen. Dank aktueller Analysen können Administratoren Probleme schnell lokalisieren und die Speichernutzung effektiv steuern.

Stellen Sie bei der Bewertung von Speicherlösungen sicher, dass Sie die Auswirkungen des Datenschutzes (AKA, Small File Tax) auf kleine Dateien verstehen. Fragen Sie, ob und wie oft kleine Dateien gespiegelt werden. Überlegen Sie, ob Sie doppelt so viel oder sogar dreimal so viel Speicher kaufen, wie Sie tatsächlich benötigen.

Beende jetzt deinen Storage-Albtraum. Suchen Sie nach einer Dateispeicherlösung, die Ihre Daten unabhängig von der Größe der Dateien effizient verwaltet. Qumulo bietet die Transparenz, Vorhersagbarkeit und Leistung, die Sie für die moderne Datenspeicherung im digitalen Zeitalter benötigen.

Teilen Sie mit Ihrem Netzwerk

GET A DEMO