Was ist Speichertestung? Arten, Concepts & Beispiel

⚡ Intelligente Zusammenfassung

Bei Speichertests wird überprüft, ob eine Anwendung ihre Daten in die richtigen Verzeichnisse schreibt und über genügend Speicherplatz verfügt, um unerwartete Beendigungen zu vermeiden. Gleichzeitig wird gemessen, wie schnell der zugrunde liegende Speicher unter realistischer Last reagiert.

  • 💾 Auch genannt: Speicherleistungstests, denn Geschwindigkeit ist genauso wichtig wie die korrekte Platzierung.
  • ⚠️ Warum es darauf ankommt: Langsame Speicher führen zu langsamen Antwortzeiten, langlaufenden Abfragen und geringerer Anwendungsverfügbarkeit.
  • 🧩 Drei Arten: Anwendungstests, Anwendungssimulationen und Benchmarking, jede mit ihren eigenen Aktivitäten.
  • 📏 Kernkennzahlen: IOPS, Latenz, Durchsatz und Warteschlangenlänge sollten immer zusammen und nicht isoliert betrachtet werden.
  • 🧪 Und so läuft es: Definiere Ziele, bestimme die Größe des Datensatzes, wähle realistische Lese-/Schreibverhältnisse und steigere dann die Last.
  • ️ Werkzeug: Synthetische I/O-Generatoren erzeugen wiederholbare Zahlen, die mit Dateikopierbefehlen niemals erzeugt werden können.
  • 🚫 Häufige Fehler: Den falschen Server überwachen, überspringenping Cache-Löschung und Ignorieren der Prozessorauslastung.

Tutorial zum Testen von Speichersystemen: Typen, Konzepte und häufige Fehler

Was ist Speichertesting?

Lagertests ist eine Art Softwaretest, der überprüft, ob die zu testende Softwareanwendung die relevanten Daten in den entsprechenden Verzeichnissen speichert und ob genügend Speicherplatz vorhanden ist, um unerwartete Abstürze aufgrund von Speicherplatzmangel zu verhindern. Er wird auch als Test bezeichnet. Speicherleistungstests.

Die Technik gehört zum nicht-funktionalen Bereich der Disziplin: wie andere Formen von nicht-funktionale TestsEs sagt nichts darüber aus, ob eine Funktion die richtige Antwort liefert, sondern alles darüber, ob das System auch bei steigendem Datenvolumen und zunehmendem E/A-Druck weiterhin Antworten liefern kann.

Warum Speichertests?

Der Speicher ist die langsamste Schicht, die die meisten Anwendungen nutzen, daher macht sich eine Schwachstelle dort überall bemerkbar. Vier Gründe rechtfertigen einen dedizierten Testzyklus.

  • Langsamer Speicher bedeutet langsame Antwortzeiten, langlaufende Abfragen und geringere Anwendungsverfügbarkeit.
  • Langsame Speicherkapazität stellt einen zusätzlichen Aufwand für die Wartung der Serverinfrastruktur dar.
  • Es hilft, die praktischen Speichergrenzen des Systems vor der Inbetriebnahme zu ermitteln.
  • Es ist hilfreich zu verstehen, wie das System reagiert, wenn ein Hardwaregerät ausgetauscht oder aufgerüstet wird.

Das untenstehende Diagramm stellt Speichertests in diesen Kontext – die Anwendung, das Dateisystem und das physische Gerät befinden sich alle auf demselben Pfad, und eine Verzögerung an irgendeiner Stelle dieses Pfades erreicht den Benutzer.

Übersicht der Speichertests: Eine Anwendung schreibt Daten über das Dateisystem auf das Speichermedium.

Arten von Speichertests

Es werden drei Ansätze verwendet, die sich hauptsächlich darin unterscheiden, wie genau die Arbeitslast der realen Anwendung entspricht.

  • Anwendungstests: Anwendungstests mit Beispielabfragen in einer produktionsähnlichen Umgebung.
  • Anwendungssimulation: Die Tests werden mit Standardsoftware durchgeführt, die sich ähnlich wie die Zielanwendung verhält.
  • Benchmarking: Die Tests werden mithilfe einer Standard-Benchmarking-Software durchgeführt, die eine synthetische, wiederholbare Arbeitslast erzeugt.

Die erste Methode liefert das realistischste Ergebnis, ist aber am wenigsten portabel; die dritte Methode liefert Zahlen, die geräte- und herstellerübergreifend vergleichbar sind, sagt aber wenig darüber aus, wie sich die Anwendung selbst verhalten wird.

Gemeinsame Tests Concepts Beteiligung an den Lagerungstests

Jeder dieser drei Typen lässt sich einer bestimmten Reihe von Aktivitäten zuordnen, die im Folgenden zusammengefasst werden.

Arten von Speichertests Beispiel für gängige Speichertestaktivitäten
Anwendungstests Vergleichen Sie die OLTP-Antwortzeiten
Vergleichen Sie die Batch-Laufzeiten
Vergleichen Sie nachhaltige Streaming-Raten
Anwendungssimulation Testen Sie Spitzenspeicher-IOPS für Datenbanken
Testen Sie den maximalen Speicherdurchsatz für Datenstreaming-Umgebungen
Testen Sie die Speicherlatenz für Messaging- oder andere Single-Thread-Anwendungen.
Benchmarking Prüfung auf Datenbeschädigung

Wichtige Kennzahlen beim Speichertest

Die Speicherergebnisse werden anhand weniger Kennzahlen dargestellt. Die Betrachtung einer einzelnen Kennzahl führt schnell zu einer falschen Schlussfolgerung, da die Kennzahlen sich gegenseitig beeinflussen.

Metrisch Was es misst Dort, wo es am wichtigsten ist
IOPS Anzahl der pro Sekunde abgeschlossenen Lese- und Schreibvorgänge, unabhängig von der Größe Transaktionsdatenbanken und kleine zufällige Schreibvorgänge
Latency Zeit zwischen dem Beginn und dem Abschluss einer einzelnen E/A-Operation Messaging- und Single-Thread-Anwendungspfade
Durchsatz Datenvolumen, das pro Sekunde übertragen wird, üblicherweise in MB/s Stapelverarbeitung, Datensicherungen und Streaming-Workloads
Warteschlangentiefe Anzahl der gleichzeitig gestellten offenen Anträge Jeder Lauf, der die tatsächliche Parallelität widerspiegeln muss

Die Warteschlangenlänge verdient besondere Beachtung. Die Bearbeitung jeweils nur einer Anfrage führt zwar zu einer genauen Latenzzeit pro Anfrage, aber zu künstlich niedrigen IOPS- und Durchsatzwerten. Deshalb kann ein Gerät im Test langsam und im Produktivbetrieb schnell erscheinen – oder umgekehrt.

So führen Sie Speichertests durch

Ein Lagertest ist nur so zuverlässig wie die Bedingungen, unter denen er durchgeführt wurde. Die folgende Abfolge gewährleistet reproduzierbare Ergebnisse.

  • Schritt 1) ​​Definieren Sie das Ziel. Entscheiden Sie, ob der Testlauf die Datenbankbereitschaft nachweisen, die maximale Durchsatzrate ermitteln oder zwei Geräte vergleichen soll. Jedes Ziel erfordert eine andere Arbeitslast, und eine Vermischung dieser Ziele liefert Ergebnisse, die keine konkreten Maßnahmen ermöglichen.
  • Schritt 2) Den Datensatz realistisch dimensionieren. Ein Arbeitsdatensatz, der klein genug ist, um in den Cache zu passen, misst den Cache, nicht den Speicherplatz. Er sollte dem Produktionsdatenvolumen entsprechen oder die Cache-Größe zumindest deutlich übertreffen.
  • Schritt 3) Wählen Sie die Lese-/Schreibmischung und das Muster. Zufälliger und sequenzieller Zugriff verhalten sich auf demselben Gerät sehr unterschiedlich, ebenso wie 70/30-Lese-/Schreib-Verhältnisse und reine Schreibvorgänge. Verwenden Sie für das Verhältnis die Daten aus der Produktionsüberwachung und nicht die Standardeinstellungen.
  • Schritt 4) Warteschlangenlänge und Threadanzahl festlegen. Diese Parameter steuern, wie viele Anfragen gleichzeitig auf das Gerät gelangen. Notieren Sie sie daher bei jedem Ergebnis – ein ohne diese Parameter angegebener Wert kann nicht reproduziert werden.
  • Schritt 5) Cache leeren und aufwärmen. Zwischen den Durchläufen Server- und Gerätecaches löschen und anschließend das erste Intervall verwerfen, um die Werte im stationären Zustand und nicht die Werte beim ersten Zugriff zu vergleichen.
  • Schritt 6) Lange genug laufen lassen. Kurze Schreibzyklen verbergen den Schreibabfall, der auftritt, sobald der Schreibpuffer einer SSD erschöpft ist. Längere Schreibzyklen machen ihn sichtbar.
  • Schritt 7) Überwachen Sie den gesamten Stack. Erfassen Sie Prozessorauslastung, Speicher- und Netzwerkauslastung zusammen mit Speicherzählern, damit ein Engpass an anderer Stelle nicht fälschlicherweise als Speichergrenze interpretiert wird.
  • Schritt 8) Wiederholen und vergleichen. Führen Sie die identische Konfiguration mehrmals aus und speichern Sie die Protokolle; Leistungsunterschiede zwischen den Builds sind nur im Vergleich zu einer gespeicherten Basislinie sichtbar.

Da für jede lastabhängige Messung die gleiche Vorgehensweise gilt, werden diese Messreihen üblicherweise gemeinsam geplant mit Leistungstest und wird geplant, bevor der Release Candidate eingefroren wird.

Speichertestwerkzeuge

Werkzeuge lassen sich in zwei Gruppen einteilen, und die meisten Teams benötigen beide.

  • Synthetische I/O-Generatoren. Dienstprogramme wie GewindeIometer und Sysbench geben eine genau beschriebene Arbeitslast aus – Blockgröße, Lese-/Schreibverhältnis, Warteschlangenlänge und -dauer werden alle angegeben, sodass ein Durchlauf auf einem anderen Gerät exakt wiederholt werden kann.
  • Tools zum Laden von Anwendungen. Fahrer wie JMeter Die Anwendung selbst wird getestet, sodass der Speicher das gleiche Zugriffsmuster erkennt, das echte Benutzer erstellen, einschließlich der Abfragepläne und des Indexverhaltens, das ein synthetisches Tool nicht reproduzieren kann.

OperaSystemzähler vervollständigen das Bild. Unabhängig davon, welches Tool die Last erzeugt, müssen die Speicherwerte neben den Prozessor-, Speicher- und Netzwerkzählern abgelesen werden – verschiedene Speichertestverfahren, darunter Benchmark-Tests und VolumenprüfungSie sind auf diese vollständige Sichtweise angewiesen, um ein Ergebnis richtig zu interpretieren.

Fehler bei der Durchführung von Speichertests

Die meisten ungültigen Speicherergebnisse trace zurück zu einer kleinen Anzahl vermeidbarer Fehler.

  • Die Leistung des falschen Servers wird überwacht, daher beschreiben die Zahlen eine Maschine, die nicht getestet wird.
  • Beim Vergleich von Speichermedien ohne vorheriges Leeren des Server-Caches wird der Arbeitsspeicher anstatt der Festplattenspeicher gemessen.
  • Das Vergessen, die Prozessorauslastung während der Tests zu überwachen, führt dazu, dass ein prozessorbedingter Engpass hinter einem speicherbezogenen Symptom verborgen bleibt.
  • Testen der Speicherleistung mit Dateikopierbefehlen, die einsträngig, cache-unterstützt und nicht wiederholbar sind.

Häufig gestellte Fragen

Volumentest Die Speichertests erhöhen die Datenmenge, die eine Anwendung speichert, und beobachten, wie sich das Verhalten verschlechtert. Sie zielen auf die darunterliegende Geräteschicht ab und messen, wie schnell diese Daten geschrieben und gelesen werden können.

Alle Speicherorte, an die die Anwendung schreibt – Datenverzeichnisse, Protokoll- und temporäre Ordner, Upload-Ziele und Archivpfade – müssen überprüft werden, um sicherzustellen, dass die Datei am richtigen Ort landet und der freie Speicherplatz korrekt angezeigt wird.

Die Metriken bleiben gleich, jedoch werden die bereitgestellten IOPS-Grenzwerte, das Burst-Guthaben und die Anzahl der benachbarten Systeme mit hohem Rauschen hinzugefügt. Der Test sollte so lange laufen, bis das Burst-Guthaben aufgebraucht ist, da der Messwert sonst eine temporäre Zuteilung und nicht den stationären Zustand widerspiegelt.

Maschinelle Lernmodelle ermitteln normale IOPS- und Latenzkurven und kennzeichnen Abläufe, die davon abweichen, bevor ein Schwellenwert überschritten wird. Dieselben Modelle prognostizieren das Kapazitätswachstum, sodass die Erschöpfung der Festplatte vorhergesagt und nicht erst im Produktivbetrieb festgestellt wird.

GitHub-Copilot Er erstellt schnell Job-Dateien, Cache-Lösch-Wrapper und Ergebnis-Parsing-Skripte. Der Tester gibt weiterhin Blockgröße, Warteschlangenlänge und -dauer an, da diese Werte aus der Produktionsüberwachung und nicht aus einer Vorlage stammen.

Das ist ein gültiger Testfall, kein Zufall. Die Anwendung sollte warnen, den Leistungsabfall kontrolliert abfangen und den Zustand protokollieren, anstatt abzubrechen. Die Wiederherstellung nach einem vollen Festplattenspeicher gehört zu Wiederherstellungstests.

Üblicherweise unterschieden sich Cache-Status, Warteschlangenlänge oder Lauflänge. Auch der Zustand des Geräts spielt eine Rolle – eine frisch formatierte SSD schreibt schneller als eine, die bereits mehrfach beschrieben wurde.

Die Performance-Tests werden üblicherweise von Performance-Testern durchgeführt, wobei Infrastruktur- oder Datenbankadministratoren die Gerätekonfiguration und die Zugriffsmuster für die Produktion bereitstellen. Das Ergebnis ist nur dann nachvollziehbar, wenn beide Seiten bestätigen, dass die Arbeitslast realistisch war.

Fassen Sie diesen Beitrag mit folgenden Worten zusammen: