Ce este testarea stocării? Tipuri, Concepts & Exemplu

⚡ Rezumat inteligent

Testarea spațiului de stocare verifică dacă o aplicație își scrie datele în directoarele corecte și are suficient spațiu pe disc pentru a evita întreruperi neașteptate, măsurând în același timp cât de repede răspunde spațiul de stocare subiacent la o sarcină realistă.

  • 💾 Numit si: Testarea performanței stocării, deoarece viteza contează la fel de mult ca amplasarea corectă.
  • ⚠️ De ce conteaza: Stocarea lentă produce timpi de răspuns lenți, interogări cu rulare lungă și disponibilitate mai scăzută a aplicațiilor.
  • 🧩 Trei tipuri: Testarea aplicațiilor, simularea aplicațiilor și benchmarking, fiecare cu propriile activități.
  • 📏 Indicatori principali: IOPS, latența, debitul și adâncimea cozii sunt citite întotdeauna împreună, nu izolat.
  • 🧪 Cum rulează: Definiți obiectivele, dimensionați setul de date, alegeți combinații realiste de citire/scriere, apoi creșteți încărcarea.
  • 🛠️ scule: Generatoarele sintetice de I/O produc numere repetabile pe care comenzile de copiere a fișierelor nu le pot produce niciodată.
  • 🚫 Greșeli comune: Monitorizarea serverului greșit, săriți pesteping golirea memoriei cache și ignorarea utilizării procesorului.

Tutorial de testare a stocării care acoperă tipuri, concepte și greșeli frecvente

Ce este testarea stocării?

Testarea depozitării este un tip de testare software utilizat pentru a verifica dacă aplicația software testată stochează datele relevante în directoarele corespunzătoare și dacă are suficient spațiu pentru a preveni întreruperi neașteptate din cauza spațiului insuficient pe disc. Se mai numește și testarea performanței de stocare.

Tehnica se află pe latura nefuncțională a disciplinei: la fel ca alte forme de testarea nefuncțională, nu spune nimic despre dacă o caracteristică produce răspunsul corect și nimic despre dacă sistemul poate continua să producă răspunsuri pe măsură ce volumul de date și presiunea I/O cresc.

De ce testarea stocării?

Stocarea este cel mai lent strat atins de majoritatea aplicațiilor, așa că o slăbiciune a acestuia apare peste tot. Patru motive justifică un ciclu de testare dedicat.

  • Stocarea lentă înseamnă timpi de răspuns lenți, interogări cu rulare lungă și disponibilitate mai scăzută a aplicațiilor.
  • Stocarea lentă este o problemă suplimentară pentru întreținerea infrastructurii serverelor.
  • Ajută la identificarea limitelor practice de stocare ale sistemului înainte de implementare.
  • Ajută la înțelegerea modului în care sistemul reacționează atunci când un dispozitiv hardware este înlocuit sau actualizat.

Diagrama de mai jos plasează testarea stocării în acest context — aplicația, sistemul de fișiere și dispozitivul fizic se află toate pe aceeași cale, iar o întârziere oriunde pe aceasta ajunge la utilizator.

Prezentare generală a testării stocării care arată o aplicație care scrie date prin sistemul de fișiere pe dispozitivul de stocare

Tipuri de testare de stocare

Se utilizează trei abordări, iar acestea diferă în principal prin cât de mult se aseamănă volumul de lucru cu aplicația reală.

  • Testarea aplicației: Testarea aplicațiilor cu interogări eșantion într-un mediu de producție.
  • Simulare de aplicație: Efectuarea testelor folosind software standard care se comportă similar cu aplicația țintă.
  • Evaluare comparativă: Efectuarea testelor folosind un software standard de benchmarking care generează o sarcină de lucru sintetică, repetabilă.

Primul oferă cel mai realist rezultat și cel mai puțin portabil; al treilea oferă cifre care pot fi comparate între dispozitive și furnizori, dar spune puține despre cum se va comporta aplicația în sine.

Testare comună Concepts Implicat în timpul testării depozitării

Fiecare dintre aceste trei tipuri se referă la un set distinct de activități, așa cum este rezumat mai jos.

Tipuri de testare de stocare Exemplu de activități comune de testare a stocării
Testarea aplicației Comparați timpii de răspuns OLTP
Comparați durata de rulare a lotului
Comparați ratele de streaming susținute
Simulare aplicație Testați IOPS de stocare de vârf pentru baze de date
Testarea debitului maxim de stocare pentru mediile de streaming de date
Testați latența stocării pentru mesagerie sau alte aplicații cu un singur fir de execuție
Benchmarking Testarea corupției datelor

Metrici cheie în testarea stocării

Rezultatele stocării sunt raportate printr-un set mic de numere. Citirea oricăruia dintre ele separat este cea mai rapidă modalitate de a ajunge la o concluzie greșită, deoarece acestea se tranzacționează unele împotriva altora.

metric Ce măsoară Unde contează cel mai mult
IOPS Operațiuni de citire și scriere finalizate pe secundă, indiferent de dimensiune Baze de date tranzacționale și scrieri aleatorii mici
Latență Timpul dintre începerea și finalizarea unei singure operațiuni I/O Mesagerie și căi de aplicații cu un singur fir de execuție
tranzitată Volumul de date transferate pe secundă, de obicei în MB/s Execuții în loturi, copii de rezervă și fluxuri de lucru în flux continuu
Adâncimea cozii Numărul de cereri restante emise simultan Orice rulare care trebuie să reflecte concurența reală

Adâncimea cozii merită o atenție deosebită. Lansarea unei singure cereri odată produce o latență precisă pentru o singură cerere, dar o valoare artificial scăzută a IOPS-urilor și a debitului, motiv pentru care un dispozitiv poate părea lent într-un test și rapid în producție, sau invers.

Cum se efectuează testarea stocării

Un test de stocare este la fel de demn de încredere ca și condițiile în care a fost executat. Secvența de mai jos menține repetabilitatea rezultatelor.

  • Pasul 1) Definiți obiectivul. Decideți dacă rularea demonstrează disponibilitatea bazei de date, găsește un plafon de randament sau compară două dispozitive. Fiecare obiectiv implică o sarcină de lucru diferită, iar combinarea lor produce cifre pe baza cărora nimeni nu poate acționa.
  • Pasul 2) Dimensionați setul de date în mod realist. Un set funcțional suficient de mic pentru a încăpea în memoria cache măsoară memoria cache, nu spațiul de stocare. Potriviți volumul datelor de producție sau cel puțin depășiți dimensiunea memoriei cache cu o marjă largă.
  • Pasul 3) Alegeți combinația și modelul de citire/scriere. Accesul aleatoriu și secvențial se comportă foarte diferit pe același dispozitiv, la fel ca și mixajele de citire-scriere 70/30 și rafalele de scriere. Preluați mixajul din monitorizarea producției, nu dintr-o configurație implicită.
  • Pasul 4) Setați adâncimea cozii și numărul de fire de execuție. Acestea controlează câtă concurență ajunge la dispozitiv, așa că înregistrați-le cu fiecare rezultat - o cifră citată fără ele nu poate fi reprodusă.
  • Pasul 5) Ștergeți memoria cache și încălziți. Eliminați memoria cache a serverului și a dispozitivului între rulări, apoi eliminați primul interval, astfel încât numerele în stare stabilă să fie comparate în loc de cele de la prima atingere.
  • Pasul 6) Aleargă suficient de mult timp. Rulările scurte ascund prapastia de scriere care apare odată ce un SSD își epuizează buffer-ul de scriere. Rulările susținute o expun.
  • Pasul 7) Monitorizați întreaga stivă. Capturați utilizarea procesorului, a memoriei și a rețelei alături de contoarele de stocare, astfel încât un blocaj în altă parte să nu fie interpretat greșit ca o limită de stocare.
  • Pasul 8) Repetați și comparați. Rulați aceeași configurație de mai multe ori și păstrați jurnalele; abaterea de performanță între versiuni este vizibilă doar în raport cu o valoare de referință stocată.

Deoarece aceeași disciplină se aplică oricărei măsurători bazate pe sarcină, aceste rulări sunt de obicei planificate împreună cu test de performanta și programată înainte ca versiunea candidată la lansare să fie înghețată.

Instrumente de testare a stocării

Sculele se împart în două grupe, iar majoritatea echipelor au nevoie de ambele.

  • Generatoare sintetice de I/O. Utilități precum firIometer și sysbench generează o sarcină de lucru descrisă cu precizie — dimensiunea blocului, mixul de citire/scriere, adâncimea cozii și durata sunt toate declarate, astfel încât o rulare poate fi repetată exact pe un alt dispozitiv.
  • Instrumente de încărcare la nivel de aplicație. Șoferi precum JMeter să exerseze aplicația în sine, astfel încât spațiul de stocare să vadă același model de acces creat de utilizatorii reali, inclusiv planurile de interogare și comportamentul indexului pe care un instrument sintetic nu îl poate reproduce.

OperaContoarele sistemului ting completează imaginea. Indiferent de instrumentul care generează sarcina, cifrele de stocare trebuie citite lângă contoarele procesorului, memoriei și rețelei - mai multe tehnici de testare a stocării, inclusiv testarea de referință și testarea volumului, se bazează pe acea vizualizare full-stack pentru a interpreta corect un rezultat.

Greșeli la efectuarea testelor de stocare

Cele mai multe rezultate de stocare nevalide tracrevenim la un număr mic de erori evitabile.

  • Monitorizarea performanței greșite a serverului, astfel încât numerele descriu o mașină care nu este testată.
  • Compararea dispozitivelor de stocare fără a goli mai întâi memoria cache a serverului, ceea ce măsoară memoria în loc de disc.
  • Uitarea monitorizării utilizării procesorului în timpul testării, ceea ce ascunde un blocaj legat de procesor în spatele unui simptom în formă de spațiu de stocare.
  • Testarea performanței stocării cu comenzi de copiere a fișierelor, care sunt cu un singur fir de execuție, asistate de cache și nerepetabile.

Întrebări frecvente

Testarea volumului crește cantitatea de date pe care o aplicație o deține și urmărește degradarea comportamentului. Testarea stocării vizează stratul dispozitivului de sub acesta, măsurând cât de repede pot fi scrise și citite datele respective.

Fiecare locație în care aplicația scrie: directoare de date, foldere de jurnal și temporare, ținte de încărcare și căi de arhivare. Fiecare necesită verificarea faptului că fișierul ajunge în locul corect și că spațiul liber este raportat corect.

Metricile rămân aceleași, dar se adaugă limitele IOPS furnizate, creditele de rafale și vecinii zgomotoși. Rulează suficient de mult timp pentru ca creditul de rafale să fie epuizat, altfel cifra măsurată reflectă o toleranță temporară, mai degrabă decât o stare stabilă.

Modelele de învățare automată utilizează curbe de latență și IOPS normale de referință, apoi rulări de semnalizări care deviază înainte de depășirea unui prag. Aceleași modele prognozează creșterea capacității, astfel încât epuizarea discului este prezisă mai degrabă decât descoperită în producție.

Copilotul GitHub redactează rapid fișiere de lucru, golește memoria cache și analizează rezultatele. Testerul furnizează în continuare dimensiunea blocului, adâncimea cozii și durata, deoarece acestea provin din monitorizarea producției și nu dintr-un șablon.

Acesta este un caz de testare valid, nu un accident. Aplicația ar trebui să avertizeze, să se degradeze în mod corespunzător și să înregistreze condiția în loc să se termine. Recuperarea din starea de disc complet aparține... testarea de recuperare.

De obicei, starea memoriei cache, adâncimea cozii sau lungimea execuției diferă între ele. Condiționarea dispozitivului contează și ea - un SSD proaspăt formatat scrie mai repede decât unul care a fost umplut și rescris de mai multe ori.

Testerii de performanță îl execută de obicei, administratorii de infrastructură sau de baze de date furnizând configurația dispozitivului și modelele de acces pentru producție. Rezultatul este justificabil doar atunci când ambele părți sunt de acord că volumul de muncă a fost realist.

Rezumați această postare cu: