Vad är benchmarktestning?

Innan vi lär oss Benchmark Testing, låt oss förstå-

Benchmark i prestandatestning

A Benchmark i prestandatestning är ett mått eller en referenspunkt mot vilken mjukvaruprodukter eller tjänster kan jämföras för att bedöma kvalitetsmåtten. Med andra ord betyder Benchmark en fastställd standard som hjälper till att bestämma kvaliteten på en mjukvaruprodukt eller tjänst. Vi kan jämföra en mjukvaruprodukt eller tjänst för att bedöma dess kvalitet.

Till exempel har ett fotbollslag ett riktmärke för att en spelare ska kvalificera sig som en Premier League-spelare. Färdigheten för riktmärket kan vara ett antal gjorda mål under de senaste fem säsongerna, eller bollinnehav under den första halvleken, eller ett minsta antal matcher spelade i den lokala turneringen, etc.

Vad är benchmarktestning?

Benchmark Testing mäter en repeterbar uppsättning kvantifierbara resultat som fungerar som en referenspunkt mot vilken produkter/tjänster kan jämföras. Syftet med benchmarktestresultat är att jämföra nuvarande och framtida programvaruversioner med deras respektive benchmarks.

Ett riktmärke måste vara repeterbar. Till exempel, med varje iteration av belastningstestet, om svarstiderna varierar för mycket, måste systemets prestanda benchmarkas. Responstiden måste vara stabil mellan olika belastningsförhållanden.

Ett riktmärke måste vara kvantifierbar. Till exempel kan användarupplevelsen inte kvantifieras i siffror, men den tid en användare spenderar på en webbsida på grund av bra användargränssnitt kan kvantifieras.

Benchmark Testing är inte en term relaterad till bara mjukvarutestning, utan den handlar också om Hardware Testing och anses vara en av de viktigaste uppgifterna i näringslivet.

I den här handledningen kommer vi att diskutera riktmärken för en klient-serverapplikation eller, med andra ord, en webbapplikation. Benchmark-testningen kan göras för följande tjänster,

• Webbläsarkompatibilitet
• Broken Links
• HTML-överensstämmelse
• Laddningstid
• Tillgänglighet
• Länk popularitet

Varför benchmarktestning är viktigt

På affärsnivå kan benchmarktestning vara till hjälp för att fastställa

• Hur bra presterar en webbaserad applikation i förhållande till konkurrenterna
• Hur olika typer av kunder upplever svarstiden och tillgängligheten för en webbplats
• Det säkerställer att webbplatser följer standarder och bästa praxis
• Det gör det möjligt att utvärdera tredjepartsleverantörer innan man gör en överenskommelse.tracbeslut
• Gör det möjligt att lista ut de misstag som ska undvikas

Skapa en benchmarktestplan

En testplan är den mest avgörande delen av benchmarktestprocessen. Benchmark-testplanen följer stegen nedan-

1. Skala och anropa arbetsbelastning
2. Samla in och lagra mått för benchmarktestning
3. Definiera den tid som krävs och slutpunkten för en testprocess
4. Förbered en backupplan för att övervinna eventuella nya testfallsfel
5. Besluta myndigheten att kalla uppsägning av slutprocessen

Hur man gör benchmarktestning

Det finns fyra faser involverade i Benchmark Testing:

Steg 1) Planeringsfas

• Identifiera och prioritera standarder och krav
• Bestäm benchmarkkriterier
• Definiera benchmark testprocess

Steg 2) Analysfas

• Identifiera grundorsaken till felet för att förbättra kvaliteten
• Sätta upp mål för testprocessen

Steg 3) Integrationsfas

• Dela resultat med den berörda personen och få godkännande
• Sätt upp funktionella mål

Steg 4) Åtgärdsfas

• Ta fram testplan och dokumentation
• Genomför åtgärder som specificerats i tidigare faser och övervaka framstegen
• Kör processen kontinuerligt

Komponenter i benchmarktestning

Olika system har olika grad av komplexitet och kräver olika tekniker för att testa applikationer.

Det finns tre huvudkomponenter i Benchmark Testing. Dom är

1. Arbetsbelastningsspecifikationer: Fastställande av typen och frekvensen av förfrågningar som ska skickas till systemet som testas.
2. Specifikationer för mätvärden: Bestäm vilket element som ska mätas t.ex.; Nedladdningshastighet
3. Mätspecifikation: Bestämma hur de specificerade elementen ska mätas för att hitta lämpliga värden

Saker att tänka på vid benchmarktestning

För att genomföra framgångsrika benchmarktestning måste följande fakta beaktas.

• Konsekvens och kontroll är viktiga åtgärder för att utföra benchmarktestning.
• Förstå systemarkitekturen för att utforma testkriterier och testdata
• Granska initiala statiska data och uppdatera enligt antalet användare
• Kontrollera om det finns "Återställ"-funktioner där det behövs och definiera transaktionshastighet per sekund (detta handlar specifikt om användarnas transaktioner mot en databas)
• Dela upp systemelementen enligt dess funktionalitet
• Varje system har olika arkitektur och design, vilket måste tas i beaktande när man utför benchmarktestning
• Se till att alla programvarukomponenter är i fungerande skick
• Operativsystemet och stödjande drivrutiner bör fungera korrekt
• Ta bort förhämtning och temporära filer från systemet innan du kör ett benchmark
• Stäng alla processer och applikationer som körs i bakgrunden
• Sök efter operativsystemuppdateringar och verkliga konfigurationer

Benchmark Testing Frameworks

Benchmark Testing Frameworks hjälper till att utföra några grundläggande uppgifter för prestandakontroller. Dessa grundläggande uppgifter inkluderar-

1. Databasåtkomst
2. Komposition på serversidan
3. JSON serialisering
4. konfiguration

Benchmark Framework 2.0 & TechEmpower används oftast Benchmark Testing-ramverk.

Låt oss ta en titt på TechEmpower. Vi kommer att ha en snabb blick på dess framträdande egenskaper.

• Det är ett ramverk med öppen källkod för att utföra benchmarkuppgifter
• Den behöver korrekt konfiguration av benchmarkingmiljön
• Det finns främst två lägen som t.ex Benchmark-läge för att jämföra resultat och Verifiera läge för dem som inte är experter
• Det krävs flera filer som är unika och kan variera från system till system
• Den innehåller en "Benchmark Config File" som definierar en uppsättning testinstruktioner och metadata för ett benchmarkprogram
• Den bygger på flera språk som t.ex Java, Python, Ruby, PHP, JavaScript, Perl, C, Groovy, Haskell, Scala, etc.
• Object – Relational Mapper (ORM) används för att utföra tester på databaser, JSON Serialization, etc.

Benchmark testverktyg

Benchmark-testverktyg kategoriseras därefter. Vi värvar en efter en.

Verktyg för testning Windows PC:er:

1. Prime95
2. Novabench
3. 3DMark
4. SiSoftware Sandra

Verktyg för att testa CPU-prestanda:

1. Cinebench
2. Geekbench

Verktyg för att testa systemets hastighet och batterier för mobila enheter:

1. Phoronix (Linux)
2. CPU UserBenchmark (CPU Benchmark-test)
3. Vellamo (prestanda för webbsurfning)

Benchmark Testing kan också utföras med Android telefoner och surfplattor. Bland alla, Godkänt är ett välkänt och allmänt använt Benchmark Testing-verktyg.

Hur detta test passar in i prestationstestfamiljen

Prestandatestning är ett paraplybegrepp. Varianterna nedan skiljer sig endast åt i formen av den applicerade belastningen och hur länge den hålls, vilket är anledningen till att de så ofta förväxlas med varandra.

Testtyp	Lastmönster	Fråga den svarar
Lasttestning	Förväntad toppbelastning, kort varaktighet	Uppfyller systemet sina mål under normal trafikbelastning?
Stresstestning	Ökade utöver kapaciteten tills fel uppstod	Var går det sönder, och fallerar det graciöst?
Spike testning	Plötslig extrem ökning, sedan tillbakadragande	Överlever och återhämtar den sig från en trafikchock?
Uthållighetstestning	Normal belastning hålls i många timmar	Försämras prestandan med tiden?
Blötläggningstestning	Ihållande belastning under en längre period	Finns det minnesläckor eller resursutmattning?
Stabilitetstestning	Varierande belastning beroende på förhållanden	Förblir systemet tillförlitligt även när förhållandena förändras?
Volymtestning	Vanliga användare, mycket stor datamängd	Klarar den sig av att databasen växer?

Uthållighets- och blötläggningstestning behandlas ofta som synonymer. Vanligtvis används de som: båda håller en ihållande belastning under en lång period. Där team skiljer dem åt fokuserar uthållighetstestning på om svarstiderna glider uppåt, medan soak-testning fokuserar på resursförbrukning som minne, filreferenser och anslutningspooler. Att köra en ger dig vanligtvis bevis för båda.

Benchmarktestning: Viktiga slutsatser

• Inom mjukvaruteknik ger Benchmark Testing en repeterbar uppsättning kvantifierbara resultat på ett systems prestanda.
• Användbar för att utöva belastningsförhållanden och bestämma systemets beteende mot DDoS-attacker.
• Arbetsbelastningsspecifikationer, mätvärden och mätningsspecifikationer är viktiga komponenter i benchmarktestning.
• Flera verktyg och ramverk används för att utföra benchmarktestning snabbt och effektivt.
• Benchmark Testing är också användbart för mobila enheter.

Vanliga frågor