Yhteentoimivuuden testaus ohjelmistotestauksessa

Mitä yhteentoimivuuden testaus on?

Yhteentoimivuuden testaus on ohjelmistotestaustyyppi, joka tarkistaa, pystyykö ohjelmisto toimimaan vuorovaikutuksessa muiden ohjelmistokomponenttien ja -järjestelmien kanssa. Yhteentoimivuustestien tarkoituksena on varmistaa, että ohjelmistotuote pystyy kommunikoimaan muiden komponenttien tai laitteiden kanssa ilman yhteensopivuusongelmia.

Toisin sanoen yhteentoimivuustestaus tarkoittaa sen todistamista, että kahden kommunikoivan järjestelmän välinen kokonaisvaltainen toiminnallisuus on vaatimusten mukainen. Esimerkiksi yhteentoimivuustestaus tehdään älypuhelimien ja tablettien välillä Bluetoothin kautta tapahtuvan tiedonsiirron tarkistamiseksi.

Se luokitellaan eräänlaiseksi toiminnallinen testaus, koska se vastaa käyttäytymiseen liittyvään kysymykseen: saapuuko vaihdettu tieto perille ehjänä ja toimiiko vastaanottava järjestelmä sen perusteella oikein?

Ohjelmistojen yhteentoimivuuden eri tasot

Kaksi järjestelmää voi toimia yhdessä useilla eri syvyyksillä. Jokainen sitä alempi taso olettaa, että sitä ylempi taso jo toimii.

• Fyysinen yhteentoimivuus — itse yhteys muodostetaan esimerkiksi Bluetoothin, Wi-Fin, USB:n tai langallisen verkkoyhteyden kautta.
• Tietotyyppinen yhteentoimivuus — molemmat osapuolet koodaavat ja dekoodaavat samoja alkeistyyppejä, merkistöjä ja tavujärjestystä.
• Erittelytaso Yhteentoimivuus — molemmat osapuolet toteuttavat samat viestimuodot ja protokollasäännöt, jotka on julkaistu spesifikaatiossa.
• Semanttinen yhteentoimivuus — molemmat osapuolet antavat vaihdetuille tiedoille saman merkityksen, joten kenttä, kuten ”lämpötila”, tulkitaan samassa yksikössä ja asiayhteydessä.

Miksi yhteentoimivuustestaus tehdään

Yhteentoimivuustestaus tehdään, koska

• Se varmistaa kokonaisvaltaisen palvelun tarjoamisen kahdelle tai useammalle eri toimittajien tuotteelle
• Ohjelmistotuotteen tulisi pystyä kommunikoimaan muiden komponenttien tai laitteiden kanssa ilman yhteensopivuusongelmia.

Yhteentoimivuustestauksen puutteeseen liittyvät riskit ovat

• Tietojen menetys
• Epäluotettava suorituskyky
• Epäluotettava toiminta
• Väärä toiminta
• Alhainen huollettavuus

Yhteentoimivuuden testaus

Yhteentoimivuustestauksen testausprosessi sisältää seuraavat vaiheet.

Vaihe 1: Käynnistä projekti.

• Määrittele ja virallista työsuunnitelma ja perusta projektinhallinnan infrastruktuuri.

Vaihe 2: Perusta testilaboratorio

• Varmista, että kaikki tarvittavat taidot ja automaatiotyökalut on määritetty testaustehtäviä varten
• Käytä automaatiotyökaluja testitapausten minimoimiseksi ja uudelleenkäyttämiseksi
• Ylläpidä määritystiedostojen tietokantaa
• Kirjaa ja analysoi projektin mittareita
• Tallenna konfiguraatio epäonnistuneista testeistä vertailua ja analysointia varten

Vaihe 3: Kehitä testisuunnitelma

• Kirjoita Testisuunnitelma
• Määritä testitapaukset ja -menettelyt
• Asenna tarvittavat valvontalaitteet testilokien ylläpitoa varten.

Vaihe 4: Suorita testisuunnitelma

• Suorita testitapaukset
• Työskentele testaustiimin kanssa analysoidaksesi epäonnistumisen perimmäisen syyn

Vaihe 5: Dokumentoi tulokset

• Käytä testilokeja toteutusmuistiinpanojen tallentamiseen

Vaihe 6: Vapauta resursseja ja arvioi projektin suorituskykyä,

• Analysoi testitulokset automaatiotyökalujen avulla

Esimerkkejä yhteentoimivuustestauksen testitapauksista

Alla oleva kaavio näyttää tyypillisen kahden toimittajan kokoonpanon: eri valmistajien laitteet on kytketty toisiinsa, ja jokainen niiden välinen vaihto on testitapaus.

Yhteentoimivuustestauksen testausstrategia sisältää

• Yhdistä kaksi tai useampia laitteita eri valmistajilta
• Tarkista laitteiden välinen yhteys
• Tarkista, voiko laite lähettää ja vastaanottaa paketteja tai kehyksiä toisiltaan
• Tarkista, käsitelläänkö tietoja oikein verkko- ja toimitilatasoilla
• Tarkista, toimivatko toteutetut algoritmit oikein
• Tulos ok: tarkista seuraava tulos
• Tulos ei ole ok: Käytä valvontatyökaluja virheen lähteen havaitsemiseen
• Raportoi tulos Testiraportointityökalussa.

Yhteentoimivuustestaustyökalut ja -tekniikat

Mikään yksittäinen tuote ei kata yhteentoimivuusmatriisia alusta loppuun. Useimmat tiimit yhdistävät pakettitason näkökulman, toiminnallisen näkökulman ja tavan korvata kumppanijärjestelmiä, joita ei ole saatavilla laboratoriossa.

Työkalujen ohella esiintyy kolme tekniikkaa: parittainen testaus toimittajayhdistelmämatriisin pitämiseksi hallittavana, negatiivinen testaus virheellisesti muotoilluilla tai version ulkopuolisilla viesteillä ja protokollatason lokikirjaus, jotta virhe voidaan havaita. tracjuuri siihen kehykseen, joka meni rikki.

Yhteentoimivuustestauksen parhaat käytännöt

Yhteentoimivuusongelmat ovat kalliita, koska ne tulevat esiin myöhään, jonkun toisen ympäristössä. Alla olevat käytännöt pitävät matriisin hallinnassa.

• Ylläpidä yhteensopivuusmatriisia joka listaa kaikki laitemallit, laiteohjelmistoversiot ja protokollaversiot, ja päivittää sen jokaisessa julkaisussa.
• Testaa yhteensopivuutta taaksepäin ja eteenpäin, ei vain uusin pari. Vanhemmat ikätoverit pysyvät kentällä vuosia.
• Anchor julkaistun standardin mukaiset testitapaukset kuten IEEE-, ISO-, IETF- tai toimialaprofiili, joten ”hyväksytty” tarkoittaa, että molemmat toimittajat hyväksyvät sen.
• Automatisoi ja suorita jatkuvasti CI-putken sisällä, koska kumppanipäivitys voi rikkoa eilen hyväksytyn parituksen.
• Simuloi ennen ostamista — emulaattorit kattavat laajan joukon edullisesti, ja fyysiset laboratoriot vahvistavat sitten riskialttiimmat yhdistelmät.
• Versiohallinta jokaisessa kokoonpanossa joten epäonnistunut ajo voidaan toistaa tarkasti.
• Testaa heikentyneet olosuhteet mukaan lukien aikakatkaisut, pudotetut paketit, osittaiset viestit ja versioiden epäsuhta, ei pelkästään onnellinen polku.
• Sovi raportointimuodosta ajoissa kumppanitoimittajan kanssa, jotta virheet ovat toimenpiteiden kohteena molemmilta puolilta.

Yhteentoimivuuden testaus vs vaatimustenmukaisuustestaus

Yhteentoimivuus-, vaatimustenmukaisuus- ja yhteensopivuustestausta käytetään usein keskenään vaihdellen, mutta kumpikin vastaa eri kysymykseen.

Yhteentoimivuustestauksen haitat

Yhteentoimivuustestauksen suurimmat vaikeudet ovat

• Vikojen perimmäisten syiden selvittäminen — vika voi sijaita kummassa tahansa järjestelmässä tai niiden välisessä verkossa.
• Tarkka mittaus — tulokset riippuvat ajoituksesta ja kuormituksesta, joten sama testi voi sekä läpäistä että epäonnistua peräkkäisillä ajoilla.
• Testauksen skaalautuvuus — jokainen uusi toimittaja kertoo yhdistelmämatriisin.
• Verkon monimutkaisuus — todelliset topologiat harvoin vastaavat yksinkertaistettua laboratorioasetelmaa.
• Testauslaitteiden testaus — analysaattorit ja simulaattorit tarvitsevat oman validointinsa ennen kuin tuloksiin voidaan luottaa.
• Testitulosten ja oppimisten dokumentointi — havaintojen on oltava ulkopuolisen kumppanin, ei pelkästään paikallisen tiimin, luettavissa.
• Riittämättömät vaatimukset — epämääräiset eritelmät jättävät molemmat toimittajat teknisesti vaatimustenmukaisiksi, mutta eivät pysty kommunikoimaan.

UKK