Useimmissa ohjelmistotestaustyypeissä käytetään huolellisesti määriteltyä testaussuunnitelmaa kattavuuden varmistamiseksi. Vaikka nämä parametrit kattavatkin monet ohjelmiston käytön mahdollisuuksista, ne eivät kuitenkaan aina jäljittele sellaisen käyttäjän käyttäytymistä, joka ei tunne sovellusta ja joka vain yrittää olla vuorovaikutuksessa sen kanssa kokeilevalla tavalla: Apina-testaaminen.
Tässä artikkelissa tarkastelemme kaikkea apinatestaukseen liittyvää, mukaan lukien apinatestiohjelmistot, prosessit, tyypit, lähestymistavat ja paljon muuta.
Mitä on apinatesti?
Apinatestaus on yhä suositumpi ohjelmistotestausmenetelmä. Siinä lähetetään satunnaisia syötteitä sovellukseen, jotta voidaan simuloida käyttöliittymän vuorovaikutuksen arvaamattomuutta.
Tavoitteena on löytää virheitä tai kaatumisia, joita voi olla vaikea havaita ennalta määritellyillä testitapauksilla. Apinatesti jäljittelee sitä, miten henkilö, jolla ei ole kokemusta tai tietoa sovelluksesta, voisi tutkia ohjelmistoa satunnaisesti.
Tämä tekniikka on hyvä vaihtoehto sekä
kuormitus
ja
stressitestaus
sovellukset. Testit tarjoavat jatkuvasti satunnaisia syötteitä, joilla yritetään rikkoa sovellus.
Apinoiden testauksella ja apinoiden testauksella on monia yhtäläisyyksiä.
ad hoc -testaus
erityisesti niiden satunnainen luonne ja se, että ne eivät perustu testaussuunnitelmaan. Näiden kahden lähestymistavan välillä on kuitenkin riittävästi eroja, jotta niitä voidaan pitää erillisinä lähestymistapoina.
Vaikka jotkut kehittäjät väittävät, että apinatestaus on eräänlainen ad hoc -testaus, yksi merkittävä ero näiden kahden välillä on se, että apinatestauksen voivat suorittaa ihmiset, jotka eivät tunne sovellusta lainkaan.
Apinatestauksessa on kyse siitä, ettei testisuunnitelmaa ole. Kyse on satunnaisten syötteiden syöttämisestä, jonka tavoitteena on kaataa ohjelmisto.
Miksi sitä kutsutaan apinatestaukseksi?
Ei ole yksimielisyyttä siitä, miksi tätä tekniikkaa kutsutaan apinatestaukseksi. Nimen takana on kuitenkin muutamia vakuuttavia teorioita.
Teoria 1: äärettömän apinan lause
Ensimmäisen teorian mukaan nimi liittyy äärettömän apinan lauseeseen, jota käytetään tilastollisesta todennäköisyydestä puhuttaessa. Lyhyesti sanottuna siinä sanotaan, että jos apina istuisi kirjoituskoneen edessä ja painelisi satunnaisia näppäimiä äärettömän kauan, se tuottaisi jossain vaiheessa William Shakespearen koko teoksen.
Ajatuksena on, että apinatestaus simuloi näitä satunnaisia näppäinten mashing-tapahtumia, ja jos aikaa riittää, se kattaa kaikki tilanteet, joita sovellus kohtaa tuotannossa.
Teoria 2: Macintoshin “The Monkey” (Apina)
Toisen teorian mukaan nimi on peräisin MacOS-ohjelmasta “The Monkey” vuodelta 1983. Lyhyesti sanottuna ensimmäisen Macintosh-tietokoneen parissa työskennellyt ryhmä halusi löytää keinon testata koneensa rasitusta.
He päättelivät, että jos apina hakkaisi kuumeisesti näppäimiä ja liikuttelisi hiirtä, se auttaisi testaamaan tietokoneen kestävyyttä. Heillä ei ollut elävää apinaa, joten he rakensivat sovelluksen, joka simuloi tällaista käyttöä, ja antoivat sille nimen “The Monkey”.
Miksi apinatestaus on tärkeää?
Tärkeä syy apinatestauksen tärkeyteen on se, että se auttaa tiimejä löytämään sovelluksen reunatapauksia tai odottamattomia käyttäytymistapoja. Ajatuksena on, että kehittäjät voivat käyttää apinatestausta perinteisempien menetelmien rinnalla saadakseen paremman käsityksen siitä, miten sovellus otetaan vastaan luonnossa.
Edes tuotteen kattava testaus ei pärjää kymmenille tuhansille tai useammille käyttäjille, jotka ovat sitoutuneet sovellukseen pitkän ajan kuluessa. Pienessä osassa näistä tapauksista käyttäjät pyytävät sovellusta tekemään jotain odottamatonta. Kaikkien näiden skenaarioiden paljastaminen testitapausten avulla on lähes mahdotonta.
Apinatestauksella pyritään kattamaan nämä lähes satunnaiset skenaariot. Kun kehittäjät rakentavat testitapauksen, heillä on yleensä läheinen tuntemus sovelluksesta. He ymmärtävät, mitkä ovat käyttäjien tavoitteet, ja tietävät, mikä on paras vuorovaikutusjakso, jota heidän tulisi käyttää saavuttaakseen jotain sovelluksessa.
Näiden syötteiden satunnaistaminen tarkoittaa, että sovellusta testataan tavoilla, joita kehittäjät eivät ole ottaneet huomioon. Kaiken kaikkiaan tämä parantaa ohjelmiston yleistä joustavuutta ja kestävyyttä ja varmistaa, että se voi mennä maailmaan ja kohdata monenlaisten käyttäjien arvaamattomuuden kaatumatta.
Milloin apinatestausta kannattaa käyttää?
Apinatesti on erinomainen täydentävä testausmenetelmä. Sen suurin etu on sen kyky löytää odottamattomia virheitä, joita perinteiset ohjelmistotestausmenetelmät eivät paljastaisi. Siksi sitä on parasta käyttää yhdessä seuraavien menetelmien kanssa:
Tyypillisesti kehittäjät käyttävät apinatestausta testausprosessin alkuvaiheessa. Se on erityisen hyödyllinen silloin, kun ei ole olemassa valmiita testisuunnitelmia, joihin tukeutua.
Miten apinatesti suoritetaan?
Aikanaan apinoiden testaus tehtiin manuaalisesti. Testaajien tehtävänä oli painaa painikkeita, syöttää tekstiä, valita esineitä ja niin edelleen, jotta nähtiin, miten järjestelmä kestäisi epätavalliset syötteet. Tässä on ilmeisiä ongelmia. Ensinnäkin se on melko aikaa vievää. Toiseksi ei ole juurikaan takeita siitä, että nämä toimet kattavat kaikki mahdolliset tilanteet.
Esimerkkejä manuaalisesta apinatestauksesta
Seuraavassa on muutamia esimerkkejä manuaalisen apinatestauksen suorittamisesta. Se voi myös antaa sinulle käsityksen siitä, mitä automatisoidulla apinatestauksella pyritään simuloimaan.
- Testaaja navigoi verkkosivustolla napsauttamalla satunnaisia linkkejä nähdäkseen, voivatko ne kaataa sovelluksen tai johtaa odottamattomille sivuille.
- Testaaja syöttää satunnaisia tekstejä lomakekenttään nähdäkseen, miten sovellus reagoi.
- Testaaja raahaa ja pudottaa kuvakkeita ja objekteja nähdäkseen, käyttäytyvätkö ne odotetulla tavalla vai tuottavatko ne ei-toivottuja tuloksia.
Erilaiset apinatestit
Kehittäjät käyttävät kolmea päätyyppiä apinatestejä saadakseen selville erilaista tietoa sovellustensa kestävyydestä.
1. Tyhmä apina testaus
Dumb monkey -testaus kuvaa lähestymistapaa, jossa testaaja ei tiedä mitään testattavasta sovelluksesta. Sen sijaan testaajaa pyydetään pähkäilemään täysin tietämättään työnkulusta, painamaan painikkeita, syöttämään tekstiä ja niin edelleen. Tämä tekniikka voi auttaa paljastamaan merkittäviä puutteita, joista kehittäjät eivät ole tietoisia.
2. Älykkään apinan testaus
Älykkään apinatestauksen avulla testaaja tietää hieman sovelluksesta ja sen tavoitteista ja hänellä on jopa yksityiskohtaista tietoa siitä, miten se toimii. Tässä prosessissa käytetään myös kohdennetumpaa satunnaissyöttöä, joka on suunniteltu ylittämään sovelluksen tietyt rajat. Tämä lähestymistapa on hyvä sekä stressi- että kuormitustestauksessa.
3. Loistava apinatesti
Nerokas apinatestaus on seuraava taso älykkäästä apinatestauksesta. Testaajalla on vahva ja kattava tietämys sovelluksesta, ja hänet valitaan tämän tietämyksen perusteella. Tämä voi auttaa testaajaa löytämään paljon virheitä, koska hänen pitäisi ymmärtää tuotetta käyttäjän näkökulmasta.
Apinatestauksen hyvät ja huonot puolet
Ennen kuin päätät käyttää apinatestausmenetelmää, sinun on ymmärrettävä sen hyvät ja huonot puolet.
Apinatestauksen edut
1. Harvinaisten tai piilotettujen vikojen löytäminen
Apinatestauksen ehkä vakuuttavin hyöty on tekniikan kyky paljastaa virheitä, puutteita tai käyttäytymismalleja, jotka muutoin saattaisivat jäädä huomaamatta. Näiden ääritapausten löytäminen on haastavaa perinteisillä testaustekniikoilla, joten apinatestaus on hyvä tapa testata kaatumisia, tietojen korruptoitumista ja kaikkea muuta sovelluksen vakautta uhkaavaa.
2. Se takaa kestävyyden
Apinatestauksen tarkoituksena on selvittää, miten sovellus reagoi arvaamattomiin olosuhteisiin, joita se kohtaa todellisessa käytössä. Kun sovellus annetaan käyttäjän käsiin, se aiheuttaa paljon erilaisia syötteitä, joita kehittäjät eivät voi ennakoida. Apinatestaus jäljittelee tätä tilannetta, mikä johtaa luotettavampiin rakennelmiin.
3. Kustannustehokkuus
Muihin testaustyyppeihin verrattuna apinatestaus on erittäin kustannustehokasta. Tähän on muutamia syitä. Ensinnäkin sinun ei tarvitse käyttää paljon aikaa sovelluksen käyttötapausten suunnitteluun. Lisäksi apinatestausohjelmistojen työkalut ovat pitkälti automatisoituja, mikä vapauttaa kehittäjien aikaa muihin tehtäviin ja säästää rahaa.
4. Monipuolisuus
Yksi apinatestauksen parhaista puolista on se, että testejä voivat tehdä henkilöt, joilla ei ole teknistä taustaa. Joissain tapauksissa on jopa parempi, että joku on täysin vihreä. Lisäksi nämä testit ovat melko yksinkertaisia asentaa, mikä taas vähentää riippuvuutta ammattitaitoisista insinööreistä.
5. Varhainen vikojen havaitseminen
Vikojen löytäminen ja korjaaminen kehityksen elinkaaren alkuvaiheessa säästää aikaa myöhemmässä vaiheessa. Apinatestaus tuo testaukseen satunnaisuutta, joka voi auttaa sinua löytämään virheitä koodissasi, kun se on helppo korjata.
Apinatestauksen haitat
1. Kattavuus
Vaikka apinatestaus voi parantaa testien kattavuutta, se ei ole yhtä suunnitelmallista ja strategisesti perusteellista kuin muut testaustyypit. Koska räjäytät sovelluksen satunnaisilla syötteillä, olet itse asiassa kaaoksen armoilla vikojen löytämisessä. Tämä ei tarkoita sitä, etteikö se löytäisi kaikkea, mutta ilman selkeää ja ennalta määriteltyä strategiaa et voi olla 100-prosenttisen varma, että kaikki on otettu talteen.
2. Rajoitetut sovellukset
Apinatesti ei sovellu kaikkiin sovellustyyppeihin. Se sopii erinomaisesti monimutkaisiin sovelluksiin, joissa on paljon erilaisia ominaisuuksia ja toimintoja ja joissa on ennen kaikkea mahdollisuus odottamattomiin käyttäjän vuorovaikutustilanteisiin. Ohjelmat, jotka tarjoavat jäykempiä ja ennakoitavampia toimintoja, hyötyvät näistä testeistä todennäköisesti vähemmän.
3. Aikaa vievä
Manuaalinen apinatestaus on hyvin aikaa vievää. Se vaatii paljon vuorovaikutusta moduulien ja ohjelmistojen kanssa, eikä ole takeita siitä, että jokaisella istunnolla löydetään virheitä. Prosessin voi toki automatisoida, mikä säästää huomattavasti aikaa ja resursseja.
4. Väärät positiiviset tulokset
Koska apinatestaus on luonteeltaan kaoottista tai satunnaista, jotkin syötteet voivat simuloida skenaarioita, joita ei tapahdu tuotteen todellisessa käytössä. Tämä tilanne voi johtaa väärien positiivisten tulosten syntymiseen, jolloin koodaajat joutuvat korjaamaan asioita, jotka eivät ole tarpeen.
Mitä on kaaosapinatestaus?
Kaaostestaus on ohjelmistotekniikka, jossa käytetään hallittuja ja tarkoituksellisia kokeita, joiden tarkoituksena on häiritä järjestelmää (ja jopa aiheuttaa vikoja), jotta voidaan arvioida sen kestävyyttä ja palautumiskykyä.
Ajatus järjestelmän tarkoituksellisesta rikkomisesta häiriönsietokyvyn varmistamiseksi on melko yleinen ohjelmistokehityksessä, ja nämä menetelmät johtavat yleensä rakennelmiin, joiden takana insinöörit voivat seistä.
Vuonna 2008 suosittu suoratoistopalvelu Netflix päätti siirtyä Amazon Web Services (AWS) -palveluun kolmen päivän tietokantavian jälkeen. Tavoitteena oli välttää yksittäisiä vikapisteitä ja vähentää palvelun laajentamisesta johtuvia skaalautuvuusongelmia.
Tiimi toteutti kaaosapina-testauksen testatakseen julkisia instansseja AWS-infrastruktuurissa. Hyödyt olivat kaksijakoiset:
- Prosessi paljasti heikkouksia, jotka Netflixin insinöörit pystyivät korjaamaan…
- Se innoitti tiimiä rakentamaan automaattisia palautusmekanismeja palveluunsa.
Kaaos-apinatestaus on osa Chaos Engineeringiä. Sitä käytetään testaamaan järjestelmän vikasietoisuutta ja sen kykyä säilyttää vakaus ja suorituskyky, vaikka yksittäiset komponentit vikaantuisivat yllättäen.
Vaikka se liittyy apinatestaukseen, se on erillinen tekniikka.
Apina testaus vs Gorilla testaus
Olet ehkä kuullut myös Gorilla-testauksen käsitteestä ohjelmistokehityksessä. Vaikka molemmilla tekniikoilla on kädellisten nimet, niillä on monia yhtäläisyyksiä ja eroja. Tutustutaanpa siihen, mitä Gorilla-testaus on ja missä sitä voidaan käyttää.
Gorillatestausta pidetään apinatestauksen jäsennellympänä versiona. Sen sijaan apinatestausta käytetään usein testauksen alkuvaiheessa, kun virallisia testitapauksia ei ole käytettävissä. Gorillatestauksessa taas käytetään automaattista työkalua tai skriptiä tuottamaan satunnaisia syötteitä ohjelmistosovellukselle.
Gorilla-testaaminen on nopeaa ja paljon tehokkaampaa kuin manuaalinen apinatestaus. Se tarjoaa laajan kattavuuden, ja se on erinomainen tapa löytää onnettomuudet, jotka on korjattava. Sitä on kuitenkin parasta käyttää sovelluksissa, joilla on tarkkaan määritellyt rajat, tai tietyn moduulin perusteelliseen testaamiseen.
Sekä apinatestauksella että gorillatestauksella on paikkansa nykyaikaisessa ohjelmistokehityksen testauksessa. Niiden ymmärtäminen on avainasemassa, kun halutaan käyttää oikeaa lähestymistapaa oikeassa tilassa.
Mikä on paras apinatestityökalu?
Apinatestiohjelmistosta on tullut olennainen osa nykyaikaisen kehittäjän työkalupakkia. On kuitenkin olemassa muutamia vaihtoehtoja. Mikä on siis paras apinatestityökalu? Seuraavassa on muutamia niistä, jotka sinun on hyvä tietää.
1. ZAPTEST
ZAPTEST on tehokas
ilmainen ja yritysten ohjelmistotestauksen automatisointityökalu
joka tukee monenlaisia testiautomaatiotekniikoita, kuten apinatestausta. ZAPTESTin ominaisuuksia, jotka auttavat apinatestauksessa, ovat muun muassa seuraavat:
- Ei koodia käsikirjoituksen tallennus: Tiimit voivat tallentaa käyttäjän vuorovaikutuksen ja muuntaa sen testikoodiksi.
- Syötteen tuottaminen: ZAPTEST helpottaa satunnaissyötteiden luomista, joka on apinatestin keskeinen osa.
- Vankka raportointi: ZAPTEST tarjoaa tehokkaat raportointiominaisuudet, jotka auttavat sinua dokumentoimaan testejäsi.
Nämä ominaisuudet ovat tietysti vain pintaraapaisu ZAPTESTin mahdollisuuksista moniin erilaisiin testaustekniikoihin, kuten apinatesteihin. WebDriver-integraation, tekoälyominaisuuksien ja ZAPTEST CoPilotin ansiosta tiimit voivat kokea ohjelmistotestauksen tulevaisuuden yhdessä paikassa.
Lisäksi ZAPTEST Enterprise -käyttäjät saavat käyttöönsä kokoaikaisen ZAP-asiantuntijan ja rajoittamattoman määrän lisenssejä, ja kaikki tämä ennakoitavaan kiinteään hintaan.
2. Appium
Appium on avoimen lähdekoodin työkalu. Voit käyttää sitä sekä Androidissa että iOS:ssä. Sen avulla käyttäjät voivat automatisoida mobiilisovellusten vuorovaikutusta, ja siinä on apinatestausominaisuuksia. Kehittäjät voivat jäljitellä monenlaisia käyttöliittymän reaktioita, kuten tekstin syöttämistä, napsauttamista, napauttamista ja vierittämistä.
Appium on loistava työkalu mobiilikehittäjille, mutta siitä puuttuu ominaisuuksia työpöytä- ja verkkotestaukseen.
3. Apina testaa sitä
Monkey Test It on pilvipohjainen testausalusta, jossa on useita testausominaisuuksia, joihin kuuluu apinatestaus. Vaikka Monkey Test It on erittäin käyttäjäystävällinen, se ei ehkä ole yhtä tehokas kuin kilpailevat työkalut.
Muita haittapuolia ovat, että se voisi näyttää tyylikkäämmältä ja sisältää paremman dokumentaation. Lisäksi jotkut käyttäjät ovat valittaneet testien epätarkoista tuloksista. Kyseessä on kuitenkin yksinkertainen ohjelma, jonka hinta on alhainen, joten siltä ei voi odottaa mitään ihmeellistä.
4. MonkeyTestJS
MonkeyTestJS on avoimen lähdekoodin australialainen JavaScript-pohjainen työkalu, joka on rakennettu vain verkkosovelluksia varten. Se on melko yksinkertainen, mutta se pystyy hoitamaan tehtävänsä. Työkalun avulla kehittäjät voivat simuloida käyttäjän ja verkkosovelluksen vuorovaikutusta, kuten klikkauksia, lomakkeen lähettämistä, näppäimistösyöttöjä ja muuta.
Työkalun haittapuolena on tietenkin se, että se on käytettävissä vain verkkosovelluksia varten. Se kannattaa kuitenkin pitää työkalupakissa.
Mikä on paras Android-apinatestityökalu?
On olemassa muutamia hyviä vaihtoehtoja kehittäjille, jotka haluavat tuoda hieman kaaosta Android-sovellustensa testaukseen. Tarkastellaan kahta.
1. UI/Application Exerciser Monkey Androidille
UI/Application Exerciser Monkey for Android on komentorivityökalu, jonka avulla kehittäjät voivat lähettää pseudosattumanvaraisia syötteitä tai tapahtumia sekä Android-laitteisiin että emulaatioihin. Tämä työkalu toimii Android Debug Bridge -ohjelmassa.
2. MonkeyRunner Androidille
MonkeyRunner for Android on suosittu Android-apinatestityökalu. Ohjelmisto on API, jonka avulla kehittäjät voivat kirjoittaa ohjelmia, jotka joko emuloivat tai ohjaavat Android-laitetta. Se on myös hyvä vaihtoehto sekä toiminnalliseen että yksikkötestaukseen.
Molemmat näistä sovelluksista ovat hyviä vaihtoehtoja. Ne ovat kuitenkin melko teknisiä, mikä ei sovi kaikille joukkueille.
Pitäisikö apinatestaus automatisoida?
Yksi manuaalisen apinatestauksen suurimmista ongelmista on, että se on niin aikaa vievää. Toinen asia, joka on syytä huomioida, on se, että muutaman testaajan on vaikea simuloida erilaisia vuorovaikutustilanteita, joita laaja käyttäjäkunta voi olla tietyn sovelluksen kanssa.
Kolme välitöntä haittapuolta nousee esiin. Manuaalinen apinatestaus on:
- Aikaa vievä
- Kallis
- Mahdollisesti puutteellinen kattavuus
Automaattinen apinatestityökalu ratkaisee kaikki nämä ongelmat.
Onko ZAPTEST oikea valinta apinatestaustarpeisiisi?
Apinatestaus on hyvä tekniikka, joka on hyvä ottaa testausrepertuaariin, varsinkin jos suunnittelet monimutkaisia sovelluksia. Erityisen apinatestausohjelmiston ostaminen on kuitenkin kallista.
ZAPTEST
on joustava ja tehokas
täysimittainen testiautomaatiotyökalu.
Se on erittäin helposti muokattavissa, ja sen avulla sekä kehittäjät että ei-tekniset tiimit voivat rakentaa ja suunnitella loputtoman määrän ohjelmistotestaustekniikoita, mukaan lukien apinatestaus.
Apinatesti on hyvä valinta, kun sitä täydennetään muunlaisilla testeillä. ZAPTEST tarjoaa kaiken saman katon alla, ja lisäksi se tarjoaa laadukkaat RPA-työkalut.
Lopulliset ajatukset
Monkey-testausohjelmisto tarjoaa kehittäjille epätavanomaisen tavan testata sovelluksiaan. Tämän tekniikan vahvuus on sen kyky simuloida lukemattomia ennalta arvaamattomia tapoja, joilla käyttäjä voi käyttää ohjelmistoa. Lyhyesti sanottuna apinatestaus tarjoaa kattavuuden, jota voi olla vaikea saavuttaa testaussuunnitelmalla.
