Ebastabiilsed testid

Ebastabiilsed testid

Ebastabiilsed testid on testid, mis annavad sama koodi puhul vahel õnnestumise ja vahel ebaõnnestumise, ilma et koodi ennast muudetaks. Sageli tuleneb see juhuslikest keskkonnaerinevustest, ajastusprobleemidest, võrgukõnedest või sõltuvustest, mis ei ole testi kontrolli all. Sellised testid vähendavad usaldust automaatse testikomplekti vastu, sest iga kõikumine võib peita tõelise vea. Ebastabiilsed tulemused lõhkuvad CI-voogu ja tekitavad arendajatele ajakulu, kui tuleb välja selgitada, kas tõrge on reaalne või juhuslik. Neid tuleks prioriteetselt tuvastada ja parandada, sest neid jätkates suureneb mürateade hulk ja aeg reaalse vea avastamiseni. Parandamise strateegiad hõlmavad testi isoleerimist, keskkonna muutmatust, sõltuvuste stub'imist ning täpsemat logimist ja korduvuse uurimist. Mõnikord aitab probleemi ajutine korduvkatse või ajakünniste suurendamine, kuid see on pigem töö ümber kui lahendus. Parem on leida juurpõhjus—nt rasketest olukordadest tingitud ajastamis- või ressursside konflikti—ja see korda teha. Tugevalt stabiilne testikomplekt on meeskonnale suur ajavõit ja tagab, et punased hulgad vastavad tõsistele vigadele, mitte juhuslikkusele.