Ασταθείς δοκιμές

Ασταθείς δοκιμές

Ασταθείς δοκιμές είναι δοκιμές που δεν έχουν σταθερό αποτέλεσμα: κάποιες φορές περνούν και κάποιες φορές αποτυγχάνουν χωρίς να έχει αλλάξει ο κώδικας. Τέτοιες αστάθειες δημιουργούν σύγχυση γιατί δύσκολα ξεχωρίζει κανείς αν υπάρχει πραγματικό σφάλμα ή πρόβλημα στο περιβάλλον δοκιμών. Συνηθισμένες αιτίες είναι ασυγχρονισμοί και χρονισμοί, εξαρτήσεις από το δίκτυο, τυχαίοι αριθμοί χωρίς σταθερή σπορά ή ασταθή δεδομένα δοκιμών. Μπορεί επίσης να οφείλονται σε αλληλεπιδράσεις μεταξύ δοκιμών όταν η σειρά εκτέλεσης επηρεάζει το αποτέλεσμα. Οι ασταθείς δοκιμές μειώνουν την εμπιστοσύνη στα εργαλεία ελέγχου και κάνουν πιο δύσκολη την αυτοματοποιημένη εκτέλεση, επειδή κάθε αποτυχία πρέπει να ελεγχθεί χειροκίνητα. Αυτό επιβραδύνει τις διαδικασίες ενσωμάτωσης και παράδοσης και σπαταλά χρόνο σε ψευδείς συναγερμούς. Για να αντιμετωπιστούν, πρέπει πρώτα να αναπαραχθούν σταθερά και να εντοπιστεί η ρίζα του προβλήματος — αν είναι στο τεστ, στο περιβάλλον ή στο λογισμικό. Συνηθισμένες λύσεις είναι η σταθεροποίηση του περιβάλλοντος, η απομόνωση των δοκιμών, η αφαίρεση τυχαιότητας και ο έλεγχος χρονισμών. Σε κάποιες περιπτώσεις χρησιμοποιούνται προσωρινές επαναλήψεις εκτέλεσης για να φιλτραριστούν ψευδείς αποτυχίες, αλλά αυτό δεν λύνει το πρόβλημα στη ρίζα.