Flaky tests

Flaky tests

الاختبارات المتقلبة هي اختبارات تظهر نتائج متغيرة بدون تغييرات في الكود: أحياناً تنجح وأحياناً تفشل بشكل عشوائي. ذلك يحدث بسبب عوامل غير متحكم بها مثل التوقيت، أو الاعتماد على خدمات خارجية، أو حالة البيئة، أو مشاكل في الوصول إلى الموارد أو تسابق العمليات. النتيجة أن المطورين وفِرق التكامل المستمر لا يعتمدون على نتائج هذه الاختبارات لأنها تخلق ضوضاء وتشتت الانتباه. هذه الاختبارات تسبب إهدار الوقت في تتبع أخطاء ليست حقيقية وتبطئ من سرعة التسليم. كذلك تؤدي إلى فقدان الثقة في منظومة الاختبار وقد تدفع الفرق لتجاهل إخفاقات مهمة بطريق الخطأ. لاكتشافها يمكن مراقبة الاختبارات على مدى مرات تشغيل متعددة وملاحظة التي تفشل عشوائياً. لإصلاحها تُستخدم تقنيات مثل عزل الاختبار، ومحاكاة الخدمات الخارجية، وإزالة الاعتماد على التوقيت، وتحسين تنظيف الحالة بين الاختبارات. أحياناً تُستخدم إعادة المحاولة كحل مؤقت، لكن الحل الأفضل هو اكتشاف السبب الجذري وإزالته. الاستثمار في استقرار الاختبارات يساعد الفرق على تسريع التطوير وزيادة الثقة في نتائج التكامل المستمر. معالجة الاختبارات المتقلبة جزء مهم من صيانة أي مجموعة اختبارات فعالة.