Noté que el comportamiento predeterminado de Karma para mis compilaciones Angular es ejecutar las pruebas unitarias de Jasmine en orden aleatorio. ¿Cuál es el beneficio de ejecutar sus pruebas en orden aleatorio, frente a ejecutarlas en el mismo orden cada vez?
A veces, las pruebas modifican el estado que no se restablece para cada ejecución de prueba. Tal vez una prueba modifica una variable global que es compartida por todas las pruebas. Tal vez una prueba escribe algo en la base de datos y no lo limpia cuando finaliza la prueba. Estas cosas no deberían pasar, pero a veces pasan.
Por ejemplo:
// Stupid contrived example. Don't ever do this. let num = 0 it('A', () => { expect(num + 1).toEqual(1) }) it('B', () => { num = 10 expect(num + 2).toEqual(12) }) it('C', () => { expect(num + 3).toEqual(13) // passes if B is run before C, otherwise fails })Esto puede funcionar bien si siempre ejecuta la prueba A, luego la B, luego la C. Pero luego pueden suceder cosas extrañas si ejecuta solo la prueba C. Debido a los cambios que hicieron las pruebas A y B, C pasa cuando las ejecuta todas juntas. Pero luego ejecuta la prueba C sola y falla.
Y ahora estás mirando la salida de tu terminal estupefacto y murmurando "¿cómo diablos puede fallar la prueba C? ¡Simplemente pasó!"
Aleatorizar el orden ayuda un poco con esto. Cada prueba debe estar totalmente aislada y no debe importar en qué orden se ejecutan. Aleatorizarlas puede ayudar a descubrir esta maldad.
Entonces, dado que el orden no debería importar, ¿por qué no aleatorizar el orden?