У меня есть набор тестов, которые, как я недавно обнаружил, имеют (неправильное) отношение порядка. Все они должны быть независимыми.
Похоже, что Nose каждый раз запускает тесты в одном и том же порядке, что само по себе не раскрывает эти зависимости, если только не произойдет магия и мне не удастся внедрить что-то, что приведет к сбою (не мой любимый метод программирования).
Как я могу поручить носу рандомизировать порядок выполняемых тестов?
Нет встроенного способа сделать это. Я осмотрелся и обнаружил вот этот плагин для носа, предназначенный для рандомизации тестового порядка:
https://github.com/my8bird/nose-randomize
Судя по исходникам, это работает только для тестов, наследуемых от unittest.TestCase. Если это не сработает для вас, вы, безусловно, можете использовать его в качестве отправной точки для написания своего собственного.
Если вы просто хотите, чтобы один раз выявлял зависимости, вы можете передать список тестов носу. Ленивый метод будет заключаться в том, чтобы получить список ваших тестов и пройти все перестановки одну за другой:
nosetests /path/to/testA.py /path/to/testB.py /path/to/testC.py
nosetests /path/to/testA.py /path/to/testC.py /path/to/testB.py
nosetests /path/to/testB.py /path/to/testA.py /path/to/testC.py
nosetests /path/to/testB.py /path/to/testC.py /path/to/testA.py
nosetests /path/to/testC.py /path/to/testA.py /path/to/testB.py
nosetests /path/to/testC.py /path/to/testB.py /path/to/testA.py
Это может занять всю ночь, но вы, по крайней мере, будете знать, в чем ваши проблемы.
Надеюсь, это поможет вам начать.
вы можете запустить затем по порядку, указав полный путь к тестовому набору с именем класса
./nose <<testcasename>>:<<classname>>.testcase_name1 <<testcasename>>:<<classname>>.testcase_name2
<<testcasename>>:<<classname>>.testcase_name4
скопируйте этот путь в файл bat.cfg и запустите с ./nose -c bat.cfg
