Я использую пакет python гипотезы для тестирования.
Я получаю следующую ошибку:
Ненадежный: Гипотеза test_visiting дает ненадежные результаты: сфальсифицировано при первом вызове, но нет при последующем.
Насколько я могу судить, тест работает корректно.
Как мне обойти это?
Это означает более или менее то, что оно говорит: у вас есть тест, который не прошел в первый раз, но прошел успешно во второй раз при повторном запуске с тем же примером. Это может быть ошибкой гипотезы, но обычно это не так. Наиболее распространенной причиной этого является то, что у вас есть тест, который зависит от некоторого внешнего состояния, например. если вы используете системный генератор случайных чисел, а не предоставленный Hypothesis, или если ваш тест создает некоторые файлы и терпит неудачу только в том случае, если файлы не существовали в начале теста. Вторая наиболее распространенная причина этого заключается в том, что ваш сбой является ошибкой рекурсии, а пример, который вызвал ее на одном уровне вызовов функций, не сработал на другом.
Вы действительно не предоставили достаточно информации, чтобы сказать, что на самом деле происходит, поэтому трудно дать более конкретный совет. Если вы используете последнюю версию Hypothesis (например, 1.9.0, безусловно, делает это), вам должна была быть предоставлена довольно подробная диагностика того, что происходит — она расскажет вам, какое исходное исключение вы получили, и сообщит, если переданные значения, казалось, менялись между вызовами.
Одна вещь, о которой я не часто упоминал, и это может быть относительно новым поведением, заключается в том, что вы можете захотеть увеличить крайний срок своих тестов. По моему опыту, если один тестовый пример не проходит из-за пропущенного срока, а второй проходит успешно, вы будете рассматривать это как «ненадежный» сбой теста.
@hypothesis.settings(deadline=500)
Мне было трудно найти подходящую документацию об этом поведении, которую я мог бы полностью понять лично, но это, похоже, исправило это для меня.
