В чем разница между hard assert и soft assert в тестировании?

Hard assert (жесткая проверка) и soft assert (мягкая проверка) — это два подхода к валидации условий в автоматизированных тестах, отличающиеся поведением при неудаче.

Основное различие

• Hard assert — немедленно прерывает выполнение теста при первой же неудачной проверке.
• Soft assert — продолжает выполнение теста после неудачи, собирая все ошибки для отчета в конце.

Примеры в разных фреймворках

Hard assert (стандартный подход):

# pytest / unittest
assert user.is_authenticated == True  # Тест упадет здесь
assert user.role == "admin"           # Эта строка не выполнится
assert user.email is not None         # И эта тоже

Soft assert (специализированные библиотеки):

# Использование pytest-check
from pytest_check import check

def test_user_profile():
    user = get_test_user()

    with check:  # Первая проверка - не прерывает тест
        assert user.is_authenticated == True

    with check:  # Вторая проверка - выполнится даже если первая упала
        assert user.role == "admin"

    with check:  # Третья проверка - выполнится в любом случае
        assert user.email is not None

    # Все ошибки будут собраны и показаны в конце теста

Сравнение характеристик

Когда что использовать

Используйте hard assert для:

• Критичных проверок, после которых тест теряет смысл

  # Если пользователь не аутентифицирован, дальнейшие проверки бессмысленны
  assert login() == True  # Hard assert уместен
  assert can_access_dashboard() == True

• Проверок в setup-фазах тестов
• Ситуаций, где каждая проверка независима и важна

Используйте soft assert для:

• Валидации форм с множеством полей

  # Проверка всех полей регистрационной формы
  with check: assert form.name != ""
  with check: assert "@" in form.email
  with check: assert len(form.password) >= 8
  with check: assert form.password == form.confirm_password

• Сбора максимальной информации за один прогон
• Тестов, где выполнение всех проверок ценно для анализа
• UI-тестирования с множеством элементов на странице

Best Practices

1. Комбинируйте подходы: Используйте hard assert для критичных пре-условий, soft — для основных проверок.
2. Ясные сообщения: Всегда добавля informative сообщения об ошибках.
3. Очистка состояния: При использовании soft assert убедитесь, что тест корректно очищает состояние после fail.
4. Библиотеки: Для soft assert используйте проверенные библиотеки:
   • Python: pytest-check, softest
   • Java: SoftAssert в TestNG, AssertJ soft assertions
   • JavaScript: Chai с соответствующими плагинами