Знаете ли вы роль жестких и мягких утверждений в автоматизированном тестировании?

1. Что такое утверждение?

Основная цель утверждений — убедиться, что приложение работает правильно на вставленной контрольной точке и в целом. Это способ сообщить тестовому сценарию: «Я ожидаю, что значение состояния/поведения приложения в данный момент будет равно X». «Соответствуют ли мои ожидания реальным результатам? Скажите мне, правда это или ложь.

Когда утверждение выполняется, оно оценивает условие (обычно сравнение фактического значения и ожидаемого значения). Если условие истинно, тест продолжает выполняться. Если условие ложно, утверждение выдаст ошибку, отмечая тест как неудавшийся.

Приведите пример выпечки торта.

Давайте возьмем пример выпечки шоколадного торта и того, как вставлять утверждения между и в конце процесса.

Нет. 1 Шаг: отмерьте ингредиенты

Действие: Отмерьте 1 стакан сахара. Утверждение: Вы подтверждаете правильность количества сахара.

Шаг 2: Разогрейте духовку

Действие: В рецепте указано, что духовку следует разогреть до 350°F. Утверждение: Убедитесь, что термометр духовки достиг 350°F. При тестировании программного обеспечения это похоже на проверку того, что условие (в данном случае температура духовки) соответствует ожидаемому.

Шаг третий: время выпечки

Действие: В рецепте указано выпекать корж 30 минут. Утверждение: вы устанавливаете таймер и проверяете торт в течение 30 минут. Это похоже на утверждение тайм-аута, гарантирующее, что процесс (запекание) не займет больше времени, чем ожидалось.

Шаг 4: Заключительная проверка – проверка зубочисткой

Что делать: вставьте зубочистку в центр, чтобы проверить, поджарилась ли она. Утверждение: если зубочистка выходит чистой, значит, пирог полностью пропекся. Это то же утверждение, что и проверка конечного результата (в программном обеспечении это может быть проверка завершения транзакции).

2. Типы утверждений при тестировании программного обеспечения

Ниже приведена таблица утверждений и сравнений для обоих типов:

Жесткие утверждения — это утверждения, в которых выполнение теста прерывается, когда условие утверждения не выполняется и тестовый пример не пройден. Если вы хотите продолжить выполнение теста, даже если одно из утверждений не выполнено, используйте мягкие утверждения.

Вам необходимо использовать TestNG с Selenium для настройки утверждений с помощью пакета org.testng.assert. По умолчанию утверждения в Selenium являются жесткими утверждениями. Чтобы использовать мягкие утверждения (также называемые проверкой), импортируйте пакет org.testng.asserts.SoftAssert.

Дальше буду разбираться через тест интерфейса

В Python встроенное утверждение может использоваться как жесткое утверждение. Например

def test_add():
    result = add(10,5)
    assert result == 15   # Это жесткое утверждение.

К сожалению, встроенная в Python assert Это всегда будет жесткое утверждение. Для мягких утверждений нам нужна помощь сторонних библиотек, таких как pytest из pytest.assume(). Например:

@pytest.mark.parametrize('x, y, expected', [(10, 5, 15), (5, 5, 10), (0, 0, 0)])
def test_add(x, y, expected):
    with pytest.assume():  # Начинается блок мягкого утверждения
        assert add(x, y) == expected

В этом случае, если утверждение не выполнено, оно перейдет к следующему тестовому сценарию, но пометит сценарий как неудавшийся в конце тестового примера.

Ниже мы приведем конкретный и подробный пример.

import requests
import pytest

def test_user_api():
    response = requests.get("http://someapi.com/users/1")  # Вызов интерфейса API для получения информации о пользователе.

    with pytest.assume():  # Этот модуль запускает несколько мягких утверждений
        assert response.status_code == 200  # Утвердить код статуса ответа
        assert response.json()['name'] == 'John'  # Подтвердить ответ от имени пользователя
        assert response.json()['email'] == 'john@example.com'   # Подтвердить ответ по электронной почте пользователя
        assert len(response.json()['friends']) == 5  # Укажите количество друзей в ответе

В приведенном выше примере,Мы помещаем ожидающий запрос интерфейса API в тестовую функцию test_user_api. Мы вызываем пользовательский API и сохраняем полученный ответ. Затем,Мы используем метод pytest.assume() для создания блока мягких утверждений.,Все четыре утверждения, содержащие из, будут выполнены.,Даже если утверждение не соответствует действительности. Таким образом, мы можем получить все результаты утверждений в конце выполнения теста.,Вместо того, чтобы заканчиваться, когда утверждение терпит неудачу. Если все утверждения проходят,Затем этот тест интерфейса пройден. Если есть какой-либо сбой при утверждении,Это подскажет нам, на каких частях нужно сосредоточить внимание. на и ремонт.

3. Итак, при каких обстоятельствах можно использовать метод pytest.assume()?

Метод pytest.assume() следует использовать, когда требуется несколько утверждений и ожидается, что все утверждения будут выполнены. Это мягкий способ утверждения,Позволяет продолжить выполнение других утверждений после неудачного теста.,Вместо того, чтобы немедленно остановиться. Это особенно полезно в следующих ситуациях:

1. Сложные случаи использования: Если у вас сложный вариант использования со множеством утверждений,и хотел бы получить обратную связь по всем утверждениям,И не только Нет.провал утверждения. Это поможет вам найти все возможные проблемы за один раз.,Вместо того, чтобы обнаруживать и исправлять их одну за другой.
2. Связанные утверждения: Когда у вас есть набор взаимосвязанных утверждений.,Возможно, все они полагаются на одни и те же условия или данные. в этом случае,Если одно из утверждений неверно,Другие утверждения в этой группе также могут оказаться ошибочными. Используйте pytest.assume(),Вы можете увидеть все результаты утверждения одновременно,Это поможет вам лучше понять масштабы и природу проблемы.
3. эффективность: Иногда исправления Нет. Обнаруженная ошибка может вызвать другие проблемы. Если вы используете жесткое утверждение,Эти проблемы можно обнаружить только после устранения одной проблемы и ее повторного запуска. Вместо этого используйте pytest.assume().,Вы можете увидеть все вопросы,Исправьте их все сразу,Уменьшите количество ненужных запусков изтестов.

пожалуйста, обрати внимание,pytest.test() — это всего лишь стратегия. в некоторых случаях,Например, когда последующее утверждение зависит от предыдущего утверждения из результата,Или вы хотите немедленно остановиться, если что-то пойдет не так,Жесткие утверждения могут быть более уместными. Какой метод утверждения использовать, зависит от ваших потребностей.

При использовании `pytest.assume()`,Если утверждение не выполнено,,Как будет продолжаться выполнение других утверждений?

при использовании pytest.assume() Время функции,Эта функция улавливает ошибки утверждения и регистрирует их.,Вместо того, чтобы сразу бросать аномальное. Вот почему pytest.assume() может продолжать выполнять другие утверждения, если утверждение не удалось.

Когда все утверждения в вашем сценарии использования изтеста выполнены.,Если одно или несколько утверждений терпят неудачу,pytest.assume() выдаст аномальное сообщение,Аномальный файл будет содержать подробную информацию обо всех неудавшихся утверждениях. это означает,Даже если одно или несколько утверждений терпят неудачу,Ваш вариант использования изтеста также может закончиться нормально,И отобразить все результаты выполнения утверждений.

Ниже приведен пример вывода после выполнения неудачного утверждения:

def test_assume():
    with pytest.assume:
       assert 1 == 1
       assert 1 == 2
       assert 2 == 2
       assert 2 == 3

# Результаты бега
============================ test session starts ============================
test_assume.py F
================================= FAILURES =================================
_____________________________ test__assume _________________________________

>   Assumptions Failed: 
    assert 1 == 2 at line 27
E   FailedAssumption: 
E   Assumptions Failed: 
E   assert 1 == 2 at line 27

test_assume.py:27: FailedAssumption

В этом примере, когда утверждаются два утверждения. 1 == 2 в случае сбоя выполнение не прекращается немедленно, а продолжается со следующего утверждения утверждения. 2 == 2. Когда все утверждения выполнены,pytest.assume() выдаст аномальное сообщение,Перечислите все неудавшиеся утверждения.

Теперь вы понимаете разницу между мягкими и жесткими утверждениями?

Если у вас есть какие-либо вопросы, пожалуйста, оставьте сообщение ниже ~