Нагрузочный тестировщик — Квалификационный тест ISTQB ч.1

Правильный ответ — В. Воспроизводимость результатов является ключевым фактором при выполнении тестов производительности. Результаты должны быть статистически идентичными при выполнении на одной и той же неизменной системе. A — неверно, потому что тесты иногда довольно сложны в создании. C — неверно, потому что тесты обычно проводятся не в реальном продакшене, а в его репрезентативном эквиваленте. D — неверно, потому что результаты тестирования могут показать, что система не соответствует ожиданиям.

Правильный вариант D. Это описание спайк-тестирования. A — описание стресс-тестирования. B — описание нагрузочного тестирования. C — описание тестирования масштабируемости.

Ответ А является описанием нагрузочного тестирования. B — описание стресс-тестирования. C — описание тестирования масштабируемости. D — описание спайк-тестирования.

D — правильный вариант. A и B неверны, потому что такие действия выполняются на этапе системного тестирования. C — неверно, потому что эти действия выполняются во время интеграционного тестирования.

Правильный вариант C. Тестирование через API имеет смысл, когда UI может измениться, но при этом необходимо протестировать коммуникацию с UI в обе стороны. A — неверно, потому что это крауд-тестирование, и тестеры будут использовать реальный UI. B — неверно, потому что уровень протокола коммуникации на один уровень ниже уровня API. D — неверно, поскольку при тестировании API можно создать много тестовых экземпляров.

D — верно. При утечке памяти время отклика будет уменьшаться с течением времени (точно не известно, пока не протестируете). A — признак стандартных проблем с производительностью, таких как непродуманный дизайн, слабое оборудование, плохое подключение и т. д. Вариант B — признак проблем с пулом ресурсов, очередью или стеком, или неправильных настроек таймаута. C — признак того, что некоторые ресурсы могут исчерпаться, но только при высокой нагрузке.

A — верно. Высокая задержка означает, что в сети происходят задержки, которые могут быть вызваны недостаточной пропускной способностью. B — неверно, потому что низкая задержка — это хорошо. C — неверно, потому что задержки можно отследить хорошими инструментами. D — неверно, потому что если в задержка нестабильная, то она должна контролироваться.

Ответ A верен. Агрегированные результаты помогают видеть общую картину и заметить устойчивые тренды. Агрегирование результатов помогает выявить и понять важность отклонений и понять, какие из них представляют интерес, а какие просто случайные. B — неверно, потому что в агрегированные результаты не включают данные об отклонениях. C — неверно, потому что агрегирование позволяет увидеть общую картину, а не фокусироваться на отдельных вещах, которые могут быть вызваны случайными шумами в системе. Маловероятно, что когда-либо будет достигнут момент, когда будут понятны «все» вариации. D — неверно, поскольку такой вид репортов будет слишком сложен для понимания стейкхолдерами и может излишне фокусировать их внимание на маловероятных ситуациях.

Правильный вариант C. Инструменты анализа сканируют логи сервера на предмет определенных ошибок (большое использование ресурсов, ошибки памяти и т. д.) и сообщают о них. A — неверно, поскольку это общие инструменты мониторинга системы. B — неверно, это задача инструментов тестирования производительности. D — неверно, поскольку в логи сервера записываются не  результаты тестов производительности, а скорее системные активности во время тестов производительности.

Правильный вариант C. Здесь описание типичной неисправности (failure), возникающей в результате спайк-тестирования. A неверно, поскольку это результат теста на выносливость (endurance). B — неверно, поскольку это пример деградации ресурсов с течением времени. D — неверно, потому что это результат теста на масштабируемость (scalability test).