Автоматизация тестирования
Проверка программы другой программой: автотесты повторяют сценарии тестировщика за минуты и после каждого изменения кода, а специалисты переключаются на исследовательское тестирование и более сложные задачи.
Автоматизация тестирования — проверка программы другой программой. Сценарии, которые тестировщик раньше проходил вручную, записываются в виде автотестов и запускаются за минуты — после каждого изменения кода, ночью или перед выпуском версии. Автоматизация не заменяет тестировщиков, а дополняет их: однотипные проверки выполняет машина, а специалисты переключаются на новый функционал, исследовательское тестирование и более сложные задачи.
Что автоматизируют
Автоматизировать можно не только проверки через интерфейс. Чаще всего автотесты пишут для:
- регрессионного тестирования — убедиться, что доработки не сломали то, что уже работало;
- смоук-тестов — быстрой проверки основных функций сразу после сборки;
- проверок API и интеграций — они быстрые и стабильные;
- нагрузочного тестирования — без автоматизации его не провести: тысячи одновременных пользователей вручную не изобразить;
- проверки на разных конфигурациях — браузерах, версиях операционных систем, моделях телефонов.
Пирамида тестов
Больше всего должно быть модульных тестов: они проверяют отдельные функции, выполняются за секунды и пишутся вместе с кодом. Меньше — тестов API и интеграций. Меньше всего — тестов через пользовательский интерфейс: они ближе всего к действиям человека, но медленнее и чаще ломаются от изменений верстки.
# Python (pytest + Playwright): автотест входа в личный кабинет
def test_login(page):
page.goto("https://example.ru/login")
page.fill("#email", "user@example.ru")
page.fill("#password", "secret")
page.click("button[type=submit]")
assert page.locator("h1").inner_text() == "Личный кабинет"
Тест открывает браузер, вводит данные, нажимает кнопку и проверяет, что открылся кабинет. В CI/CD такие тесты запускаются сами, и сломанная сборка не доходит до пользователей.
Автоматизация тестирования мобильных приложений
Мобильные приложения проверяют на разных устройствах, версиях Android и iOS и размерах экрана. Для этого используют Appium — один набор тестов для обеих платформ, — а также встроенные инструменты Espresso для Android и XCUITest для iOS. Тесты запускают на эмуляторах и на ферме реальных устройств: эмулятор дешевле и быстрее, но поведение камеры, уведомлений и экономии заряда проверяется только на настоящем телефоне. Приложения на React Native и Flutter тестируют теми же способами.
Как проходит автоматизация
- Подготовка — выбрать сценарии, которые выгодно автоматизировать: частые, стабильные, важные для бизнеса.
- Разработка — подготовить тестовую среду и данные, выбрать инструменты, написать автотесты, настроить расписание и отчеты.
- Использование — запускать тесты и разбирать результаты; это может делать и команда разработки, и специалисты заказчика.
- Поддержка — обновлять автотесты вслед за изменениями системы; без этого они быстро устаревают и начинают «краснеть» без причины.
Когда автоматизация окупается
Автоматизация выгодна, когда продукт развивается долго, выпуски частые, а однотипных проверок много — например, в банковской системе, которую дорабатывают каждые две недели. Для короткого проекта или функции, которая постоянно меняется, автотесты обойдутся дороже ручной проверки: их придется переписывать чаще, чем запускать.
Автоматизация тестирования в КПР
КПР разрабатывает автотесты для веб-систем, мобильных и настольных приложений и включает тестировщиков в команды проектов — например, в командах развития продуктов Альфа-Банка. Специалистов по тестированию можно подключить к своему проекту в рамках ИТ-аутсорсинга и выделенных команд. Ручные проверки описывает термин «Функциональное тестирование».