Автоматизированное тестирование ПО

При автоматизированном тестировании программный инструмент проверяет другую систему. Тестировщики пишут и запускают скрипты, а затем сравнивают фактические результаты с ожидаемыми. Автоматизация необходимых повторяющихся проверок экономит время.

Открыть схему в полном размере ↗

Автоматизированное тестирование ПО

Обзор автоматизации тестирования ПО

Инструмент автоматизации позволяет тестировщику писать скрипты и проверять с их помощью систему. Он автоматизирует отдельные части ручного тестирования и помогает провести тщательные проверки быстрее. Такие инструменты поддерживают регрессионные, нагрузочные и стрессовые тесты, однако полностью заменить ручное тестирование они не могут. Автоматизация экономит время, деньги и усилия и помогает повысить точность.

Автоматизация охватывает не все стороны ПО, но полезна, например, для проверки графического интерфейса и подключения к базе данных. Она особенно полезна в крупных сложных проектах, где нужны частые проверки, и в приложениях, которыми одновременно пользуется много людей. Сэкономленное время помогает команде сосредоточиться на качестве ПО.

Прежде чем автоматизировать тесты, выясните:

1. Какие части ПО нужно тестировать автоматически.
2. Какие инструменты лучше подходят для работы.
3. Как писать и запускать тестовые скрипты.
4. Как выявлять возможные дефекты и составлять отчёты о результатах.

Автоматизация может повысить качество. Инспекции и пошаговые коллективные разборы по-прежнему необходимы и тоже помогают добиться этого. Многие организации всё ещё считают автоматизированное тестирование последней возможностью найти дефекты, пропущенные ранее.

Стратегия автоматизации тестирования ПО

Подходящие инструменты упрощают тестирование. Для достижения целей разработайте также стратегию автоматизации. Определите, что и как проверять, где и как сопровождать скрипты, какую пользу получит проект и какой экономии вы ожидаете. Конкретная стратегия даёт более надёжную основу для достижения целей тестирования.

Разбейте стратегию на более мелкие цели и проверьте, позволяет ли инструмент их достичь. Если на крупном проекте сразу взяться за сложные участки, можно допустить ошибки. Начните с небольшого объёма и постепенно расширяйте охват.

Автоматизированные тесты применяются на модульном, интеграционном и системном уровнях. Планируйте их как можно раньше, чтобы обнаружить больше дефектов на ранних этапах разработки.

Автоматизация тестирования ПО и окупаемость инвестиций (ROI)

Окупаемость инвестиций (ROI) помогает оценить преимущества автоматизации тестов, включая снижение затрат, повышение эффективности и улучшение качества ПО.

ROI = (Доход за вычетом вложенной суммы) / Вложенная сумма
Для оценки ROI автоматизации тестирования чаще всего применяют следующие методы:

• Простой ROI. Оцените финансовую выгоду от снижения затрат. Учтите расходы на лицензии, оборудование, обучение персонала, разработку скриптов, сопровождение и анализ. Результат показывает денежную выгоду от внедрения автоматизации.
• ROI эффективности. Измерьте выигрыш во времени и эффективности. Этот метод полезен, если компания уже приобрела и использует средства автоматизации и не нуждается в новых инвестициях. Тогда для оценки экономии времени не нужно заново рассчитывать простой ROI.
• ROI снижения риска. Оцените уменьшение риска и возможности повышения качества. Автоматизация освобождает время для анализа, ситуативного и исследовательского тестирования. Более полное покрытие тестами снижает вероятность сбоев.

Какие тесты стоит автоматизировать

Автоматизировать все тесты трудно и нецелесообразно. Тщательно отбирайте сценарии. Начните с участков, которые требуют повторных проверок, и тестов, использующих большие объёмы данных. Подходят также:

1. Тесты, для которых нужны разные наборы данных и которые трудно запускать вручную.
2. Нагрузочные и стрессовые тесты, которые сложно проводить вручную.
3. Тесты производительности на нескольких платформах.
4. Тесты графического интерфейса.

Какие тесты плохо подходят для автоматизации

Некоторые тесты плохо поддаются автоматизации, в том числе:

1. Тесты, которые выполняются один раз или очень редко.
2. Ситуативные и исследовательские тесты, для которых нужен самостоятельный поиск специалиста.
3. Тесты, которые нужно выполнять вручную или в которых необходима оценка специалиста.

Как автоматизировать тесты?

Сначала определите, что должен проверять автоматизированный тест. Выбирайте стабильные независимые сценарии. С несколькими небольшими независимыми тестами легче работать, чем с несколькими большими и сложными скриптами. Большие скрипты сложнее сопровождать, и их бывает трудно запускать после существенных изменений ПО. Короткий скрипт легче обновить.

Проведите тест вручную, прежде чем автоматизировать его. Запишите каждый шаг, который должен повторять скрипт. Это поможет определить условия, необходимые для тщательной проверки функции.

Включите в скрипт все необходимые проверки. Для тестов транзакций убедитесь, что в базе данных есть нужные тестовые данные.

Перед запуском тестов разберитесь, как работает инструмент автоматизации. Это поможет избежать остановок из-за незнакомых проблем.

Инструменты автоматизации тестирования ПО

Инструменты автоматизации упрощают трудоёмкие ручные процедуры и повышают эффективность и производительность тестирования. Они помогают сделать больше за меньшее время, но полностью полагаться на них не стоит. Определите, где нужны ручные тесты, а где полезна автоматизация. Многие проверенные инструменты платные, однако их практическая польза может оправдывать применение в проекте.