Какие проверки нельзя/не стоит автоматизировать?

1️⃣ Как кратко ответить

Не стоит автоматизировать проверки, которые требуют человеческого восприятия, такие как юзабилити и визуальные тесты, проверки, которые выполняются редко или одноразово, а также тесты, которые часто меняются или имеют высокую стоимость поддержки. Автоматизация неэффективна для тестов, требующих сложного взаимодействия с аппаратным обеспечением или внешними системами, которые сложно эмулировать.

2️⃣ Подробное объяснение темы

Автоматизация тестирования — это мощный инструмент, который позволяет ускорить процесс тестирования и повысить его эффективность. Однако не все проверки подходят для автоматизации. Рассмотрим, какие проверки не стоит автоматизировать и почему.

1. Проверки, требующие человеческого восприятия:

   • Юзабилити тесты: Эти тесты оценивают удобство использования интерфейса, интуитивность навигации и общее впечатление пользователя. Такие аспекты сложно оценить программно, так как они зависят от субъективного восприятия человека.
   • Визуальные тесты: Проверка визуального оформления, таких как цветовая гамма, шрифты и расположение элементов, также требует человеческого взгляда. Хотя существуют инструменты для визуального тестирования, они не всегда могут заменить человеческое восприятие.

2. Редко выполняемые или одноразовые тесты:

   • Если тест выполняется один раз или очень редко, затраты на его автоматизацию могут не окупиться. Автоматизация требует времени на разработку и поддержку, что нецелесообразно для тестов, которые не повторяются.

3. Часто изменяющиеся тесты:

   • Тесты, которые часто меняются из-за изменений в требованиях или функциональности, могут стать обузой для автоматизации. Постоянное обновление автоматизированных тестов может занять больше времени, чем их ручное выполнение.

4. Тесты с высокой стоимостью поддержки:

   • Если автоматизация теста требует сложной настройки или взаимодействия с нестабильными системами, поддержка таких тестов может быть слишком затратной. Это может включать тесты, которые зависят от внешних API, которые часто меняются или недоступны.

5. Тесты, требующие сложного взаимодействия с аппаратным обеспечением:

   • Автоматизация тестов, которые требуют физического взаимодействия с устройствами, может быть сложной и дорогостоящей. Например, тестирование сенсорных экранов или устройств ввода-вывода может потребовать специализированного оборудования и программного обеспечения.

Пример: Рассмотрим ситуацию, когда необходимо протестировать новый дизайн веб-страницы на удобство использования. Автоматизация может проверить, что все элементы на странице загружаются и работают, но она не сможет оценить, насколько удобно пользователю взаимодействовать с этими элементами. Для этого потребуется ручное тестирование с участием реальных пользователей, которые могут дать обратную связь о своем опыте.

Таким образом, при принятии решения об автоматизации тестов важно учитывать не только технические возможности, но и экономическую целесообразность, а также необходимость человеческого восприятия.