Ручное тестирование ПО. Классы эквивалентности и граничные условия. Планирование и работа с требованиями

Анализ классов эквивалентности
Анализ граничных условий
Работа с требованиями к ПО
Как тестировщик готовится к релизу
Как отражается состояние проекта по документации
План урока

Анализ классов эквивалентности
Анализ граничных условий
Самые популярные техники тест-дизайна

Используется на разных уровнях ПО – от отдельных функций до целого продукта.
Тестировщики пользуются ими интуитивно каждый день.
Неправильное использование этих техник может привести к пропуску серьезных ошибок.
Почему знание этих техник важно:

Разбить весь набор тестов на классы эквивалентности с последующим сокращением числа тестов.
Суть техники анализа классов эквивалентности

Сократить число тестов, сохранив тестовое покрытие
Цель техники анализа классов эквивалентности

Тестовое покрытие - это одна из метрик оценки качества тестирования, представляющая из себя плотность покрытия тестами требований либо исполняемого кода.
Тестовое покрытие

Слишком большое количество эквивалентных классов увеличивает вероятность, что множество тестов будет лишним (избыточным)
Количество классов эквивалентности

Слишком малое число эквивалентных классов увеличивает вероятность, что ошибки продукта будут пропущены
Количество классов эквивалентности

Тестируют одну и ту же вещь
Если один из тестов ловит ошибку, то другой скорее всего тоже её поймает
Если один из них не ловит ошибку, то другой скорее всего тоже не поймает
Эквивалентные тесты

Определить классы эквивалентности.
Выбрать одного представителя от каждого класса.
Выполнить тесты.
Алгоритм использования техники

Рассмотрим функцию подсчета комиссии при отмене бронирования авиабилетов.
За 5 суток до вылета комиссия составляет 0%
Меньше 5 суток, но больше 24 часов – 50%
Меньше 24 часов, но до вылета – 75%
После вылета – 100%
Пример

Определим классы эквивалентности

Выберем представителя от каждого класса эквивалентности

Выполним тесты
Отменим бронь за 10 суток до вылета и проверим, что комиссия составила 0%.
Отменим бронь за 3 суток до вылета и проверим, что комиссия составила 50%.
Отменим бронь за 12 часов до вылета и проверим, что комиссия составила 75%.
Отменим бронь через 30 мин после вылета и проверим, что комиссия составила 100%.

И что мы получим
4 теста из 950400 возможных
Круто, правда?

Плюсы и минусы техники
К плюсам можно отнести заметное сокращение времени и улучшение структурированности тестирования.
К минусам можно отнести то, что при неправильном использовании техники мы рискуем пропустить баги.

Техника анализа граничных условий
Давно замечено, что при разработке большое число проблем возникает на границах входных переменных.
Даже если эквивалентные классы найдены правильно, то граничные значения могут быть ошибочно отнесены к другому классу.

Алгоритм техники
анализа граничных условий
Выделить классы эквивалентности
Определить граничные значения этих классов
Определить к какому классу будет относиться каждая граница
Для каждой границы нам нужно провести тесты по проверке значения до границы, на границе, и сразу после границы

Выделяем классы эквивалентности. Определяем границы
Границы

Определяем к какому классу относятся границы

Тестируем значения на границах

Плюсы и минусы техники
Добавляет в технику анализа классов эквивалентности ориентированность на конкретный тип ошибок
К минусам можно отнести то, что при неправильном использовании техники мы рискуем пропустить баги.

Работа с требованиями к ПО
Тестирование требований
Составление тестов на основе требований
Актуализация тестов по изменениям в требованиях

Тестирование требований
Завершенность
Атомарность
Непротиворечивость
Однозначность
Выполнимость
Обязательность
Прослеживаемость
Модифицируемость
Проранжированность
Корректность
Проверяемость

Составление тестов
Составляем тесты
(тест-кейсы, чек-листы)
Используем специальные техники
(анализ классов эквивалентности и граничных условий)

Актуализация тестов

Участие в планировании релиза
Тестирование новой функциональности
Проверка исправления ошибок
Регрессионное тестирование

Тестирование новой функциональности

Проверка исправления ошибок

Регрессионное тестирование

Наличие документации
REQ
TESTS
Актуальная документация

Наличие документации
REQ
TESTS
Неактуальные требования и тестовые артефакты

Наличие документации
REQ
TESTS
Неактуальные требования и актуальные тестовые артефакты

Наличие документации
REQ
TESTS
Актуальны требования и неактуальные тестовые артефакты

Наличие документации
REQ
TESTS
Полное отсутствие документации

Практика
В интернет-магазине при покупке товаров на сумму:
- до 1000 руб, покупатель должен оплатить доставку;
- от 1000 руб, покупателю предоставляют скидку 5% и доставка становится бесплатной;
- от 3000 руб, покупателю предоставляют скидку 10% и дают подарок.
Необходимо составить тесты, которые вы считаете обязательными для проверки расчета скидки, на основе техник анализа классов эквивалентности и граничных условий, аналогично примеру, рассмотренному в середине урока.

В интернет-магазине при покупке товаров на сумму:
- до 1000 руб, покупатель должен оплатить доставку;
- от 1000 руб, покупателю предоставляют скидку 5% и доставка становится бесплатной;
- от 3000 руб, покупателю предоставляют скидку 10% и дают подарок.
Необходимо составить тесты, которые вы считаете обязательными для проверки расчета скидки, на основе техник анализа классов эквивалентности и граничных условий, аналогично примеру, рассмотренному в середине урока.
1 000 руб
3 000 руб

В интернет-магазине при покупке товаров на сумму:
- до 1000 руб, покупатель должен оплатить доставку;
- от 1000 руб, покупателю предоставляют скидку 5% и доставка становится бесплатной;
- от 3000 руб, покупателю предоставляют скидку 10% и дают подарок.
1 000 руб
3 000 руб
500
10 500
1 500

В интернет-магазине при покупке товаров на сумму:
- до 1000 руб, покупатель должен оплатить доставку;
- от 1000 руб, покупателю предоставляют скидку 5% и доставка становится бесплатной;
- от 3000 руб, покупателю предоставляют скидку 10% и дают подарок.
1 000 руб
3 000 руб
1 500
500
10 500
999
1001
2999
3001

Итого:
500 рублей - скидки нет, нужно оплатить доставку – 1 класс эквивалентности
999 рублей - скидки нет, нужно оплатить доставку – 1 класс эквивалентности
1000 рублей - скидка 5%, доставка бесплатная – 2 класс эквивалентности
1001 рубль - скидка 5%, доставка бесплатная – 2 класс эквивалентности
1500 рублей - скидка 5%, доставка бесплатная – 2 класс эквивалентности
2999 рублей - скидка 5%, доставка бесплатная – 2 класс эквивалентности
3000 рублей - скидка 10%, доставка бесплатная, подарок – 3 класс эквивалентности
3001 рубль - скидка 10%, доставка бесплатная, подарок – 3 класс эквивалентности
10500 рублей - скидка 10%, доставка бесплатная, подарок – 3 класс эквивалентности
1 000 руб
3 000 руб
1 500
500
10 500
999
1001
2999
3001

Домашнее задание
1. Составить тесты на основе техник анализа классов эквивалентности и граничных условий для поля по вводу года рождения, которое можно заполнить значениями от 1900 до 2017 (включительно).
2. Составить чек-лист на основе техник анализа классов эквивалентности и граничных условий для доработки интернет-магазина (доработка на запрет покупок некоторых товаров детям в интернет-магазине).