The BSC Academy. Классификация видов тестирования

«Нужно бежать со всех ног, чтобы только оставаться на месте, а чтобы куда-то попасть, надо бежать как минимум вдвое быстрее»
Л. Кэррол

План
Уровни тестирования
Классификация видов тестирования
Домашнее задание

Уровни тестирования
Компонентное тестирование
Интеграционное тестирование
Системное тестирование
Приемочное тестирование
* Согласно Программе обучения Базового уровня ISTQB®/GTB/TAV, Версия 2018
Конкретные цели
Базис тестирования
Объект тестирования
Типичные дефекты
Специфичные подходы и зоны ответственности

Компонентное тестирование
Компонентное тестирование (Component Testing) -Тестирование отдельных компонентов программного обеспечения [Согласно IEEE 610]
Модульное тестирование, Unit testing
Есть доступ к коду
Использование среды разработчиков

Компонентное тестирование. Изоляция
Драйвер - компонент программного обеспечения или средство тестирования, которое заменяет компонент, обеспечивающий управление и/или вызов компонента или системы;
Заглушка - Минимальная или специализированная реализация программного компонента, использующаяся для подмены компонента, от которого зависит разработка или тестирование другого компонента системы. [IEEE 610]
Драйвера
Заглушки

Интеграционное тестирование
Интеграционное тестирование - тестирование, выполняемое для обнаружения дефектов в интерфейсах и во взаимодействии между интегрированными компонентами или системами

Уровни тестирования
Компонентное тестирование
Интеграционное тестирование
Системное тестирование
Приемочное тестирование
* Согласно Программе обучения Базового уровня ISTQB®/GTB/TAV, Версия 2018

Интеграционное тестирование
Модуль А
Модуль B
Компонентное интеграционное тестирование
Система X
Система Y
Системное интеграционное тестирование

Системное тестирование
Системное тестирование - процесс тестирования системы в целом с целью проверки того, что она соответствует установленным требованиям. [Hetzel]
Независимая (от разработки) команда тестирования
Выбранные пользователи/эксперты
Системные специалисты (производительность, UI/UX, безопасность)

Системное тестирование

Приемочное тестирование
Приемочное тестирование - формальное тестирование по отношению к потребностям, требованиям и бизнес процессам пользователя, проводимое с целью определения соответствия системы критериям приёмки и дать возможность пользователям, заказчикам или иным авторизированым лицам определить, принимать систему или нет. [Согласно IEEE 610]

План
Уровни тестирования
Классификация видов тестирования
Домашнее задание

Оплата за Интернет
• Что именно должен делать тестируемый продукт?
• Каким образом?
• В каких условиях?

Действия, которые выполняет ПО
Создание платежа
Сохранение записи в БД
Подтверждение платежа
Списание средств
Поступление средств на счет провайдера
Сохранение шаблона
…..

Ограничения в ПО

Действия, которые выполняет ПО

Функциональное тестирование
Функциональное тестирование (functional testing): Тестирование, основанное на анализе спецификации функциональности компонента или системы*
Функциональное тестирование системы включает тесты по оценке функций, которые должна выполнять система. Функции системы дают ответ на вопрос «что делает система».
* Согласно стандартному глоссарию терминов, используемых в тестировании программного обеспечения ISTQB®/GTB/TAV, Версия 2014-0 (от 9 июля 2014 года)

Функциональное тестирование
Основывается на:
Спецификации требований
Прецеденты использования
Функциональные спецификации
User Story
Динамическое тестирование

По запуску кода на исполнение

Функциональное тестирование

По доступу к коду и архитектуре приложения
Белый ящик
(White box/ стеклянный/прозрачный/открытый)

По доступу к коду и архитектуре приложения
Черный ящик
(Black box/ закрытый)
Входные данные
Фактический результат

По доступу к коду и архитектуре приложения
Серый ящик
(Grey box)
Входные данные
Ожидаемый результат
API

Действия, которые выполняет ПО

Позитивные и негативные тесты
Позитивное тестирование проверка поведения системы в ситуациях, когда
сценарий использования должен выполняться успешно.
Негативное тестирование — проверка проведения системы в ситуациях, когда функциональность продукта не должна обрабатываться (нештатные данные, условия, предустановки системы и т.д.)

Нефункциональное тестирование
Нефункциональное тестирование (non-functional testing): Тестирование атрибутов компонента или системы, не относящихся к функциональности, то есть надежность, эффективность, практичность, сопровождаемость и переносимость.
«Насколько хорошо система работает»
* Согласно стандартному глоссарию терминов, используемых в тестировании программного обеспечения ISTQB®/GTB/TAV, Версия 2014-0 (от 9 июля 2014 года)

В каких условиях должно работать ПО?

Тестирование совместимости
Тестирование совместимости (тестирование возможности взаимодействия*) – Процесс тестирования для определения возможности взаимодействия программного продукта с каким-либо окружением

Удобно ли пользователю?

Удобно ли пользователям?
Как быстро они понимают, как пользоваться продуктом?
Как часто пользователи ошибаются?
Сколько лишних действий им приходится выполнять?

Тестирование удобства использования
Usability testing/User experience/UX
Практичность (usability)- понятность, легкость в изучении и использовании и привлекательность программного продукта для пользователя при условии использовании в заданных условиях эксплуатации. [ISO 9126]
Тестирование практичности (usability testing) - Тестирование с целью определения степени понятности, легкости в изучении и использовании, привлекательности программного продукта для пользователя при условии использования в заданных условиях эксплуатации. [ISO 9126]
* Согласно стандартному глоссарию терминов, используемых в тестировании программного обеспечения ISTQB®/GTB/TAV, Версия 2014-0 (от 9 июля 2014 года)

Соответствует ли интерфейс макету?
Интерфейс формы
Макет

Инструменты тестирования верстки

Тестирование пользовательского интерфейса
UI testing
Элементы интерфейса пользователя
Тестирование пользовательского интерфейса
Тестирование ЧЕРЕЗ пользовательский интерфейс
Максимальное количество символов, которые можно ввести в поле
Создаем транзакцию платежа через интерфейс (форму)

Как быстро работает продукт?
Тестирование производительности - процесс тестирования с целью определить производительность программного продукта. Исследование показателей скорости реакции приложения на внешние воздействия при различной по характеру и интенсивности нагрузке

Тестирование производительности

Тестирование изменений

Регрессионное тестирование
Когда ПО или окружение изменились
Для вскрытия ошибок, внесенных или найденных в результате изменений
Широта регрессии основана на риске ненахождения ошибок в ПО
Наборы регрессионных тестов повторяемы

Какие тест-комплекты выбрать?
Тест-комплекты, проверяющие часть ПО, к которой принадлежат новые фичи
Тест-комплекты, проверяющие старые фичи, которые зависят от части ПО с новыми фичами
Часть тест-комплектов, которая не входит ни в первую, ни во вторую группы.
1
2
3

План
Уровни тестирования
Классификация видов тестирования
Домашнее задание

Домашнее задание
Скачать карту с классификацией видов тестирования, изучить те, которые не рассказаны на лекции
Тест
Тест по теме "Классификация видов тестирования"
Практическое задание
Представьте себе, что ваша задача - тестирование одного из выбранных сайтов:
https://www.chitai-gorod.ru/
http://iforum.pro/forum.php
Указать, какие тесты необходимы для покрытия перечисленных видов тестирования (см. карточку)