Александр Александров. УЦ Люксофт

Содержание

Слайд 2

Немного о себе

1963-1999 –МГУ, НИВЦ (студент … старший научный сотрудник)
1999-2005 – Люксофт

Немного о себе 1963-1999 –МГУ, НИВЦ (студент … старший научный сотрудник) 1999-2005
(руководитель группы тестирования, тест-менеджер)
2006-2007 – Аурига (директор по качеству)
C 2008 – Люксофт (Учебный Центр, эксперт по управлению качеством ПО)
К.ф.м.н., ст. научн. сотр., доцент
Инструктор по тематике Quality Assurance, авторизованный университетом Carnegie Mellon

Слайд 3

Опыт работы

Более 30 лет работы в области тестирования и обеспечения качества (МГУ,

Опыт работы Более 30 лет работы в области тестирования и обеспечения качества
Люксофт, Auriga)
Более 5 лет работы в области управления качеством (Люксофт, Auriga)
Опыт внедрения процессов (Люксофт, Аурига)
Опыт сертификации ISO 9001 (Люксофт), CMM, CMMI (Люксофт, Аурига)

Слайд 4

Подготовка проекта

Неполная оценка трудозатрат
Тестировщики не привлекаются ни к проведению оценки, ни к

Подготовка проекта Неполная оценка трудозатрат Тестировщики не привлекаются ни к проведению оценки,
ревью получившейся оценки, ни к планированию проекта
Недостаток ресурсов тестирования
Привлекать тестировщиков для ревью трудозатрат
Проводить независимую оценку трудозатрат тестирования (PCB/PPB, методики, литература)

Слайд 5

Подготовка проекта

Неполнота объема тестирования
Необоснованные предположения об отсутствии конкретных видов тестирования (нагрузочного,

Подготовка проекта Неполнота объема тестирования Необоснованные предположения об отсутствии конкретных видов тестирования
конфигурационного и др.)
Отказ от системного тестирования (достаточно интеграционного и компонентного)
Отказ от статического тестирования
Необходимость перепланирования в условиях нехватки ресурсов
Низкое качество объекта тестирования
Проводить детальный анализ объема проекта
Делать обоснованные предположения о наличии неявных требований, которые оказывают влияние на объем тестирования

Слайд 6

Стратегия тестирования

Стратегия тестирования отсутствует / не поддерживается
Отсутствие согласованного порядка подготовки и проведения

Стратегия тестирования Стратегия тестирования отсутствует / не поддерживается Отсутствие согласованного порядка подготовки
тестирования в проекте
Хаотичная передача версий на тестирование
Нет базы тестирования
Низкое качество тестирования
Риск нехватки ресурсов тестирования
Разрабатывать стратегию тестирования
Согласовывать, утверждать и поддерживать стратегию тестирования

Слайд 7

Стратегия тестирования

Критерии начала и завершения тестирования
Отсутствуют критерии начала тестирования
Отсутствие / Нечеткость

Стратегия тестирования Критерии начала и завершения тестирования Отсутствуют критерии начала тестирования Отсутствие
классификации серьезности дефектов
Нет понятия готовности объекта тестирования (модульное тестирование, BATS …)
Коммуникационные проблемы с разработчиками (тестирование) и заказчиком (приемка)
Разработать однозначные критерии начала и завершения тестирования для каждого этапа проекта

Слайд 8

Стратегия тестирования

Особенности объекта тестирования
Не учитываются особенности объекта тестирования (например, отсутствие пользовательского

Стратегия тестирования Особенности объекта тестирования Не учитываются особенности объекта тестирования (например, отсутствие
интерфейса, необходимость специальной среды тестирования)
Нехватка (специально подготовленных) ресурсов тестирования
Неадекватная среда тестирования
Низкое качество тестирования
Совместно с менеджером проекта анализировать особенности объекта тестирования и отражать принятые решения в стратегии тестирования

Слайд 9

Анализ требований

Требования анализируются и разрабатываются без участия тестировщиков
Участвуют только аналитики и разработчики
Тестировщики

Анализ требований Требования анализируются и разрабатываются без участия тестировщиков Участвуют только аналитики
привлекаются после утверждения первой версии требований
Тестировщики плохо знают предметную область
Приложение готово, план тестирования – нет
Часть требований нельзя протестировать
Проводить ревью требований тестировщиками
Обучать тестировщиков предметной области проекта в рамках обучения проектной команды
Выполнять анализ тестируемости требований до их утверждения

Слайд 10

Анализ требований

Требования изменяются без участия тестировщиков
Тестировщики плохо знают предметную область проекта
Приложение готово,

Анализ требований Требования изменяются без участия тестировщиков Тестировщики плохо знают предметную область
план тестирования не актуален
Неверные результаты тестирования (большое количество ложных дефектов, непротестированные области)
Часть требований нельзя протестировать
Информировать тестировщиков об изменениях требований
Привлекать тестировщиков к обсуждению и планированию работ по изменению требований

Слайд 11

Анализ требований

Требования постоянно изменяются
Абсолютно нормальная ситуация
Имеется в виду отсутствие документально зафиксированных требований

Анализ требований Требования постоянно изменяются Абсолютно нормальная ситуация Имеется в виду отсутствие
и их изменений
Невозможность проведения тестирования по плану
Невозможность адекватной оценки качества объекта тестирования
Провести анализ способа представления требований и существующих их изменений
Разработать планы тестирования на основе существующего представления требований
Поддерживать актуальность версий планов тестирования

Слайд 12

Анализ требований

Нет аналитика – некому поддерживать требования
Или «Требования поддерживают все»
Разница между ролью

Анализ требований Нет аналитика – некому поддерживать требования Или «Требования поддерживают все»
и ресурсом
Невозможность создания актуального плана тестирования
Невозможность адекватной оценки качества объекта тестирования
Предусмотреть в плане-графике работы по сбору, анализу и поддержанию требований
Наделить конкретный проектный ресурс ролью аналитика

Слайд 13

План тестирования

Ревью плана тестирования не планируется и/или не проводится
Считается затратным и неэффективным
Нет

План тестирования Ревью плана тестирования не планируется и/или не проводится Считается затратным
требуемых ресурсов
План тестирования не готов к сроку ревью
План тестирования содержит дефекты
Про эти дефекты никто не знает
Они обнаруживаются при тестировании (хорошо, если это так)
Планировать и проводить ревью плана тестирования аналитиками
Планировать и проводить ревью требований тестировщиками

Слайд 14

План тестирования

Тестовые сценарии не содержат деталей
Конкретные действия тестировщика придумываются во время тестирования
Затраты

План тестирования Тестовые сценарии не содержат деталей Конкретные действия тестировщика придумываются во
на воспроизведение действий при воспроизведении дефекта
Низкое качество тестирования из-за неполного набора действий
Невозможность проверки степени покрытия пользовательского интерфейса
Зафиксировать требуемый уровень детальности в стратегии тестирования
Проектировать и разрабатывать планы тестирования с учетом этого уровня детальности

Слайд 15

План тестирования

Тестовые сценарии содержат детали
Изменение требований/дизайна вызывает объемные изменения планов тестирования
Затраты на

План тестирования Тестовые сценарии содержат детали Изменение требований/дизайна вызывает объемные изменения планов
обеспечение актуальности планов тестирования
Затраты на переучивание тестировщиков
Зафиксировать требуемый уровень детальности в стратегии тестирования
Проектировать и разрабатывать планы тестирования с учетом этого уровня детальности
Использовать двухуровневую структуру плана тестирования – тестовые сценарии + тесты

Слайд 16

План тестирования

Проектирование и разработка тестовых данных не планируется и не производится
Данные придумываются

План тестирования Проектирование и разработка тестовых данных не планируется и не производится
во время тестирования
Данных недостаточно (например, используются только корректные данные)
Тестирование миграции без проектирования тестовых данных невозможно
Затраты на воспроизведение данных при воспроизведении дефекта
Низкое качество тестирования из-за малого набора тестовых данных
Проектировать и разрабатывать тестовые данные с использованием классов эквивалентности и граничных значений

Слайд 17

Автоматизация тестирования

Раннее проведение нагрузочного тестирования
Исправление дефектов (как функциональных, так и производительности) как

Автоматизация тестирования Раннее проведение нагрузочного тестирования Исправление дефектов (как функциональных, так и
правило, вызывает перезапись и повторный прогон нагрузочных скриптов
Но: нагрузочное тестирование прототипа
Необходимость выделения ресурсов для повторного проведения нагрузочного тестирования
Детальное планирование момента проведения нагрузочного тестирования

Слайд 18

Автоматизация тестирования

Неадекватная модель нагрузки
Совокупность:
ролей (кто работает в системе)
характеристических сценариев (какие действия производит

Автоматизация тестирования Неадекватная модель нагрузки Совокупность: ролей (кто работает в системе) характеристических
в системе)
профилей (доля и частота)
Модель нагрузки не соответствует бизнесу заказчика
Неадекватные результаты тестирования
Несоответствие ожиданиям заказчика
Согласование модели нагрузки с заказчиком

Слайд 19

Среда тестирования

Тестирование выполняется в среде разработки
Путаница версий
Нестабильность объекта тестирования (исправления «на лету»)
Невозможность

Среда тестирования Тестирование выполняется в среде разработки Путаница версий Нестабильность объекта тестирования
обнаружения части дефектов
Низкое качество тестирования
Сложность коммуникаций с разработчиками (невозможность воспроизвести дефект)
Создание обособленной среды тестирования
Сборка объекта тестирования из baseline

Слайд 20

Среда тестирования

Одна и та же среда тестирования для нескольких проектов
Нестабильность - влияние

Среда тестирования Одна и та же среда тестирования для нескольких проектов Нестабильность
других проектов
Невозможность обнаружения части дефектов
Неверные результаты нагрузочного тестирования
Низкое качество тестирования
Сложность коммуникаций с разработчиками (невозможность воспроизвести дефект)
Создание обособленной среды тестирования
Управление использованием среды тестирования для отдельных проектов

Слайд 21

Проведение тестирования

Дефекты, найденные вне плана тестирования, не приводят к его корректировке
Сложности их

Проведение тестирования Дефекты, найденные вне плана тестирования, не приводят к его корректировке
повторной проверки
Можно забыть, что такие дефекты были найдены
Низкое качество регрессионного тестирования
Повышенные требования к квалификации тестировщиков
Регулярный анализ необходимости и проведение корректировки плана тестирования

Слайд 22

Проведение тестирования

Невозможно идентифицировать версию объекта тестирования
Неясно, был ли обновлен объект тестирования
Невразумительные сведения

Проведение тестирования Невозможно идентифицировать версию объекта тестирования Неясно, был ли обновлен объект
в системе управления дефектами – дефект найден и исправлен в одной и той же версии объекта тестирования
Недостоверная статистика по дефектам
Невозможно понять, например, обнаружен дефект или нереализованная функциональность
Соглашение об идентификации версий
Разработка и применение BATS (Build Acceptance Test Suite)

Слайд 23

Сдача проекта

Не согласована процедура приемки
Что предшествует и что следует за приемо-сдаточными испытаниями
Каковы

Сдача проекта Не согласована процедура приемки Что предшествует и что следует за
ожидания заказчика на момент приемки
Кто принимает решение об успешном завершении проекта со стороны заказчика
Проблемы во время приемки
Задержка сдачи проекта и работа без оплаты заказчиком
Планирование и согласование процедуры приемки (включая приемо-сдаточные испытания)

Слайд 24

Подробнее …

Подготовка проекта
TST-006 – Управление тестированием на примере реальных проектов
Стратегия тестирования
TST-004 –

Подробнее … Подготовка проекта TST-006 – Управление тестированием на примере реальных проектов
Управление тестированием
TST-005 – Управление тестированием, углубленный курс
TST-027 – Тестирование в Agile проектах
Анализ требований
TST-010 – Основы тест-дизайна
TST-016 – Тест-дизайн, практические рекомендации

Слайд 25

Подробнее …

Дизайн
TST-016 – Тест-дизайн, практические рекомендации
TST-019 – Тестирование Usability
TST-020 – Тестирование

Подробнее … Дизайн TST-016 – Тест-дизайн, практические рекомендации TST-019 – Тестирование Usability
Web-приложений
План тестирования
TST-016 – Тест-дизайн, практические рекомендации
TST-022 – Статическое тестирование на практике

Слайд 26

Подробнее …

Автоматизация тестирования
TST-012 – Основы автоматизированного тестирования …
Тренинги по конкретным инструментам
Семейство Mercury
Семейство

Подробнее … Автоматизация тестирования TST-012 – Основы автоматизированного тестирования … Тренинги по
Rational и IBM Rational
Семейство Silk
TestComplete
FIT

Слайд 27

Подробнее …

Среда тестирования
TST-004 – Основы управления тестированием
Тестирование
TST-001 – Основы тестирования
TST-014 – Основы

Подробнее … Среда тестирования TST-004 – Основы управления тестированием Тестирование TST-001 –
практического тестирования
TST-052 – Практикум по использованию Rational Clear Quest
Приемка
TST-004 – Основы управления тестированием
TST-006 – Управление тестированием на примере реальных проектов
Имя файла: Александр-Александров.-УЦ-Люксофт.pptx
Количество просмотров: 212
Количество скачиваний: 0