Инструменты usability тестирования

Технические трудности usability тестирования
Большой объем данных:
речь модератора и респондента;
выражение лица респондента ;
изображение экрана компьютера;
События, происходящие на компьютере:
Перемещение мышки и нажатия на её клавиши;
Использование клавиатуры:
Переходы между экранами (браузера или другой программы).
Синхронизация всех потоков данных

Morae Recorder
Респондент
полная последовательность процессов и операций, происходящих в приложениях и операционной системе;
действия, совершаемые пользователем (видео с экрана пользователя, звук, смену web-страниц, движения мышки, активность клавиатуры, работу с текстом).

2. Morae Remote Viewer
наблюдать за происходящим на рабочем экране участника;
видеть и слышать пользователя
делать пометки в процессе записи и дополнять ее комментариями;
автоматически сохранять и индексировать пометки с соответствующими аудио- и видеозаписями.
Тестировщики

3. Morae Manager
автоматически индексирует записи с экрана и камеры;
позволяет высчитывать время, потраченное на выполнение задачи;
вычисляет необходимые данные при помощи встроенного калькулятора;
выделять важные сегменты проведенного тестирования;
добавлять текстовые пометки и голосовые комментарии;
создавать видеообзоры для презентации;
графическая интерпретация результатов тестирования

Morae Manager
Проблема – процесс выработки рекомендаций

Observer XT
Собирает необходимые и точные данные.
Описываете поведение с точностью в количественном виде.
Автоматически и точно регистрируете время.
Интегрируете видео и физиологические показатели при анализе поведения.
Фильтрует необходимые выборки данных.
Подводит статистику и оценивает достоверность данных.
Делает вырезки тех частей видео и данных, которые интересны.
Возможность групповой работы.
Записывает события (поведенческие реакции).
Позволяет регистрировать физиологические показатели: ритм; сердцебиение, размер зрачка, движение глаз.

FaceReader™
.
Автоматически анализирует эмоциональные выражения лица человека: счастье, грусть, злость, отвращение, удивление, испуг и нейтральное выражение лица, презрение.
10000 аннотированных изображений.
Объективность в наблюдениях.
Точное моделирование лица ( 500 ключевых точек).
Рассчитывает направление взгляда, ориентацию головы.
Определяет демографические показатели респондентов (пол, возраст).
Записывать поведенческие характеристики группы респондентов.
Автоматическое создание групп по пол и возрасту.
Статистическая обработка результатов.
Синхронизация результатов с раздражителем и видеофрагментами.
Автоматический анализ результатов в облаке.

FaceReader™
.

FaceReader™
.

Тестирование визуальных регрессий
Регрессионное тестирование — собирательное название для всех видов тестирования программного обеспечения, направленных на обнаружение ошибок в уже протестированных участках исходного кода.
Визуальное тестирование – это проверка того, насколько корректно графический интерфейс приложения отображается пользователю (ошибки рендеринга страниц, шрифтов, изображений и др.).
Визуальное регрессионное тестирование применяет альтернативный подход к тестированию веб-страниц (проверка элемента или текста).
DOM (Document Object Model) – объектная модель, используемая для XML/HTML-документов (представление документа в виде дерева объектов, доступное для изменения через JavaScript).

Критерии выбора инструмента для тестирования визуальных регрессий
возможность проверки нескольких страниц одновременно;
тестирование динамического контента;
кроссбраузерность. Необходимо, чтобы инструмент был эффективным во всех заданных требованиями браузерах и устройствах;
наглядный отчет результатов ;
возможность интеграции с функциональными тестами.

Applitools Eyes (облачный сервис)
проверка GUI, сравнение с эталонным изображением Web, Mobile и Native приложений;
принцип работы:
при прохождении теста выполняется скриншот;
скриншот сравнивается с исходным изображением (baseline image);
в случае каких-либо несоответствий, предоставляется наглядный отчет.
Методы сравнения:
Mismatch Tolerance. Изменение величины доступного отклонения («строгость» сравнения): по пикселям, строго, по элементам, по блокам элементов;
Ignored Region. Введение региона, который не должен участвовать в процессе сравнения;
Floating Region. Выделение области доступного движения (для динамического контента).

PhantomCSS
CasperJS — инструмент для взаимодействия с браузером PhantomJS или SlimerJS (открытие страницы, выполнение событий). В дополнение, CasperJS предоставляет свой фреймворк для тестирования и возможность сделать скриншот страницы.
PhantomJS 2 или SlimerJS — два headless-браузера, каждый из которых может использоваться в PhantomCSS. Headless-браузер — это обычный браузер без пользовательского интерфейса.
Resemble.js — библиотека для сравнения изображений.

Usabilityhub
https://usabilityhub.com
Выбор вида тестирования
Загрузить скриншот страницы
Сделать краткое описание проекта
Выбрать пять основных вопросов
Задать желательное количество просмотров
Запустить тест

UserPlus
Самостоятельно.
Инструмент TheAdvisorTool.
на реальных пользователях, с помощью инструмента TheTesterTool.

Usabilla
1. Создание нового теста ( URL сайта, язык тестирования). Доступно 20 языков, в том числе русский.
2. Указание страницы сайта для тестирования. Можно загрузить их скриншоты с компьютера или указать путь к ним на сайте.
3. Выбор вопросов, на которые хотим получить ответы от пользователей. Можно воспользоваться стандартными, заранее предопределенными вопросами или сформулировать свои собственные.
4. Нахождение и приглашение пользователей, которые готовы принять участие в тестировании и поделиться своим мнением.
5. Программа выдает результаты тестов и отзывы пользователей, а затем предоставляет статистику, сгруппированную в удобном для анализа виде.

OptimalWorkshop
Optimalsort —инструмент, который помогает организовать структуру сайта с помощью метода сортировки карточек.
Treejack — приложение для тестирования многоуровневой информационной архитектуры сайта. Чтобы начать тестирование, структуру веб-сайта необходимо организовать как таблицу и загрузить в Treejack.
Calkmark — инструмент предназначен для тестирования юзабилити веб-страниц. Он помогает понять, насколько просто (или сложно) пользователям сайта находить нужную информацию.

Он-лайн инструменты
4Q – небольшой опрос посетителей сайта, состоящий всего из 4 вопросов, интегрируется с GoogleAnalytics и доступен на 10 языка.
Feng-GUI – имитирует взгляд пользователя в течение первых 5 секунд воздействия визуального эффекта.
ClickHeat – интегрируется на сайт и создает визуальную тепловую карту кликов посетителей веб-страницы, карта отражает результат работы реальных пользователей сайта.
WebVisor – записывает действия посетителей сайта: клики, скроллинг, нажатие клавиш, заполнение форм, выделение и копирование текста; воспроизводит записанные действия в режиме «живого видео»; проводит детальную аналитику поведения посетителей веб-сайта; составляет карты активности пользователей: тепловые карты кликов, карты внимания и карты скроллинга.

SitePolice
Заказчик выставляет свой сайт на суд «полицейских», формулирует несколько вопросов, на которые хотел бы получить ответы и выбирает тарифный план аудита.
Аудиторы пишут отчет по сайту в практически свободной форме.
В отчете есть только два обязательных раздела: «анализ юзабилити сайта и способы решения проблем» и «общий вывод».
За свои отчеты и активность на сайте «полицейские» получают баллы, которые потом могут превратить в деньги.
Если заказчик аудита не против, то все отчеты «полицейских» остаются на сайте сервиса для общего просмотра.

NetpeakSpider
Сканирование сайтов и выгрузка основных SEO-параметров страниц с помощью собственного робота.
Поиск ошибок, битых ссылок, неправильных редиректов, дубликатов title, description, keywords и т.д.
Анализ входящих и исходящих внутренних ссылок для каждой страницы сайта.
Расчёт внутреннего Page Rank.
Гибкие настройки сканирования и экспорт данных в формате Excel