Автоматизация тестирования десктоп-приложений

Автоматизация тестирования десктоп-приложений
О себе
Раньше
Сейчас
Главный специалист
автоматизированного
тестирования
кредитной системы

Автоматизация тестирования десктоп-приложений
Уровни автоматизации

Автоматизация тестирования десктоп-приложений
UI тестирование
Web-тестирование
Тестирование мобильных приложений
Тестирование десктоп-приложений

Автоматизация тестирования десктоп-приложений
Web

Автоматизация тестирования десктоп-приложений
Mobile

Автоматизация тестирования десктоп-приложений
Desktop

Автоматизация тестирования десктоп-приложений
Особенности десктоп-приложений
Должно быть развернуто и установлено
Зависят от операционной системы
Должны быть достаточные аппаратные ресурсы компьютера

Автоматизация тестирования десктоп-приложений

Инструменты

Автоматизация тестирования десктоп-приложений
Поиск элементов

Автоматизация тестирования десктоп-приложений
Платные фреймворки

Автоматизация тестирования десктоп-приложений
Плюсы
быстрый старт
обучение,хорошая поддержка
широкий спектр платформ

Автоматизация тестирования десктоп-приложений
Минусы
Стоимость
Невозможность кастомизировать(нет исходного кода)

Автоматизация тестирования десктоп-приложений
Фреймворки с открытым кодом

Автоматизация тестирования десктоп-приложений
«Нестандартные» фреймворки
SikuliX
Robot framework
UI library
FlaUI
Selenium WebDriver
WinApp+Appium
Winium
Фреймворки

Автоматизация тестирования десктоп-приложений
SikuliX

Автоматизация тестирования десктоп-приложений
click("1534932430966.png")
sleep(1)
type("cmd\n")
sleep(1)
type("notepad\n")
sleep(1)
type("Hello! From SikuliX")
Пример

Автоматизация тестирования десктоп-приложений
Robot framework

Автоматизация тестирования десктоп-приложений
*** Settings ***
| Library | AutoItLibrary
*** Variables ***
| ${notepad++} |C:\\ProgramFiles\\Notepad++\\notepad++.exe
*** Test Cases ***
| Example |
| Run | ${notepad++}
Пример

Автоматизация тестирования десктоп-приложений
Flaui

Автоматизация тестирования десктоп-приложений
using FlaUI.UIA3;
var app = FlaUI.Core.Application.Launch(“notepad.exe");
using (var automation = new UIA3Automation()) {
var window = app.GetMainWindow(automation);
var button1 = window.FindFirstDescendant(cf => cf.ByText(“Save"))?.AsButton();
button1?.Invoke();
}
Пример

Автоматизация тестирования десктоп-приложений
WinAppDriver

Автоматизация тестирования десктоп-приложений
DesiredCapabilities capabilities = new DesiredCapabilities();
capabilities.setCapability("app","Microsoft.WindowsNotepad");
NotepadSession = new WindowsDriver(new URL("http://localhost:8080"), capabilities);
Пример

Автоматизация тестирования десктоп-приложений

Автоматизация тестирования десктоп-приложений
String apppath = "C:\\Windows\\System32\\notepad.exe";
String winiumdriverpath = "src\\Winium.Desktop.Driver.exe";
new DesktopOptions().setApplicationPath(apppath);
File drivePath = new File(winiumdriverpath);
WiniumDriverService service = new WiniumDriverService. Builder(). usingDriverExecutable(drivePath) .usingPort(8080).buildDesktopService();
service.start();
WiniumDriver driver = new WiniumDriver(service, options);
Пример

Автоматизация тестирования десктоп-приложений
Сравнение

Автоматизация тестирования десктоп-приложений
Сравнение

Автоматизация тестирования десктоп-приложений
Трудности с FlaUI
Высокий порог входа в проект – реализация сильно отличается от автотестов для веб-приложений, нужно понимание как работает драйвер

Автоматизация тестирования десктоп-приложений
API Webdriver

Автоматизация тестирования десктоп-приложений
Итог

Автоматизация тестирования десктоп-приложений
Проблемы с кастомным драйвером
Нет реализации некоторых команд

Автоматизация тестирования десктоп-приложений
Решение
Доработка существующих команд
Реализация новых команд

Автоматизация тестирования десктоп-приложений
Доработка
Необходимо добавить или изменить реализацию команды
Пример – добавить кастомный поиск элемента по определенному локатору

Автоматизация тестирования десктоп-приложений
Решение
Находим FindElementExecutor
Получаем стратегию поиска
var searchStrategy = ExecutedCommand.Parameters["using"].ToString();
Реализуем логику
if (searchStrategy.Equals(“name")){
//твоя реализация
}

Автоматизация тестирования десктоп-приложений
Добавить новую команду
Реализация команды – добавить в CommandExecutors
Включить в команды драйвера
Добавление команды в список команд
Добавление команды в словарь – связываем реализацию и API Webdriver

Автоматизация тестирования десктоп-приложений
Реализация команды
internal class GetElementRectExecutor : CommandExecutorBase
{
protected override string DoImpl()
{
var registeredKey = this.ExecutedCommand.Parameters["ID"].ToString();
var element=this.Automator.ElementsRegistry.GetRegisteredElement(registeredKey);
DriverManager.GetActiveWindow();
var boundingRect = element.FlaUIElement.Properties.BoundingRectangle.Value;
var response = new Dictionary
{
{ "x", boundingRect.Left},
{ "y", boundingRect.Top},
{ "width", boundingRect.Width },
{ "height", boundingRect.Height }
};
return this.JsonResponse(ResponseStatus.Success, response);
}
}

Автоматизация тестирования десктоп-приложений
Включить в драйвер
FlaUIDesktopDriver.csproj

Автоматизация тестирования десктоп-приложений
Добавление в список
DriverCommand.cs
public static readonly string GetElementRect = "getElementRect";

Автоматизация тестирования десктоп-приложений
Добавление в словарь
UriDispatchTables.cs
private readonly Dictionary
commandDictionary = new Dictionary CommandInfo>();
public UriDispatchTables(Uri prefix)
{
this.InitializeSeleniumCommandDictionary();
}
private void InitializeSeleniumCommandDictionary()
{
this.commandDictionary.Add(DriverCommand.GetElementRect, new CommandInfo("GET","/session/{sessionId}/element/{id}/rect"));
}

Автоматизация тестирования десктоп-приложений
Итоги
Поиск элементов
UISpy, Inspect, «свой» инструмент
Фреймворки
Нестандартные (SikuliX, Robot Framework)
UI Library (Flaui)
Selenium WebDriver (Winium, WinApp)

Автоматизация тестирования десктоп-приложений
Окупаемость
Окупаемость разработки автотестов
Всего 94 кейса
Трудоемкость:
ручного тестирования – 24,82Md/регресс
разработки автотестов – 358Md
358/24,82 = 14,4 регресса = 7,2 месяца
Поддержка(актуализация+фиксы)
1 неделя в месяц
Внедрение и доработка драйвера
Внедрение – 3 месяца
Доработка – 27 задач*3Md=81Md

Автоматизация тестирования десктоп-приложений
Информация
Ссылки:
Спецификация WebDriver API - https://www.w3.org/TR/webdriver/
2. Документация UI-Automation - https://docs.microsoft.com/en-us/dotnet/framework/ui-automation/ui-automation-fundamentals
@kyuzalovako
Karina
Kiuzalova