Automation testing desktop applications

Automation testing desktop applications Tips and Tricks

О себе: - Пишу автотесты для Web, Android, iOS, Windows, MacOS, Browser Extension

О себе: - Пишу автотесты для Web, Android, iOS, Windows, MacOS, Browser Extension - Знаком с языками Objective-C и Swift

О себе: - Пишу автотесты для Web, Android, iOS, Windows, MacOS, Browser Extension - Знаком с языками Objective-C и Swift - Python на уровне разговорного :)

О себе: - Пишу автотесты для Web, Android, iOS, Windows, MacOS, Browser Extension - Знаком с языками Objective-C и Swift - Python на уровне разговорного :) - Люблю комиксы

Внимание! Эта презентация может содержать отсылочный юмор

Push в ветку Сборка в Jenkins Сохранение в “облаке” Отправка писем “Тихая” установка Allure репорт Запуск автотестов Отчет о тестировании Упрощенная схема автотестов KeepSolid

Топ 10 инструментов автоматизации тестирования 2018

Средства автоматизации тестирования десктопных приложений

- PyAutoGUI - LDTP - SikuliX - Selenium Фреймворки

import pyautogui screenWidth, screenHeight = pyautogui.size() currentMouseX, currentMouseY = pyautogui.position() pyautogui.moveTo(100, 150) pyautogui.click() pyautogui.moveTo(500, 500, duration=2, tween=pyautogui.tweens.easeInOutQuad) pyautogui.typewrite('Hello world!', interval=0.25) pyautogui.press('esc') pyautogui.keyDown('shift') PyAutoGUI

>>> import atomac >>> atomac.launchAppByBundleId('com.apple.Automator') >>> automator = atomac.getAppRefByBundleId('com.apple.Automator') >>> window = automator.windows()[0] >>> window.AXTitle u'Untitled' >>> sheet = window.sheets()[0] Linux версия - LDTP Windows версия - Cobra Mac версия - PyATOM LDTP

Для поиска элементов GUI Sikuli использует только их скриншоты SikuliX

Почему мы выбрали Selenium?

Почему мы выбрали Selenium? - Стильно, модно, молодежно

Почему мы выбрали Selenium? - Стильно, модно, молодежно - Имитация действий пользователя

Почему мы выбрали Selenium? - Стильно, модно, молодежно - Имитация действий пользователя - В основном ты взаимодействуешь с web-элементами

Почему мы выбрали Selenium? - Стильно, модно, молодежно - Имитация действий пользователя - В основном ты взаимодействуешь с web-элементами - Большое комьюнити

Почему мы выбрали Selenium? - Стильно, модно, молодежно - Имитация действий пользователя - В основном ты взаимодействуешь с web-элементами - Большое комьюнити - Один API для множества платформ: Web, Windows, Mac, Android, iOS, Browser Extension

Хорошие новости! Существует два драйвера: - Winium Desktop - WinAppDriver Драйвера для Windows

Плохие новости: Если вы должны поддерживать Windows 8.1, Windows 7 - у Вас нет выбора :( Только Winium Драйвера для Windows

Новости для Mac OS: Существует только один драйвер - AppiumForMac Драйвера для Mac OS

Селекторы Windows Хорошие новости: Winium поддерживает несколько стратегий поиска элементов: byAutomationId, byName, byClassName, byXpath Плохие новости: QT не поддерживает добавление атрибутов AutomationId и ClassName

Селекторы Mac OS - доступен только один критерий поиска - Xpath - необходим полный путь к элементу

Селекторы Mac OS - доступен только один критерий поиска - Xpath - необходим полный путь к элементу Хороший пример: "/AXApplication[@AXTitle='Calculator']/AXMenuBarItems/AXMenuBar Item[@AXTitle='View']/AXMenu/AXMenuItem[@AXTitle='Scientific']"

Селекторы Mac OS Хороший пример: "/AXApplication[@AXTitle='Calculator']/AXMenuBarItems/AXMenuBar Item[@AXTitle='View']/AXMenu/AXMenuItem[@AXTitle='Scientific']" Плохой пример: "/AXApplication[@AXTitle='Calculator']/AXMenuBarItems/AXMenuBar Item[@AXTitle='View']/AXMenuItem[@AXTitle='Scientific']" (не абсолютный путь: отсутствует AXMenu)

- не очень удобные инспекторы Разница между автоматизацией в десктоп и браузере

Inspect.exe UIA Verify Инспекторы Windows

- не очень удобные инспекторы - имплементированы не все свойства selenium Разница между автоматизацией в десктоп и браузере

- не очень удобные инспекторы - имплементированы не все свойства selenium - модули только для одной платформы Разница между автоматизацией в десктоп и браузере

- не очень удобные инспекторы - имплементированы не все свойства selenium - модули только для одной платформы - различаются консольные утилиты Разница между автоматизацией в десктоп и браузере

- не очень удобные инспекторы - имплементированы не все свойства selenium - модули только для одной платформы - различаются консольные утилиты - “захват” мыши Разница между автоматизацией в десктоп и браузере

Проблемы при автоматизации Mac OS приложений

Метод “find_elements” не работает в AppiumForMac if len(driver.find_elements_by_id(element_id)) > 0: # do_something Проблема

def is_element_present(): try: driver.find_element_by_xpath(element) return True except: return False if is_element_present() is True: # do something Решение

from selenium.common.exceptions import NoSuchElementException def is_element_present(): try: driver.find_element_by_xpath(element) return True except NoSuchElementException: return False if is_element_present() is True: # do something Безопасное решение

driver.get_screenshot_as_png() - сохраняет скриншот размером 19.8 Mb Проблема

При запуске через Jenkins формируется скриншот, который невозможно открыть через Jenkins Проблема

import tempfile import os def custom_screenshot(): f = tempfile.NamedTemporaryFile() name = f.name os.system("screencapture -R 0,0,1920,1080 %s" % name) with open(name, 'rb') as fp: new_file = fp.read() f.close() return new_file Решение

Размер скриншота уменьшился с 20 до 5 Mb Результат

Проблема Проверка наличия и закрытие диалогового окна

Ввод пароля и клик на кнопку в системном диалоговом окне Проблема

tell application "System Events" if exists (processes where name is "SecurityAgent") then tell process "SecurityAgent" to keystroke "*****" delay 0.5 tell application "System Events" to keystroke return delay 0.5 end if end tell Решение

Jenkins помечает весь тест ран как failure, даже если упал только 1 тест Проблема

Обернуть скрипт запуска тестов в команды set+/set- и переложить определение статуса билда на JUnit test result Решение

AppiumForMac крашится после нескольких запусков тестов Проблема

import subprocess subprocess.run(['open', 'AppiumForMac.app']) # start subprocess.run(['osascript', '-e', 'quit app "AppiumForMac.app"']) # stop Решение

Ошибка при сборке приложения для Mac OS на Jenkins slave машине errSecInternalComponent Command CodeSign failed with a nonzero exit code ** ARCHIVE FAILED ** Проблема

$ security unlock-keychain -p 'password' login.keychain Решение

Проблемы при автоматизации Windows приложений

В DOM присутствуют элементы с одинаковыми селекторами Проблема

- Кликать по координатам Решение

- Кликать по координатам - Находить элемент по индексу: driver.find_elements_by_name('Close')[index].click() Решение

- Кликать по координатам - Находить элемент по индексу: driver.find_elements_by_name('Close')[index].click() - Найти element с name “Firefox”, в нем найти элемент с name “Close” и кликнуть по нему Решение

Методы close() и quit() возвращают ошибку “WebDriverException: Message: Process has exited, so the requested information is not available.” Проблема

Close Кликнуть по координатам или по кнопке “Close” Quit taskkill /IM "<service>.exe" /f Решение

Есть элементы типа “list item” в которых отсутствует атрибут “accessiblename” Проявляется если используется класс QListWidget Проблема

- Устанавливать текст размером 9999 в элементах “list item” Решение

- Устанавливать текст размером 9999 в элементах “list item” - Наследоваться от QAbstractItemView Class и переопределить все необходимые атрибуты Решение

- Устанавливать текст размером 9999 в элементах “list item” - Наследоваться от QAbstractItemView Class и переопределить все необходимые атрибуты - использовать QLayout Class и в него вставлять объекты класса QWidget Решение

Не работают команды set+/set- как в Linux/Mac OS X, даже если упал один тест Jenkins помечает билд как “failure” Проблема

Команда exit 0 + JUnit test result report Решение

Окно “User Account control Windows” появляется при “тихой” установке приложения Проблема

Выключить нотификации в User Account Access Settings Решение

● Selenium driver для Linux не реализован :( ● Много дистрибутивов Linux Проблемы при автоматизации Linux приложений

Никак :( Как мы это решили?

Сценарии которые нам не удалось покрыть автотестами - пробуждение после “сна” системы - рестарт системы - смена пользователя в системе - нахождение элементов в браузере Chrome

Уменьшение времени тест рана

Уменьшение времени тест рана - Замена безусловных тайм аутов на условные

Уменьшение времени тест рана - Замена безусловных тайм аутов на условные - Поиск элементов внутри других элементов (для Windows)

Уменьшение времени тест рана - Замена безусловных тайм аутов на условные - Поиск элементов внутри других элементов (для Windows) - Не использовать метод find_elements (для Mac OS)

Уменьшение времени тест рана - Замена безусловных тайм аутов на условные - Поиск элементов внутри других элементов (для Windows) - Не использовать метод find_elements (для Mac OS) - Проверка валидности пользователя для теста

Уменьшение времени тест рана - Замена безусловных тайм аутов на условные - Поиск элементов внутри других элементов (для Windows) - Не использовать метод find_elements (для Mac OS) - Проверка валидности пользователя для теста - Общая авторизация для группы тестов

Уменьшение времени тест рана - Замена безусловных тайм аутов на условные - Поиск элементов внутри других элементов (для Windows) - Не использовать метод find_elements (для Mac OS) - Проверка валидности пользователя для теста - Общая авторизация для группы тестов - Тест дизайн

- Не пытайтесь все сделать сами! Итоги

- Не пытайтесь все сделать сами! - Ответственно подойдите к выбору инструментов перед началом работы Итоги

- Не пытайтесь все сделать сами! - Ответственно подойдите к выбору инструментов перед началом работы - Не все тест кейсы стоит автоматизировать Итоги

- Не пытайтесь все сделать сами! - Ответственно подойдите к выбору инструментов перед началом работы - Не все тест кейсы стоит автоматизировать - Каждая операционная система имеет свои ограничения May the Force be with you! Итоги

Контакты: email: alexeystyagaylo@gmail.com skype: zalexeyz29 Code examples Q&A

Automation testing desktop applications

More Related Content

What's hot

Similar to Automation testing desktop applications

Automation testing desktop applications

Editor's Notes