Учебное пособие по тестированию iOS-приложений
⚡ Умное резюме
Тестирование iOS-приложений проверяет, что приложение устанавливается, работает и ведет себя корректно на устройствах Apple. Оно сочетает ручные методы с автоматизированными фреймворками, такими как XCTest и XCUITest, для раннего выявления сбоев, несовместимостей и утечек памяти.
Что такое тестирование приложений iOS?
Тестирование iOS-приложений — это процесс тестирования, в ходе которого приложение iOS тестируется на реальных устройствах Apple, чтобы проверить, работает ли оно должным образом или нет для конкретных действий пользователя, таких как время установки, пользовательский интерфейс, взаимодействие с пользователем, внешний вид, поведение, функциональность, время загрузки, производительность, приложение. Список магазинов, поддержка версий ОС и т. д.
Зачем тестировать приложения для iOS?
Тестирование iOS-приложений Это необходимо, поскольку iOS — это платформа Apple для мобильных приложений, впервые выпущенная 29 июня 2007 года. В отличие от... AndroidКомпания Apple не предоставляет лицензии на iOS для установки на устройства, не принадлежащие Apple. iOS и приложения для iOS можно устанавливать только на устройства Apple; следовательно, ваше приложение для iOS должно быть совместимо с версиями iOS и устройствами iOS, которыми владеют ваши пользователи.
На рисунке ниже показаны распространенные вопросы, с которыми сталкиваются разработчики при создании iOS-приложений.
Неважно, сколько времени вы вложите в проектирование и реализацию; ошибки неизбежны, и баги будут появляться. На рисунке ниже показаны некоторые распространенные ошибки в iOS-приложениях.
Сбой приложения
Одна из самых неприятных проблем при использовании устройств Apple — это частые сбои в работе приложений. Зачастую сбои происходят из-за ошибок или утечек памяти в коде.
Несовместимость приложений
Ваше iOS-приложение может отлично работать на текущей версии iOS, но после обновления iOS оно может перестать работать из-за проблем с совместимостью.
Уязвимость безопасности
Уязвимость в системе безопасности iOS позволяет хакеру атаковать ваши устройства iOS и украсть вашу личную информацию. За прошедшие годы в различных версиях iOS были обнаружены серьезные уязвимости в системе безопасности iPhone.
Утечки памяти
Утечки памяти — это блоки выделенной памяти, которые программа больше не использует. Утечки памяти приводят к сбою вашего приложения iOS.
Это ошибки, и их всегда следует исправлять.
iOS-тестирование MindMap
Как показано на рисунке выше, iOS Тестирование Интеллектуальная карта отображает все элементы, которые тестировщик должен учитывать при проведении тестирования iOS.
Контрольный список тестирования приложений iOS
Этот контрольный список специально разработан для проверки характеристик мобильных приложений iOS. Разумеется, он проверяет только общие характеристики приложения, а не его функциональность.
- Проверьте время установки приложения на устройство. Убедитесь, что приложение установлено в приемлемые сроки.
- После установки приложения проверьте, есть ли у него значок и название. Также убедитесь, что и значок, и название говорят сами за себя и отражают основное назначение приложения.
- Запустите приложение и проверьте, отображается ли заставка.
- Проверьте время ожидания заставки и время загрузки главного экрана. Главный экран приложения должен загружаться в приемлемые сроки. Если главный экран загружается слишком долго, возрастает вероятность того, что пользователь закроет или даже удалит приложение. Также проверьте, как загружается контент на главном экране.
- Основная функция приложения должна быть очевидна сразу. Это должно говорить само за себя.
- Проверьте, поддерживает ли приложение альбомную и портретную ориентацию. Если да, проверьте приложение в обеих ориентациях. Пользовательский интерфейс приложения должен соответствующим образом адаптироваться.
- Запустите приложение без подключения к интернету. Убедитесь, что приложение работает должным образом. Существует вероятность, что приложение может зависнуть при запуске или просто отобразить пустой экран.
- Если приложение использует службы определения местоположения, проверьте, отображается ли предупреждение о разрешении на определение местоположения. Это предупреждение должно появляться у пользователя только один раз.
- Если приложение отправляет push-уведомления, проверьте, отображается ли предупреждение о разрешении на отправку push-уведомлений. Это предупреждение также должно появляться у пользователя только один раз.
- Запустите приложение, закройте его и запустите снова. Проверьте, работает ли приложение так, как задумано/желательно.
- Закройте приложение одним касанием.ping Нажмите кнопку «Домой» на устройстве и снова откройте приложение. Проверьте, работает ли приложение должным образом.
- После установки проверьте, отображается ли приложение в настройках iPhone.
- После запуска приложения проверьте, можно ли его найти в «App Store». Приложение будет поддерживаться определенными версиями ОС. Поэтому убедитесь, что приложение можно найти в «App Store» устройств с поддерживаемыми версиями ОС. Кроме того, приложение не должно отображаться в «App Store» устройств с неподдерживаемыми версиями ОС.
- Проверьте, переходит ли приложение в спящий режим при работе в фоновом режиме, чтобы предотвратить разрядку аккумулятора.
- Если работа приложения низкая или когда содержимое загружается, проверьте, есть ли значок статуса выполнения («Загрузка…»), желательно с конкретным сообщением.
- Введите название приложения в строку поиска устройства. Проверьте, отображается ли приложение в списке.
- Проверьте, не изменился ли внешний вид кнопок, выполняющих стандартные действия в приложении (например: обновить, упорядочить, удалить, ответить, вернуться назад и т. д.).
- Проверьте, не используются ли стандартные кнопки для функций, отличных от тех, для которых они обычно предназначены.
Стратегия тестирования iOS
Как только вы определите, что нужно проверить, следующим шагом будет выбор способа тестирования. На рисунке ниже представлены некоторые распространенные стратегии тестирования iOS.
Автоматическое тестирование
Автоматизированное тестирование — одно из главных преимуществ тестирования iOS-приложений. Оно позволяет быстро выявлять ошибки и проблемы с производительностью. Преимущества автоматизированного тестирования показаны ниже:
- Автоматизированное тестирование может выполняться на нескольких устройствах, что экономит ваше время.
- Автоматизированное тестирование может быть нацелено на различные SDK. Вы можете запускать тесты на разных версиях SDK.
- Автоматизированное тестирование повышает производительность тестирования и снижает затраты на разработку программного обеспечения.
- Существует множество фреймворков с открытым исходным кодом, поддерживающих автоматизированное тестирование iOS.
Модульное тестирование с помощью OCUnit
Когда был выпущен оригинальный iOS SDK, в нем не было Модульное тестирование возможности. Поэтому Apple представила OCUnit Решение для модульного тестирования в iOS SDK версии 2.2.
OCUnit — это фреймворк для тестирования Objective-C на Mac (теперь уже не существует). macOSСамым большим преимуществом фреймворка OCUnit была его тесная интеграция с... Xcode Среда разработки, как показано ниже.
Примечание: OCUnit (SenTestingKit) устарел, поскольку Xcode 5, Apple XCTest Его заменила другая платформа в качестве стандарта — см. раздел XCTest ниже. На скриншотах здесь показана более старая версия. Xcode версия.
Некоторые преимущества OCUnit показаны на рисунке ниже.
Тестирование пользовательского интерфейса с помощью UIAutomation
Автоматизация пользовательского интерфейса была JavaСценарий Библиотека, предоставленная компанией Apple Inc., позволяет проводить автоматизированное тестирование на реальных устройствах и в симуляторе iOS. Этот фреймворк был добавлен в iOS SDK 4.0. Используя UI Automation, можно автоматизировать тестирование приложения не только в симуляторе, но и на реальном устройстве.
Примечание: Компания Apple отказалась от функции автоматизации пользовательского интерфейса. Xcode В версии 8 (2016) его удалили. Используйте XCUITest для новых проектов тестирования пользовательского интерфейса; классы и скриншоты ниже отражают более старый набор инструментов.
UIAutomation принесла следующие преимущества:
- Снижение усилий на Ручное тестирование
- Для выполнения всех тестов требуется меньше усилий.
- Упрощена процедура тестирования пользовательского интерфейса (достаточно нажать несколько кнопок и запустить полный набор тестов).
Инструмент UIAutomation работал на основе скриптов, написанных на JavaСкрипт. Он имитировал действия пользователя в целевом iOS-приложении.
Преимущества и недостатки автоматизации пользовательского интерфейса
| Плюсы | Минусы | |
|---|---|---|
| 1. | Хорошая поддержка жестов и вращения. | Это не открытый исходный код, меньше поддержки со стороны разработчика. |
| 2. | Можно запускать тесты UIAutomation на устройстве, а не только на симуляторе. | Невозможно очень хорошо интегрироваться с другими инструментами. |
| 3. | Разработано в JavaСкрипт — популярный язык программирования. |
На рисунке выше представлены некоторые распространенные классы в рамках фреймворка UIAutomation.
- UIAElement class — это суперкласс для всех элементов пользовательского интерфейса в контексте автоматизации.
- МАУTarget класс представляет элементы пользовательского интерфейса высокого уровня тестируемой системы.
- УИалоггер класс предоставляет информацию о тестах и ошибках функции поиска.
- МАУАктивитиВью Класс обеспечивает доступ к представлениям активности в вашем приложении и управление ими.
- Лист действий UIAActionSheet Класс обеспечивает доступ к листам действий и управление ими в вашем приложении.
- Информация о пользователе Событие Действие
- Класс UISlider
- Класс UIAButton
- Класс UIAKey
- Класс клавиатуры UIAKeyboard
Другие среды автоматизированного тестирования
- Фрэнк: Автоматизированный Приемочный тест фреймворк для iPhone и iPad (больше не поддерживается).
- KIF: это iOS интеграционный тест рамки. Он позволяет легко автоматизировать приложения iOS, используя атрибуты доступности, которые ОС предоставляет людям с ограниченными возможностями по зрению.
- Appium: популярный проект с открытым исходным кодом, кросс-платформенной Фреймворк, автоматизирующий разработку iOS-приложений с помощью драйвера XCUITest от Apple.
XCTest и XCUITest: современные фреймворки для тестирования от Apple.
OCUnit и UIAutomation — важные исторические разработки, но сейчас они уже не используются. Apple заменила OCUnit на XCTest in Xcode 5 (2013) и устаревший UIAutomation в Xcode 8 (2016) в пользу XCUITest, компонент тестирования пользовательского интерфейса в XCTest. Это тестовые фреймворки, которые Apple поставляет и поддерживает во всех текущих версиях. Xcode.
С помощью XCTest вы пишете модульные тесты на Swift или Objective-C и запускайте их из Xcode Тестовый навигатор, xcodebuild XCUITest работает в командной строке, на симуляторе или на реальных устройствах. Он обеспечивает прохождение тестирования вашего приложения через слой доступности, поэтому тесты пользовательского интерфейса ведут себя практически так же, как и реальные пользователи.
| Устаревшая структура | Современная замена | Что изменилось |
|---|---|---|
| OCUnit (SenTestingKit) | XCTest | Те же принципы модульного тестирования, теперь встроенные во все Xcode шаблон проекта |
| UIAutomation (Javaсценарий) | XCUITest | Тесты пользовательского интерфейса пишутся на Swift или Objective-C вместо JavaСценарий |
Примечание: Наконечник: Кроссплатформенные инструменты, такие как Appium Автоматизируйте iOS с помощью XCUITest, чтобы эти навыки передавались напрямую.
Ручное тестирование
Автоматизация обеспечивает скорость, но описанные ниже ручные методы требуют участия человека, чего не могут обеспечить скрипты.
Исследовательское тестирование
Это тестирование без формального плана тестирования. Исследовательское тестирование — это недорогой метод тестирования, но он может пропустить потенциальные ошибки в вашем iOS-приложении.
Минусы и плюсы исследовательского тестирования
| Плюсы | Минусы | |
|---|---|---|
| 1. | Less Необходима подготовка; серьезные ошибки выявляются на ранней стадии. | Требует высокой квалификации тестировщика |
| 2. | Нет План тестирования Это необходимо, что ускоряет обнаружение ошибок. | Покрытие тестами низкое. Это не гарантирует, что все ваши требования будут проверены. |
| 3. | Большинство ошибок обнаруживаются на ранних стадиях посредством своего рода исследовательского тестирования. | Отсутствие документации по тестированию. |
Тестирование пользователя
Пользовательское тестирование — это разновидность ручного тестирования на iOS. Целью этого тестирования является создание лучших приложений, а не только без ошибок приложения. На рисунке ниже показаны четыре типа пользовательского тестирования.
Концептуальное тестирование
Перед выпуском приложения на рынок необходимо оценить реакцию пользователей на его концепцию. Процедуры тестирования концепции на iOS описаны на рисунке ниже.
Тестирование юзабилити
Тестирование юзабилити Это тест на удобство использования вашего iOS-приложения. В тестировании iOS-приложений тест на удобство использования может включать в себя следующее: зарегистрировала запомнить или поделиться с другими.
К числу инструментов, поддерживающих тестирование удобства использования на iOS, относятся:
Тримата мобильные пользовательские приложения для тестирования Android и iOS.
Восторг.io, этот инструмент может фиксировать реальное взаимодействие пользователей с вашими приложениями для iOS.
Бета-тестирование
Бета-тестирование – это интеграционное тестирование Для получения окончательной обратной связи от пользователей используйте реальные данные. Чтобы распространить свои приложения для бета-тестирования, необходимо выполнить следующие шаги.
–Предварительное кондиционирование: Если вы проводите бета-тестирование окончательного кандидата на выпуск, обязательно проверьте приложение, прежде чем распространять его среди тестировщиков.
–Найти тестера через сервисВы собираете идентификаторы устройств от тестировщиков и добавляете их в свою учетную запись разработчика Apple.
–Создайте специальную рассылкуФункция распространения Ad Hoc позволяет тестировщику запускать ваше приложение на своем устройстве без необходимости Xcode. Этот шаг включает в себя 2 подэтапа
- Создание сертификатов распространения
- Создание специальных профилей обеспечения
–Запросите отзыв от тестировщика: Тестировщики проводят тестирование и отправляют вам отчеты об ошибках. После выпуска вашего приложения вы сможете получать эти отчеты. Подключить магазин приложений (ранее iTunes соединять).
Примечание: Сегодня большинство команд распространяют бета-версии с помощью Крыло!Это позволяет пригласить до 10 000 внешних тестировщиков без ручного сбора идентификаторов устройств.
A / B тестирования
A / B тестирования является одним из самых мощных способов оцените эффективность вашего iOS-приложения, Оно использует рандомизированные эксперименты с двумя устройствами А и Б.
A/B-тестирование включает в себя три основных этапа.
- Настройка тестаПодготовьте 2 версии вашего iOS-приложения (A и B) и метрику тестирования.
- ТестПротестируйте обе указанные выше версии iOS-приложения на устройствах одновременно.
- АнализироватьПроведите измерения и выберите лучшую версию для выпуска.
Следующие инструменты поддерживают A/B-тестирование на iOS.
- Встань: A/B-тестирование для iOS и AndroidЕго можно интегрировать в ваше iOS-приложение, что ускорит процесс тестирования.
лучшие практики A/B-тестирования
- Определите цель вашего теста. Любой тест бесполезен без цели.
- Смотреть конечные пользователи используют ваше приложение в первый раз
- Run one Тестирование проводится только при каждом обновлении. Это экономит ваше время при проведении тестирования.
- Монитор Внимательно следите за ходом теста. Вы сможете извлечь уроки из него, наблюдая за ним.
iOS-тестирование — лучшая практика
Вот несколько советов, которые следует знать при организации тестирования вашего iOS-приложения.
- Протестируйте приложение на реальное устройство чтобы получить реалистичное представление о производительности
- Совершенствовать ваши методы тестирования, поскольку традиционные методы тестирования больше недостаточны для охвата всех тестов в iOS-тестировании.
- Использовать журнал консоли Для тестирования iOS-приложения. Эта функция iOS включает информацию из каждого приложения на устройстве.
- Документ ошибки приложения при использовании встроенный скриншот Эта команда помогает разработчику понять, как возникают ошибки.
- Отчеты о сбоях Инструменты полезны при тестировании вашего приложения. Они могут обнаруживать сбои и регистрировать подробности, что позволяет легко исследовать ошибки.
МИФЫ о тестировании iOS
В этом разделе рассматриваются несколько популярных мифов и реалий тестирования iOS.
Тестирование приложений на iOS и Android Это одно и то же.
iOS и Android Это две платформы, разработанные компанией Apple Inc. и Google соответственно. Они совершенно разные в плане тестовых сред, тестовых фреймворков и языков программирования.
Достаточно протестировать приложение на симуляторе iOS.
Симулятор iOS недостаточно мощный для тестирования приложений, поскольку имеет ряд ограничений:
- Аппаратные ограничения (камера, микрофонный вход, датчик)
- Пользовательский интерфейс вашего приложения может работать быстрее и плавнее, чем на устройстве.
- Ограничения API
- Некоторые платформы не поддерживаются (Media Player, Store Kit, Message UI..)
Все будут скачивать мои приложения из App Store, потому что у них много функций.
Чем больше функций у вашего приложения, тем больше ошибок вы можете получить. Ни один пользователь не станет скачивать ваше приложение, если в нем еще много дефектов.


.png)











