Samouczek testowania aplikacji iOS

Co to jest testowanie aplikacji na iOS?

Testowanie aplikacji na iOS to proces testowania, podczas którego aplikacja iOS jest testowana na prawdziwych urządzeniach Apple w celu sprawdzenia, czy działa zgodnie z oczekiwaniami, pod kątem określonych działań użytkownika, takich jak czas instalacji, interfejs użytkownika, wrażenia użytkownika, wygląd, zachowanie, funkcjonalność, czas ładowania, wydajność, aplikacja Informacje o sklepie, obsługa wersji systemu operacyjnego itp.

Dlaczego testowanie aplikacji na iOS?

Testowanie aplikacji na iOS jest wymagany, ponieważ iOS to platforma Apple dla aplikacji mobilnych, wydana po raz pierwszy 29 czerwca 2007 r. W przeciwieństwie do AndroidApple nie udziela licencji na system iOS do instalacji na sprzęcie innych producentów. Aplikacje na system iOS i iOS można instalować tylko na urządzeniach Apple, dlatego aplikacja na system iOS musi być zgodna z wersjami systemu iOS i urządzeniami iOS, które posiadają Twoi użytkownicy.

Poniższy rysunek przedstawia najczęstsze pytania, z jakimi mierzą się programiści podczas tworzenia aplikacji na system iOS.

Nie ma znaczenia, ile czasu poświęcisz na projektowanie i wdrażanie; błędy są nieuniknione i będą się pojawiać. Poniższy rysunek przedstawia kilka typowych błędów w aplikacjach iOS.

Awaria aplikacji

Jednym z najbardziej frustrujących problemów podczas korzystania z urządzeń Apple jest częste zawieszanie się aplikacji podczas działania. Często przyczyną awarii są błędy lub wycieki pamięci w kodzie.

Niekompatybilności aplikacji

Twoja aplikacja iOS może działać bez zarzutu w obecnej wersji systemu iOS, ale po uaktualnieniu systemu iOS może przestać działać z powodu problemów z kompatybilnością.

Luka w zabezpieczeniach

Luka w zabezpieczeniach systemu iOS umożliwia hakerom atak na urządzenia z systemem iOS i kradzież prywatnych danych. Na przestrzeni lat odkryto poważne luki w zabezpieczeniach iPhone'a w różnych wersjach systemu iOS.

Wycieki pamięci

Wycieki pamięci to bloki przydzielonej pamięci, których program już nie wykorzystuje. Wycieki pamięci powodują awarię aplikacji na iOS.
Są to błędy i zawsze należy je naprawić.

Testowanie iOS MindMap

Jak pokazano na powyższym rysunku, iOS Testy MindMap pokazuje wszystkie elementy, które tester powinien wziąć pod uwagę podczas przeprowadzania testów na systemie iOS.

Lista kontrolna testowania aplikacji na iOS

Ta lista kontrolna została zaprojektowana specjalnie do testowania właściwości aplikacji mobilnych na iOS. Oczywiście, testuje ona tylko ogólne właściwości aplikacji, a nie ich funkcjonalność.

• Sprawdź czas instalacji aplikacji na urządzeniu. Upewnij się, że aplikacja została zainstalowana w akceptowalnym czasie.
• Po zainstalowaniu aplikacji sprawdź, czy ma ona ikonę i nazwę. Upewnij się również, że zarówno ikona, jak i nazwa są zrozumiałe i odzwierciedlają główny cel aplikacji.
• Uruchom aplikację i sprawdź, czy wyświetla się ekran powitalny.
• Sprawdź limit czasu wyświetlania ekranu powitalnego i czas ładowania ekranu głównego. Ekran główny aplikacji powinien ładować się w akceptowalnym czasie. Jeśli ładowanie ekranu głównego trwa zbyt długo, istnieje większe prawdopodobieństwo, że użytkownik zamknie aplikację, a nawet ją odinstaluje. Sprawdź również, jak ładuje się zawartość ekranu głównego.
• Główna funkcja aplikacji powinna być widoczna od razu. To powinno mówić samo za siebie.
• Sprawdź, czy aplikacja obsługuje zarówno orientację poziomą, jak i pionową. Jeśli tak, sprawdź aplikację w obu orientacjach. Interfejs użytkownika aplikacji powinien się odpowiednio dostosować.
• Uruchom aplikację bez połączenia z internetem. Upewnij się, że działa ona zgodnie z przeznaczeniem. Istnieje ryzyko, że aplikacja ulegnie awarii podczas uruchamiania lub po prostu wyświetli pusty ekran.
• Jeśli aplikacja korzysta z usług lokalizacyjnych, sprawdź, czy wyświetla się alert dotyczący uprawnień do lokalizacji. Ten alert powinien zostać wyświetlony użytkownikowi tylko raz.
• Jeśli aplikacja wysyła powiadomienia push, sprawdź, czy wyświetla się alert o zezwoleniu na powiadomienia push. Ten alert powinien również zostać wyświetlony użytkownikowi tylko raz.
• Uruchom aplikację, zamknij ją i uruchom ponownie. Sprawdź, czy aplikacja zachowuje się zgodnie z przeznaczeniem/pożądanym działaniem.
• Zamknij aplikację, dotykającping Naciśnij przycisk Home na urządzeniu i ponownie otwórz aplikację. Sprawdź, czy aplikacja działa zgodnie z przeznaczeniem.
• Po zainstalowaniu sprawdź, czy aplikacja jest widoczna w ustawieniach iPhone'a.
• Po uruchomieniu aplikacji sprawdź, czy jest ona dostępna w App Store. Aplikacja będzie obsługiwana przez odpowiednie wersje systemów operacyjnych. Upewnij się więc, że aplikacja jest dostępna w App Store na urządzeniach z obsługiwanymi wersjami systemów operacyjnych. Aplikacja nie powinna być również dostępna w App Store na urządzeniach z nieobsługiwanymi wersjami systemów operacyjnych.
• Sprawdź, czy aplikacja przechodzi w tryb uśpienia, gdy działa w tle, aby zapobiec rozładowaniu baterii.
• Jeśli działanie aplikacji jest powolne lub gdy ładuje się zawartość, sprawdź, czy widoczna jest ikona stanu postępu („Ładowanie…”), najlepiej z określonym komunikatem.
• Wyszukaj aplikację po jej nazwie w pasku wyszukiwania urządzenia. Sprawdź, czy aplikacja jest na liście.
• Sprawdź, czy wygląd przycisków wykonujących standardowe akcje nie uległ zmianie w aplikacji (na przykład: odśwież, organizuj, kosz, Odpowiedz, Wstecz itp.)
• Sprawdź, czy standardowe przyciski nie są używane do innych funkcji niż te, do których są normalnie używane.

Strategia testowania iOS

Gdy już wiesz, co sprawdzić, kolejnym krokiem jest sposób testowania. Poniższy rysunek przedstawia kilka typowych strategii testowania iOS.

Automatyczne testowanie

Testowanie automatyczne to jedna z największych zalet testowania iOS. Pozwala ono na szybkie wykrywanie błędów i problemów z wydajnością. Korzyści płynące z testowania automatycznego przedstawiono poniżej:

• Zautomatyzowane testy można uruchomić na wielu urządzeniach, oszczędzając Twój czas
• Testowanie automatyczne może dotyczyć zestawów SDK. Możesz uruchamiać testy na różnych wersjach zestawów SDK.
• Automatyczne testowanie zwiększa produktywność testowania i pozwala zaoszczędzić na kosztach rozwoju oprogramowania
• Istnieje wiele otwartych frameworków testowych, które obsługują automatyczne testowanie w systemie iOS

Testy jednostkowe za pomocą OCUnit

Kiedy wydano oryginalny zestaw SDK dla systemu iOS, brakowało go Testów jednostkowych możliwości. Dlatego Apple wprowadziło OCUnit rozwiązanie testu jednostkowego w wersji 2.2 iOS SDK.

OCUnit był środowiskiem testowym dla Objective-C na komputerach Mac (obecnie macOS). Największą zaletą frameworka OCUnit była jego ścisła integracja z Xcode środowisko programistyczne, jak pokazano poniżej.

Uwaga: OCUnit (SenTestingKit) jest przestarzały; ponieważ Xcode 5. Apple'a XCTest framework zastąpił go jako standard — zobacz sekcję XCTest poniżej. Zrzuty ekranu przedstawiają starszą wersję Xcode wersja.

Niektóre korzyści wynikające z zastosowania OCUnit przedstawiono na poniższym rysunku.

Testowanie interfejsu użytkownika za pomocą UIAutomation

Automatyzacja interfejsu użytkownika była JAVASCRIPT Biblioteka udostępniona przez Apple Inc., która może być używana do przeprowadzania zautomatyzowanych testów na rzeczywistych urządzeniach i w symulatorze iOS. Ta struktura została dodana w pakiecie iOS SDK 4.0. Dzięki automatyzacji interfejsu użytkownika można zautomatyzować testowanie aplikacji nie tylko w symulatorze, ale także na rzeczywistym urządzeniu.

Uwaga: Firma Apple wycofała automatyzację interfejsu użytkownika Xcode 8 (2016) i później usunięto. Użyj XCUITest do nowych projektów testowania interfejsu użytkownika; poniższe klasy i zrzuty ekranu odzwierciedlają starszy zestaw narzędzi.

UIAutomation przyniosło następujące korzyści:

• Zmniejszony wysiłek Testowanie ręczne
• Wymagane mniej wysiłku do wykonania wszystkich testów
• Uproszczono procedurę testowania interfejsu użytkownika (wystarczy nacisnąć kilka przycisków i uruchomić pełne zestawy testów)

Narzędzie UIAutomation działało na podstawie skryptów napisanych w JavaSkrypt. Symulował zdarzenia użytkownika w docelowej aplikacji iOS.

Wady i zalety UIAutomation

	ZALETY	Wady
1.	Dobre wsparcie dla gestów i rotacji	To nie jest oprogramowanie typu open source, mniejsze wsparcie ze strony programisty
2.	Możliwość uruchamiania testów UIAutomation na urządzeniu, nie tylko na symulatorze.	Nie można bardzo dobrze zintegrować się z innymi narzędziami
3.	Opracowany w JavaScript, popularny język programowania.

Powyższy rysunek przedstawia niektóre powszechnie używane klasy w środowisku UIAutomation.

• Element UIAElement class jest superklasą dla wszystkich elementów interfejsu użytkownika w kontekście Automatyzacji
• UIATarget klasa reprezentuje elementy interfejsu użytkownika wysokiego poziomu testowanego systemu
• UIALogger class udostępnia informacje o testach i błędach funkcji pobierania
• UIAActivityView class umożliwia dostęp do widoków aktywności w aplikacji i kontrolę nad nimi.
• Arkusz akcji UIAA class umożliwia dostęp do arkuszy akcji w aplikacji i kontrolę nad nimi.
• System Rezerwacji Sal Smart Spaces® rozwiązuje problem zarządzania rezerwacjami sal, biurek i przestrzeni wspólnych. Zmiany w ostatniej chwili są od razu widoczne, co ułatwia pracę recepcji i użytkownikom. Kalendarz w czasie rzeczywistym pokazuje wolne zasoby, ich parametry, a nawet zaplanowane sprzątanie. Akcja zdarzenia
• Klasa UISlider
• Klasa UIAButton
• Klasa UIKey
• Klasa UIAKeyboard

Inne struktury testów automatycznych

• Szczery: Zautomatyzowane Test akceptacyjny framework dla iPhone’a i iPada (nie jest już aktywnie utrzymywany)
• KIF: to iOS test integracyjny struktura. Umożliwia łatwą automatyzację aplikacji na iOS poprzez wykorzystanie atrybutów dostępności udostępnianych przez system operacyjny osobom z niepełnosprawnością wzroku.
• Appium:popularny kod open source, cross-platform framework automatyzujący aplikacje iOS za pomocą sterownika XCUITest firmy Apple

XCTest i XCUITest: nowoczesne frameworki testowe firmy Apple

OCUnit i UIAutomation to ważne technologie historyczne, ale obie zostały już wycofane. Apple zastąpiło OCUnit XCTest in Xcode 5 (2013) i wycofano UIAutomation w Xcode 8 (2016) za XCUITest, komponent testowania interfejsu użytkownika w XCTest. Są to struktury testowe dostarczane i obsługiwane przez Apple w każdej obecnej wersji Xcode.

W XCTest piszesz testy jednostkowe w Swift lub Objective-C i uruchom je z Xcode Nawigator testów, xcodebuild wiersza poleceń, w symulatorze lub na prawdziwych urządzeniach. XCUITest przeprowadza Twoją aplikację przez warstwę dostępności, dzięki czemu testy interfejsu użytkownika zachowują się podobnie jak testy prawdziwego użytkownika.

Stare ramy	Nowoczesna wymiana	Co się zmieniło
OCUnit (zestaw testowy SenTestingKit)	XCTest	Te same koncepcje testowania jednostkowego, teraz wbudowane w każdy Xcode szablon projektu
Automatyzacja interfejsu użytkownika (JavaScenariusz)	XCUITest	Testy interfejsu użytkownika są pisane w Swift lub Objective-C zamiast JavaScenariusz

💡 Wskazówka: Narzędzia wieloplatformowe, takie jak Appium zautomatyzować system iOS za pomocą XCUITest, dzięki czemu te umiejętności można przenieść bezpośrednio.

Testowanie ręczne

Automatyzacja zwiększa szybkość, ale opisane poniżej techniki ręczne wymagają ludzkiej oceny, której skrypty nie są w stanie zapewnić.

Testowanie eksploracyjne

To testowanie bez formalnego planu testów. Testowanie eksploracyjne to tania metoda testowania, ale może ona nie wykryć potencjalnych błędów w aplikacji iOS.

Testowanie eksploracyjne – wady i zalety

	ZALETY	Wady
1.	Less konieczne jest przygotowanie; poważne błędy są wykrywane wcześnie.	Wymaga wysokich umiejętności testera
2.	Nie Plan testów jest konieczne, co przyspiesza wykrywanie błędów.	Zasięg testów jest niski. Nie gwarantuje to, że wszystkie Twoje wymagania zostaną przetestowane.
3.	Większość błędów jest wykrywana wcześnie w drodze testów eksploracyjnych	Brak dokumentacji testowej

User Testing

Testowanie użytkowników to rodzaj testów ręcznych w systemie iOS. Celem tych testów jest nie tylko tworzenie lepszych aplikacji bez błędów aplikacje. Poniższy rysunek przedstawia cztery typy testów użytkowników.

Testowanie koncepcji

Oceń reakcję użytkowników na pomysł aplikacji przed wprowadzeniem jej na rynek. Procedury testowania koncepcji w systemie iOS opisano na poniższym rysunku.

Test użyteczności

Test użyteczności to test łatwości korzystania z aplikacji iOS. W testach iOS test użyteczności może być nagrany zapamiętać lub podzielić się z innymi.

Oto niektóre narzędzia wspomagające testowanie użyteczności w systemie iOS:

Trymata aplikacje do testowania użytkowników mobilnych dla Android i iOS.

Delight.io, to narzędzie może przechwytywać rzeczywistą interakcję użytkownika w aplikacjach na iOS.

Testowanie beta

Beta testy to testy integracyjne z rzeczywistymi danymi, aby uzyskać ostateczną opinię użytkowników. Aby udostępnić aplikacje do testów beta, wykonaj poniższe kroki.

-Warunek wstępny: Jeśli testujesz wersję beta ostatecznego kandydata do wydania, pamiętaj o sprawdzeniu poprawności aplikacji przed przekazaniem jej testerom.

-Znajdź testera poprzez serwis:zbierasz identyfikatory urządzeń od testerów i dodajesz je do swojego konta Apple Developer

-Utwórz dystrybucję ad hoc:Dystrybucja Ad Hoc umożliwia testerowi uruchomienie aplikacji na swoim urządzeniu bez konieczności Xcode. Ten krok obejmuje 2 podetapy

• Utwórz certyfikaty dystrybucyjne
• Twórz profile udostępniania ad hoc

-Poproś o opinię od testera: Testerzy przeprowadzają testy i wysyłają Ci raporty o błędach. Po wydaniu aplikacji możesz je otrzymać od… Połącz ze sklepem z aplikacjami (dawniej iTunes łączyć).

Uwaga: Obecnie większość zespołów dystrybuuje wersje beta z Lot testowy, dzięki której możesz zaprosić do 10 000 zewnętrznych testerów bez konieczności ręcznego zbierania identyfikatorów urządzeń.

Testy A / B

Testy A / B to jeden z najpotężniejszych sposobów oceń skuteczność swojej aplikacji na iOS. To używa losowe eksperymenty z dwoma urządzeniami A i B.

Testowanie A/B składa się z trzech głównych etapów

• Skonfiguruj testPrzygotuj 2 wersje swojej aplikacji iOS (A i B) oraz metrykę testową
• Testowanie: Przetestuj jednocześnie obie wersje aplikacji iOS na urządzeniach.
• Analizować:Zmierz i wybierz lepszą wersję do wydania

Poniższe narzędzia obsługują testy A/B w systemie iOS.

• Powstać: Testy A/B dla iOS i AndroidMożna go zintegrować z aplikacją iOS, co przyspieszy proces testowania.

Najlepsze praktyki w zakresie testów A/B

• Zdefiniuj cel swojego testu. Każdy test jest bezcelowy bez celu.
• Oglądaj użytkownicy końcowi korzystają z Twojej aplikacji po raz pierwszy
• Uruchom pierwszej Testuj tylko na aktualizację. Oszczędza to Twój czas podczas przeprowadzania testów.
• Monitorowanie Dokładnie przeprowadź test. Możesz uczyć się z testu, monitorując go.

Testowanie iOS Najlepsza praktyka

Oto kilka wskazówek, które warto znać organizując testy aplikacji na iOS

1. Przetestuj aplikację na prawdziwe urządzenie aby uzyskać realistyczny obraz wydajności
2. Poprawa Twoje metody testowania, ponieważ tradycyjne metody testowania nie są już wystarczające do pokrycia wszystkich testów w testowaniu iOS
3. Użyj dziennik konsoli Aby przetestować aplikację iOS. Ta funkcja iOS obejmuje informacje z każdej aplikacji na urządzeniu.
4. dokument błędy aplikacji przy użyciu wbudowany zrzut ekranu polecenie. Pomaga programistom zrozumieć, w jaki sposób powstają błędy.
5. Zgłaszanie awarii Narzędzia są przydatne podczas testowania aplikacji. Potrafią wykrywać awarie i rejestrować szczegóły, dzięki czemu można łatwo badać błędy.

MITY na temat testowania iOS

W tej sekcji omówiono kilka popularnych mitów i realiów dotyczących testowania systemu iOS

Testowanie aplikacji na iOS i Android to jest to samo.

iOS oraz Android to dwie platformy opracowane przez Apple Inc. i Google odpowiednio. Są one zupełnie różne pod względem środowisk testowych, struktur testowych i języków programowania.

Wystarczy przetestować aplikację na symulatorze iOS.

Symulator iOS nie jest wystarczająco mocny, aby testować aplikację, ponieważ ma pewne ograniczenia:

• Ograniczenia sprzętowe (kamera, wejście mikrofonowe, czujnik)
• Interfejs Twojej aplikacji może wydawać się działać szybciej i płynniej niż na urządzeniu
• Ograniczenia API
• Niektóre frameworki nie są obsługiwane (Media Player, Store Kit, Message UI...)

Wszyscy będą pobierać moje aplikacje ze sklepu z aplikacjami, ponieważ mają wiele funkcji

Im więcej funkcji ma Twoja aplikacja, tym więcej błędów możesz napotkać. Żaden użytkownik nie pobierze Twojej aplikacji, jeśli nadal ma wiele defektów.

FAQ