TestNG Pembuatan Laporan di Selenium: Bagaimana Cara Menghasilkannya?

⚡ Ringkasan Cerdas

TestNG Laporan adalah file hasil HTML standar yang TestNG Menulis ke folder test-output setelah setiap eksekusi, menunjukkan kasus uji mana yang berhasil, gagal, atau dilewati, serta log Reporter apa pun.

  • 🔘 Output default: Setiap TestNG Perintah `run` membuat folder `test-output` tanpa kode tambahan apa pun.
  • ☑️ Dua tampilan HTML: emailable-report.html merangkum hasil, index.html berisi tautan ke tampilan detail.
  • ✅ Catatan reporter: Reporter.log() menulis pesan khusus langsung ke dalam laporan yang dihasilkan.
  • 🧪 Rangkaiannya berjalan: Menjalankan testng.xml akan mengelompokkan beberapa kelas ke dalam satu laporan terpadu.
  • ️ Kustomisasi: ITestListener dan IReporter memungkinkan sebuah tim untuk membuat format laporan mereka sendiri.
  • 📊 Di luar pengaturan default: ExtentReports dan Allure menambahkan grafik, riwayat, dan lampiran tangkapan layar.

TestNG pembuatan laporan di Selenium

Apa TestNG Laporan?

TestNG Laporan adalah laporan HTML default yang dihasilkan setelah kasus uji dijalankan menggunakan TestNG. Laporan ini membantu Anda mengidentifikasi informasi tentang kasus uji dan status proyek. TestNG laporan masuk Selenium Catat tiga hasil untuk setiap metode pengujian — lulus, gagal, dan lewati — sehingga Anda dapat memeriksa data tentang kasus uji secara sekilas.

Pembuatan laporan sangat penting ketika Anda melakukan Pengujian Otomatisasi serta Pengujian Manual.

  • Dengan melihat hasilnya, Anda dapat dengan mudah mengidentifikasi berapa banyak kasus uji yang lulus, gagal, dan dilewati.
  • Dengan melihat laporannya, Anda akan mengetahui apa status proyek tersebut.

Selenium WebDriver digunakan untuk mengotomatisasi aplikasi web, tetapi tidak menghasilkan laporan apa pun secara otomatis.

  • The TestNG akan menghasilkan laporan default.
  • Saat Anda menjalankan file testng.xml dan me-refresh proyek, Anda akan mendapatkan folder test-output, dan folder tersebut berisi output pelaporan dari TestNG.
  • Klik kanan pada emailable-report.html dan pilih opsi Buka dengan peramban web.

Catatan: Perilaku yang dijelaskan di sini tidak berubah dalam TestNG 7.x. Rilis dari TestNG Versi 7.6 ke atas memerlukan JDK 11 atau lebih tinggi, jadi proyek yang lebih lama mungkin perlu meningkatkan level JDK-nya sebelum laporan dapat dihasilkan.

Jenis dari TestNG Laporan di Folder output pengujian

Sebelum membuka file apa pun, ada baiknya mengetahui terlebih dahulu apa isi folder test-output tersebut. TestNG menghasilkan beberapa artefak di setiap putaran, dan masing-masing artefak menjawab pertanyaan yang berbeda.

Berkas atau folder Apa yang terkandung di dalamnya Saat itu bermanfaat
index.html Laporan pendaratan yang terhubung ke hasil, grup, waktu, dan tampilan keluaran reporter. Menganalisis satu sesi lari secara detail.
emailable-report.html Satu halaman mandiri yang merangkum metode yang berhasil, gagal, dan dilewati per kelas. Membagikan hasil kepada orang-orang yang tidak membuka proyek tersebut.
testng-results.xml XML yang dapat dibaca mesin yang ditulis oleh pelapor XML bawaan, dengan status dan durasi per metode. Memberikan input ke dasbor atau parser khusus.
laporan junit JUnit-format file XML, satu per kelas pengujian. Plugin CI apa pun yang membaca JUnit format hasil.
testng-failed.xml Berkas suite yang dihasilkan yang hanya mencantumkan metode yang gagal. Menjalankan ulang hanya bagian yang gagal, bukan seluruh rangkaian pengujian.

Kedua file HTML tersebut adalah file yang akan dibuka selanjutnya dalam tutorial ini, jadi panduan di bawah ini dimulai dengan emailable-report.html.

Cara membuat laporan di Selenium

Metode-1: emailable-report.html

  1. Klik opsi “emailable-report.html”
  2. Klik pada opsi browser web

Tangkapan layar di bawah ini menunjukkan file emailable-report.html yang dibuka dari folder test-output.

Memilih emailable-report.html di dalam TestNG folder keluaran uji

Laporan keluaran masuk TestNG pelaporannya akan terlihat seperti di bawah ini jika kedua kelas tersebut lulus:

TestNG Laporan yang dapat dikirim melalui email yang menunjukkan kelas uji DemoA dan DemoB telah berhasil dilewati.

Pertimbangkan skenario di mana Anda sengaja gagal dalam uji kasus yaitu kelas DemoB. Kemudian ubah kedua kelas menjadi file suite testng.xml dan jalankan. Maka hasilnya akan terlihat seperti ini. Ini akan menunjukkan kasus uji yang gagal.

Ini adalah hasil untuk kelas DemoB:

Laporan yang dapat dikirim melalui email yang menyoroti kasus uji DemoB yang sengaja digagalkan.

Demikian pula, hasil Demo Kelas A akan terlihat seperti ini:

Baris ringkasan laporan yang dapat dikirim melalui email untuk kelas DemoA yang lulus.

Metode-2: indeks.html

  1. Klik kanan pada index.html dari direktori proyek.
  2. Pilih opsi buka dengan opsi peramban web. Hasilnya akan ditampilkan dalam urutan berikut.

Tangkapan layar di bawah menunjukkan file index.html yang dibuka dari direktori proyek.

Membuka index.html dari direktori proyek di peramban web.

Hasilnya akan terlihat seperti ini:

TestNG index.html halaman utama laporan yang menampilkan hasil eksekusi.

Metode-3: Kelas Reporter

Bersamaan dengan ini TestNG metode laporan yang dihasilkan, Anda dapat menggunakan file object.properties untuk menyimpan log yang dihasilkan sistem serta log yang dibuat pengguna. Namun salah satu cara paling sederhana untuk menyimpan informasi log dalam pengujian adalah menggunakan Kelas Reporter.

Reporter.log masuk Selenium adalah kelas yang hadir di TestNG untuk Selenium pelaporan. Ini menyediakan 4 metode berbeda untuk menyimpan informasi log, yaitu:

  1. Reporter.log(String s);
  2. Reporter.log(String s, Boolean logToStandardOut);
  3. Reporter.log(String s, level int);
  4. Reporter.log(String s, level int, Boolean logToStandardOut);

Argumen kedua menentukan apakah pesan tersebut juga ditampilkan di konsol serta laporan, dan argumen level mengontrol tingkat detail pesan yang ditampilkan.

Example:

Buat dua kelas seperti DemoA dan DemoB dan tulis kode berikut di dalam kelas tersebut.

Untuk Kelas DemoA;

  • The Code Untuk DemoA sudah dijelaskan di atas. Di sini Anda menggunakan metode log kelas Reporter. (Untuk mengimplementasikan kelas pelaporan Anda sendiri, kelas tersebut harus mengimplementasikan antarmuka org.testng.IReporter.)
  • Metode log adalah metode statis kelas Reporter. Jadi Anda mengakses metode itu melalui kelas Reporter.
  • Metode log digunakan untuk menyimpan informasi log yang tertulis di dalam program. Dengan melihat informasi log, Anda akan dengan mudah mengetahui di mana tepatnya eksekusi program dihentikan.

Screenshot di bawah ini menunjukkan panggilan Reporter.log yang ditempatkan di dalam kelas DemoA.

Pernyataan Reporter.log yang ditulis di dalam kelas pengujian DemoA

Untuk Demo KelasB:

Pernyataan Reporter.log yang ditulis di dalam kelas pengujian DemoB

  • Sekarang, Buat file testng.xml dengan memilih dua kelas ini dan
  • Pilih jalankan sebagai dan
  • Klik pada konversi ke testng.
  • Kemudian jalankan file testng.xml ini dengan memilih run as dan pilih testng suite.
  • Kemudian segarkan proyek, buka folder hasil pengujian.
  1. Di folder test-output, buka emailable-report.html. Akan terlihat seperti ini:

    Laporan yang dapat dikirim melalui email dihasilkan setelah menjalankan rangkaian pengujian DemoA dan DemoB testng.xml.

    Demikian pula, Anda juga akan memiliki proyek Output untuk Demo B.

  2. Di dalam folder test-output, buka file index.html. Tampilannya akan seperti ini:

    Laporan index.html yang dihasilkan setelah eksekusi rangkaian pengujian testng.xml

Klik pada keluaran reporter. Ini akan membuka info logging apa pun yang tertulis dalam metode pengujian.

TestNG Tampilan output reporter yang mencantumkan pesan-pesan yang dicatat oleh metode pengujian.

Klik pada Waktu. Ini akan menunjukkan berapa banyak waktu yang diperlukan untuk menjalankan metode pengujian yang ada di kelas menggunakan TestNG alat pelaporan.

TestNG Tampilan waktu yang menunjukkan berapa lama setiap metode pengujian berjalan.

Cara Menyesuaikan TestNG Laporan dengan ITestListener dan IReporter

Ketiga metode di atas menggunakan apa pun TestNG Dibuat secara default. Ketika sebuah tim membutuhkan tata letak yang berbeda, kolom tambahan, atau tampilan progres langsung, TestNG mengekspos dua titik ekstensi daripada meminta Anda untuk menambal laporan default.

  • Pendengar Notifikasi diberikan secara real-time, saat setiap pengujian dimulai, berhasil, gagal, atau dilewati. Gunakan fitur ini ketika informasi harus dicatat pada saat kejadian berlangsung — misalnya, tangkapan layar saat terjadi kegagalan.
  • iReporter Notifikasi diberikan sekali, setelah setiap rangkaian pengujian selesai, dan menerima objek yang menjelaskan keseluruhan proses. Gunakan ini ketika output berupa dokumen yang sudah jadi, seperti PDF atau halaman HTML kustom.

Sebuah listener yang mengirimkan setiap hasil ke dalam laporan melalui kelas Reporter akan terlihat seperti ini.

import org.testng.ITestListener;
import org.testng.ITestResult;
import org.testng.Reporter;

public class ReportListener implements ITestListener {

    @Override
    public void onTestSuccess(ITestResult result) {
        Reporter.log("PASSED: " + result.getName(), true);
    }

    @Override
    public void onTestFailure(ITestResult result) {
        Reporter.log("FAILED: " + result.getName(), true);
    }

    @Override
    public void onTestSkipped(ITestResult result) {
        Reporter.log("SKIPPED: " + result.getName(), true);
    }
}

Pendaftaran listener dilakukan di file suite testng.xml yang sama yang sudah Anda buat untuk DemoA dan DemoB.

<suite name="Demo Suite">
  <listeners>
    <listener class-name="ReportListener" />
  </listeners>
  <test name="Demo Test">
    <classes>
      <class name="DemoA" />
      <class name="DemoB" />
    </classes>
  </test>
</suite>

Ada dua opsi baris perintah yang perlu diketahui saat Anda bereksperimen. -d Opsi ini mengubah direktori tempat laporan ditulis, dan -usedefaultlisteners false Mematikan reporter bawaan sehingga hanya pendengar Anda sendiri yang berjalan. Keduanya dijelaskan dalam dokumen resmi. TestNG pencatatan dan dokumentasi hasil, yang juga mendokumentasikan properti yang diterima oleh pelapor XML bawaan.

Sebuah listener didaftarkan sekali dan kemudian berlaku untuk setiap kelas dalam suite, itulah sebabnya tim yang menjalankan banyak aplikasi membutuhkan listener. pengujian otomasi Suite pengujian biasanya lebih menyukai cara ini daripada menambahkan baris log ke setiap metode pengujian secara manual.

TestNG Laporan Default vs ExtentReports vs Allure

Laporan bawaan sudah cukup untuk rangkaian pengujian kecil, tetapi tidak menyertakan riwayat dan grafik. Dua pustaka sumber terbuka biasanya ditambahkan ketika rangkaian pengujian berkembang, dan keduanya bekerja dengan TestNG.

Kemampuan TestNG kegagalan Laporan Luas Laporan Daya Tarik
Upaya penyiapan Tidak ada — dihasilkan secara otomatis Tambahkan pustaka dan tulis kode pelapor. Tambahkan adaptor, lalu buat laporan dari hasil yang diperoleh.
Bagan dan dasbor Tidak Ya Ya
Tangkapan layar Hanya melalui markup Reporter.log API lampiran bawaan API lampiran bawaan
Riwayat dan tren permainan Tidak Melalui komponen server opsional Ya, dari hasil sebelumnya yang tersimpan.
Cakupan kerangka kerja TestNG hanya Java dan .NET Kerangka agnostik

Mulailah dengan laporan default selagi jumlah laporan yang digunakan masih sedikit. Kemudian beralih ke... Laporan Luas ketika para pemangku kepentingan meminta dasbor yang mudah dibaca, dan untuk Laporan Daya Tarik Ketika riwayat pengujian yang tidak stabil di berbagai build menjadi pertanyaan yang penting. Apa pun pilihan Anda, laporan biasanya diterbitkan oleh job build, yang dibahas dalam Jenkins integrasi berkelanjutan tutorial.

Pertanyaan Umum Demo Slot

Folder tersebut hanya muncul setelah TestNG Setelah proses selesai, proyek diperbarui di IDE. Folder kosong biasanya berarti kelas tersebut dijalankan sebagai kelas biasa. Java aplikasi, atau pendengar default dimatikan, sehingga tidak ada reporter yang pernah berjalan.

Ya. TestNG Secara default, perintah ini menulis ke direktori `test-output`. Anda dapat menambahkan opsi `-d` pada baris perintah, atau mengatur direktori output di konfigurasi jalankan IDE atau di pengaturan Maven Surefire yang menjalankan suite pengujian.

Tangkap gambar di dalam metode listener seperti onTestFailure, simpan file di samping laporan, lalu tulis tag gambar HTML melalui Reporter.log. Laporan akan merender markup tersebut, sehingga gambar akan muncul di samping metode yang gagal.

TestNG sendiri tidak mengirim email. Tim biasanya melampirkan emailable-report.html dari pekerjaan build, misalnya sebuah Jenkins langkah email pasca-pembuatan, atau tambahkan rutinitas email kecil di dalam implementasi IReporter.

Model AI mengelompokkan kegagalan berdasarkan tumpukan-tracDengan membandingkan kesamaan, pisahkan cacat sebenarnya dari kegagalan lingkungan atau waktu, dan tentukan metode yang gagal mana yang harus diperiksa terlebih dahulu. Daftar laporan yang panjang yang dapat dikirim melalui email menjadi antrian prioritas yang singkat untuk tim.

Kopilot GitHub Dapat membuat kerangka kelas pendengar, pernyataan Reporter.log, dan entri testng.xml dari komentar singkat. RevTinjau setiap saran, karena pendengar yang dihasilkan sering kali melewatkan metode antarmuka yang tepat. TestNG mengharapkan.

Setelah IRetryAnalyzer terpasang, setiap percobaan ulang akan dicatat bersamaan dengan hasil akhirnya. Oleh karena itu, laporan default akan menampilkan setiap upaya, sehingga pengujian yang tidak stabil dapat muncul sebagai kegagalan dan keberhasilan dalam satu kali proses.

Lewatkan `-usedefaultlisteners false` pada baris perintah, atau atur `useDefaultListeners` ke `false` dalam konfigurasi Maven Surefire atau Ant. Hanya reporter yang Anda daftarkan secara eksplisit yang akan dijalankan, yang mempersingkat waktu eksekusi untuk rangkaian pengujian yang sangat besar.

Ringkaslah postingan ini dengan: