Transformasi Kualifikasi Sumber di Informatica dengan CONTOH

โšก Ringkasan Cerdas

Transformasi Source Qualifier di Informatica merepresentasikan baris-baris yang dibaca oleh Integration Service dari sumber relasional atau file datar, dan memungkinkan pengembang untuk mengganti kueri default, memfilter, mengurutkan, dan menghilangkan duplikasi data tersebut.

  • ๐Ÿงฉ Objek otomatis: Source Qualifier akan muncul secara otomatis setiap kali tabel relasional atau file datar ditambahkan ke dalam map.ping.
  • ๏ธ Penggantian SQL: Kueri khusus menggantikan SELECT yang dihasilkan dan diprioritaskan di atas filter sumber dan pengaturan port yang diurutkan.
  • ๐Ÿ”ข Urutan pelabuhan: Daftar SELECT harus mencantumkan nama port sesuai urutan kemunculannya dalam transformasi, jika tidak, sesi dapat gagal.
  • ๐ŸŽฏ Filter sumber: Kondisi filter memangkas baris di basis data, dan kata kunci WHERE harus dihilangkan darinya.
  • ๐Ÿ”— Bergabung sekali jalan: Tabel-tabel terkait dari satu sumber relasional dapat digabungkan di dalam satu Source Qualifier, bukan Joiner.
  • โšก Less lalu lintas: Pekerjaan yang didorong ke dalam kueri sumber memindahkan lebih sedikit baris melalui jaringan ke dalam sesi.

Transformasi Kualifikasi Sumber di Informatica

Apa itu Transformasi Kualifikasi Sumber?

Transformasi Source Qualifier adalah transformasi aktif dan terhubung yang merepresentasikan baris yang dibaca oleh Integration Service saat sesi berjalan. Setiap kali sumber relasional atau file datar ditambahkan ke peta.pingTransformasi Source Qualifier diperlukan, dan Designer menambahkannya secara otomatis. Dengan Source Qualifier, Anda dapat menentukan dan mengganti cara data diambil dari sumber.

Transformasi ini juga mengkonversi tipe data asli dari sumber menjadi tipe data transformasi Informatica, sehingga setiap transformasi yang ditempatkan setelahnya bekerja dengan satu set tipe data yang netral terhadap platform.

Karena Source Qualifier membangun kueri yang sebenarnya mencapai basis data, maka ini adalah tempat pertama yang harus dilihat ketika sebuah petaping Membaca lebih banyak baris atau kolom daripada yang dibutuhkan. Contoh di bawah ini mempersempit kueri menjadi empat kolom.

Cara Memodifikasi Source Qualifier di Informatica

Pada contoh berikut, kita akan memodifikasi Source Qualifier dari peta kita.ping โ€œm_emp_emp_targetโ€, sehingga alih-alih mengembalikan semua kolom, ia hanya mengembalikan kolom yang dipilih.

Langkah 1) Buka petaping โ€œm_emp_emp_targetโ€ di Petaping Perancang. Petaping Dimulai dengan sumber EMP, Kualifikasi Sumber SQ_EMP, dan target EMP_TARGET pada kanvas.

Lokasiping m_emp_emp_target terbuka di Informatica Mapping perancang

Langkah 2) Double-Klik transformasi Source Qualifier โ€œSQ_EMPโ€. Ini akan membuka jendela Edit Transformations untuk objek tersebut. Kemudian

  1. Klik tab Properti
  2. klik SQL Opsi Modifikasi Kueri, ini akan membuka jendela editor SQL

Tab Properti menampilkan baris Kueri SQL seperti yang ditunjukkan di bawah ini.

Tab Properti dari Kualifikasi Sumber SQ_EMP dengan baris Kueri SQL yang dipilih

Langkah 3) Di jendela editor SQL

  1. Masukkan pertanyaan berikut
    SELECT  EMPNO,  ENAME,  JOB,  MGR FROM  EMP

    Note โ€“ Kami memilih kolom EMPNO, ENAME, JOB, dan MGR dari sumber data, jadi kami hanya menyertakan kolom-kolom tersebut dalam kueri SELECT.

  2. Pilih tombol OK

Editor SQL sekarang menyimpan kueri kustom, bukan kueri yang dihasilkan secara otomatis.

Jendela Editor SQL yang berisi kueri SELECT kustom untuk Kualifikasi Sumber.

Langkah 4) Di jendela Edit Transformasi,

  1. Pilih tab Port dari menu.
  2. Di bawah tab Port, Anda akan melihat semua port. Pertahankan hanya port EMPNO, ENAME, JOB, MGR dan hapus port lainnya.

Tab Port mencantumkan setiap port yang dibawa oleh transformasi sebelum penghapusan.

Tab Port pada jendela Edit Transformasi yang mencantumkan semua port Source Qualifier.

Langkah 5) Setelah menghapus port, pilih tombol OK. Hanya empat port yang tersisa dalam daftar.

Tab Port setelah port Source Qualifier yang tidak diinginkan dihapus.

Sekarang klik tab Properti lagi di jendela Edit Transformasi, dan Anda hanya akan melihat data yang telah Anda pilih.

Tab Properti menampilkan penggantian kueri SQL yang tersimpan pada Kualifikasi Sumber.

Saat Anda mengklik tombol โ€œOKโ€, jendela Editor SQL akan terbuka.

  1. Ini akan mengkonfirmasi bahwa data yang Anda pilih sudah benar dan siap untuk dimuat ke dalam tabel target.
  2. Klik tombol OK untuk melanjutkan.

Jendela konfirmasi mengulang empat kolom yang akan dibaca selanjutnya.

Jendela Editor SQL yang mengkonfirmasi kueri yang ditimpa sebelum pemetaan.ping disimpan

Simpan petaping (menggunakan pintasan Ctrl+S) dan jalankan alur kerjaSetelah dieksekusi, hanya kolom yang dipilih yang akan dimuat ke dalam target.

Dengan cara ini, Anda dapat menimpa (override) di Source Qualifier kolom mana yang perlu diambil dari sumber, dan ini adalah satu-satunya cara untuk mengontrol kolom spesifik mana yang dimasukkan ke dalam map.ping.

Properti Kualifikasi Sumber

Anda dapat menggunakan berbagai properti Source Qualifier untuk menentukan jenis data sumber apa yang perlu ditransformasikan dan dikirim ke tabel target.

  1. Filter Sumber โ€“ Dengan menggunakan properti Filter Sumber, Anda dapat mengurangi jumlah data sumber. Misalnya, jika Anda hanya ingin mengambil data karyawan dari departemen nomor 10, Anda dapat memasukkan kondisi filter deptno=10 di properti Filter Sumber dan menjalankan data. Sertakan nama tabel dan nama port dalam kondisi tersebut, dan hilangkan kata kunci WHERE โ€“ filter yang berisi WHERE akan menyebabkan sesi gagal.
  2. Jumlah Port yang Diurutkan โ€“ Dalam transformasi Source Qualifier, Anda juga dapat mengurutkan catatan input berdasarkan posisi port. Integration Service menambahkan klausa ORDER BY ke kueri default, menghitung port dari bagian atas transformasi, sehingga data sudah diurutkan saat mencapai transformasi di dalam map.ping.

    Karena data dapat diurutkan berdasarkan satu port atau beberapa port, Anda harus menentukan jumlah port yang akan digunakan dalam pengurutan. Jika Anda memberikan nilai 1, maka hanya data empno yang akan diurutkan. Jika Anda memberikan nilai 2, maka data akan diurutkan berdasarkan empno dan ename.

  3. Pilih Berbeda โ€“ Anda hanya dapat mengambil data unik dari sumber menggunakan properti ini. Saat Anda memilih opsi Pilih Unik, Layanan Integrasi menambahkan pernyataan SELECT DISTINCT, sehingga hanya kombinasi data sumber yang unik yang diambil oleh Kualifikasi Sumber.

Tab Properti yang ditampilkan di bawah ini memuat opsi-opsi ini bersama dengan daftar properti lainnya.

Tab Properti Kualifikasi Sumber dengan Filter Sumber, Jumlah Port yang Diurutkan, dan Pilih yang Unik

Daftar lengkap properti yang tersedia pada Source Qualifier relasional dirangkum dalam tabel di bawah ini.

Milik Apa yang dilakukannya
Permintaan SQL Menggantikan kueri default yang dihasilkan oleh Layanan Integrasi. Kueri kustom menimpa gabungan (join) yang ditentukan pengguna dan filter sumber.
Gabung yang Ditentukan Pengguna Menyediakan kondisi yang digunakan untuk menggabungkan data dari beberapa sumber yang diwakili oleh Source Qualifier yang sama.
Filter Sumber Menyediakan kondisi filter yang diterapkan oleh Layanan Integrasi saat melakukan kueri baris.
Jumlah Port yang Diurutkan Jumlah kolom yang digunakan untuk mengurutkan baris yang dibaca dari sumber relasional, ditambahkan ke kueri sebagai ORDER BY.
TracTingkat ing Jumlah detail yang ditulis ke log sesi untuk transformasi ini.
Pilih Berbeda Mengembalikan baris unik saja dengan menambahkan SELECT DISTINCT ke dalam kueri.
Pra-SQL Perintah dijalankan terhadap basis data sumber sebelum Integration Service membaca sumber tersebut.
Post-SQL Perintah dijalankan terhadap basis data sumber setelah Integration Service menulis ke target.
Output bersifat deterministik. Menyatakan bahwa sumber mengembalikan data yang sama antar eksekusi ketika input konsisten.
Hasilnya Dapat Diulang Menyatakan bahwa sumber mengembalikan baris dalam urutan yang sama antara eksekusi, yang memungkinkan Integration Service untuk melewati proses staging untuk pemulihan.

Aturan dan Pedoman untuk Penggantian SQL Kualifikasi Sumber

Penggantian SQL sangat ampuh karena menggantikan semua yang dihasilkan oleh Designer, dan itulah sebabnya mengapa ia gagal tanpa pemberitahuan ketika aturan di bawah ini diabaikan.

  • Hubungkan port terlebih dahulu. Hubungkan setiap port input dan output yang ingin Anda gunakan sebelum memasukkan kueri, karena kueri yang dihasilkan dibangun dari port yang terhubung.
  • Pertahankan daftar SELECT sesuai urutan port. Pernyataan SELECT harus mencantumkan nama port sesuai urutan kemunculannya dalam transformasi. Jika urutannya tidak sesuai, sesi dapat gagal atau mengembalikan hasil yang tidak terduga.
  • Berikan kualifikasi pada setiap kolom. Setiap nama kolom harus diawali dengan nama tabel, tampilan, atau sinonim tempat kolom tersebut berada, misalnya ORDERS.ORDER_ID.
  • Hasilkan sebelum Anda mengedit. Mengklik Generate SQL akan menampilkan kueri default, yang sudah berisi filter sumber dan klausa sorted-ports, sehingga penggantian dapat dibangun dari pernyataan yang berfungsi.
  • Validasi pernyataan tersebut. Editor SQL memiliki tombol Validasi yang menjalankan kueri dan melaporkan apakah sintaksnya benar sebelum sesi dimulai.
  • Kutip kata-kata yang dilindungi. Setiap kata kunci yang dicadangkan dalam basis data yang digunakan dalam kueri harus diapit tanda kutip.
  • Perhatikan presedennya. Kueri khusus akan menimpa filter sumber dan jumlah port yang diurutkan, serta kueri SQL yang dimasukkan di dalamnya. Sidang Properti tersebut menimpa baik kondisi filter maupun kueri yang didefinisikan dalam peta.ping.

Untuk Microsoft SQL Server Terdapat satu aturan tambahan: jumlah kolom dalam pernyataan SELECT harus sesuai dengan jumlah port dalam transformasi, atau sesi akan gagal saat mengambil baris.

Cara Menggabungkan Dua Sumber dengan Satu Kualifikasi Sumber

Satu Source Qualifier dapat membaca lebih dari satu tabel. Ketika dua tabel terkait dari sumber relasional yang sama dihubungkan ke satu Source Qualifier, Integration Service menggabungkannya di dalam kueri sumber, bukan di dalam map.ping, yang berarti basis data yang melakukan pekerjaan tersebut dan lebih sedikit baris yang dikirim ke sesi.

Gabungan default adalah gabungan ekuijoin dalam yang ditulis ke dalam klausa WHERE sebagai Source1.column_name = Source2.column_name. Agar gabungan tersebut dapat dihasilkan, kolom yang digabungkan harus memiliki hubungan kunci utama-kunci asing dan tipe data yang cocok. Jika metadata yang diimpor tidak memiliki hubungan tersebut, Anda dapat membuatnya di Penganalisis Sumber dengan menghubungkan kolom yang cocok dari kedua definisi sumber.

Jika relasi tidak ada atau penggabungan harus berupa outer join, gunakan properti User-Defined Join sebagai gantinya. Kondisi yang dimasukkan di sana akan menggantikan informasi penggabungan yang terdapat dalam metadata, dan Integration Service akan menambahkannya ke kueri yang dihasilkan.

Ada dua batasan yang perlu diingat. Kedua tabel harus berasal dari sumber relasional yang sama, dan sumber dengan tipe berbeda โ€“ file datar dan tabel, atau dua basis data yang berbeda โ€“ harus digabungkan dengan tanda kurung siku. Transformasi tukang kayu sebagai gantinya.

Transformasi Kualifikasi Sumber vs Filter vs Penggabung

Tiga objek dapat mengurangi atau menggabungkan baris, dan memilih yang salah adalah penyebab umum sesi yang lambat. Tabel di bawah ini menyajikan ketiganya secara berdampingan.

Aspek Kualifikasi Sumber Transformasi filter Transformasi tukang kayu
Di mana pekerjaan berlangsung Di dalam basis data sumber, di dalam kueri yang dihasilkan Di Layanan Integrasi, baris demi baris Di Layanan Integrasi, menggunakan cache
Tujuan utama Baca baris sumber, timpa kueri, filter, urutkan, hapus duplikat. Hapus baris yang gagal memenuhi salah satu kondisi. Gabungkan dua pipeline menjadi satu set baris.
Jenis sumber Tabel relasional dan file datar dari satu sumber. Data pipeline apa pun Sumber heterogen, termasuk file datar dan berbagai basis data.
Bergabunglah dengan dukungan Penggabungan internal yang setara atau penggabungan yang ditentukan pengguna di dalam satu sumber relasional. None Sambungan luar normal, sambungan luar master, sambungan luar detail, dan sambungan luar penuh.
Barisan yang melintasi jaringan Hanya baris yang dikembalikan oleh kueri. Setiap baris sumber dibaca terlebih dahulu. Setiap baris sumber dibaca terlebih dahulu.

Aturan praktisnya sederhana: saring dan gabungkan sedini mungkin sesuai dengan sumbernya, dan carilah Filter atau hanya sebagai penggabung untuk pekerjaan yang tidak dapat dilakukan oleh basis data sumber. Mendorong kondisi ke dalam Kualifikasi Sumber adalah salah satu kemenangan termurah yang tersedia selama proses tersebut. penyempurnaan kinerja.

Pertanyaan Umum Demo Slot

Perintah Pre-SQL dijalankan terhadap basis data sumber sebelum Integration Service membaca sumber tersebut. Perintah Post-SQL dijalankan terhadap basis data yang sama setelah Integration Service selesai menulis ke target.

TracLevel `ing` menentukan seberapa detail transformasi tersebut ditulis ke dalam log sesi. Level yang lebih tinggi membantu saat mendiagnosis jumlah baris yang tidak terduga, tetapi memperbesar log dan memperlambat proses, jadi turunkan levelnya setelahnya.

Editor SQL memiliki tombol Validasi. Tombol ini menjalankan pernyataan terhadap sumber data ODBC yang dipilih dan melaporkan apakah sintaksnya benar, sehingga kesalahan muncul di Designer, bukan di sesi yang gagal.

Ya. Parameter dan variabel diperbolehkan dalam kueri, penggabungan yang ditentukan pengguna, filter sumber, dan perintah pra- dan pasca-sesi. Lampirkan parameter string dalam gaya tanda kutip yang diharapkan oleh basis data sumber.

Mereka menyatakan bahwa sumber data mengembalikan data yang sama, dan urutan yang sama, antara setiap eksekusi. Ketika keduanya diatur, Integration Service akan melewati proses penyiapan data sumber untuk pemulihan, yang mempersingkat waktu eksekusi.

Tidak. Penggantian kueri, penggabungan yang ditentukan pengguna, filter sumber, dan perintah pra- atau pasca-sesi dimasukkan ke dalam basis data, sehingga berlaku untuk sumber relasional. Kualifikasi Sumber berkas datar terutama mengontrol tracpesanan ing dan pelabuhan.

Asisten AI membaca rencana kueri dan riwayat beban kerja untuk menyarankan predikat, indeks, dan pemangkasan kolom. Penasihat berbasis pembelajaran mesin dalam basis data modern memberi peringkat pada saran-saran tersebut, tetapi pengembang tetap memvalidasi setiap perubahan sebelum mencapai sesi.

Copilot dapat membuat draf pernyataan SELECT dan mempercepat daftar kolom yang berulang. Namun, Copilot tidak mengetahui urutan port transformasi Anda, jadi verifikasi pernyataan yang dihasilkan terhadap tab Port sebelum menyimpannya.

Ringkaslah postingan ini dengan: