Joiner-Transformation in Informatica mit BEISPIEL

Was ist Joiner-Transformation?

Die Joiner-Transformation ist eine aktive und vernetzte Transformation, mit der Sie Joins in Informatica erstellen können. Die mit der Joiner-Transformation erstellten Joins ähneln den Joins in Datenbanken. Der Vorteil der Joiner-Transformation besteht darin, dass Joins für heterogene Systeme (unterschiedliche Datenbanken) erstellt werden können.

Bei der Joiner-Transformation gibt es zwei Datenquellen, die wir für Joins verwenden werden. Diese beiden Datenquellen werden genannt

• Master-Quelle
• Detailquelle

In den Eigenschaften der Joiner-Transformation können Sie auswählen, welche Datenquelle als Master- und welche als Detaildatenquelle dienen soll.

Während der Ausführung wird die Masterquelle für den Join-Vorgang im Speicher zwischengespeichert. Daher empfiehlt es sich, die Quelle mit den wenigsten Datensätzen als Masterquelle auszuwählen. Die Master-Pipeline wird in zwei Caches gehalten: einem Index-Cache für die in der Join-Bedingung verwendeten Werte und einem Daten-Cache für die übrigen Zeilendaten.

Arten von Joins in der Joiner-Transformation

Die Eigenschaft „Verknüpfungstyp“ auf der Registerkarte „Eigenschaften“ legt fest, was mit Zeilen geschieht, die keine Übereinstimmung finden. Die folgenden Verknüpfungen können mithilfe der Joiner-Transformation erstellt werden.

1. Master-Outer-Join – Bei einem Master Outer Join werden alle Datensätze aus der Detailquelle vom Join zurückgegeben, und es werden nur übereinstimmende Zeilen aus der Masterquelle zurückgegeben.
2. Detaillierte äußere Verbindung – Bei einem Detail Outer Join werden nur übereinstimmende Zeilen aus der Detailquelle und alle Zeilen aus der Masterquelle zurückgegeben.
3. Vollständiger äußerer Join – Bei einem vollständigen äußeren Join werden alle Datensätze aus beiden Quellen zurückgegeben.
4. Normaler Beitritt – Bei einem normalen Join werden nur übereinstimmende Zeilen aus beiden Quellen zurückgegeben.

Master-Außenverbindungen und Detail-Außenverbindungen entsprechen linken Außenverbindungen in SQLJeder Typ speichert alle Zeilen der einen Quelle und nur die Übereinstimmungen der anderen. Die folgende Tabelle vergleicht die vier Typen mit ihren SQL-Entsprechungen.

Join-Typ	Zeilen aus dem Master beibehalten	Zeilen, die vom Detail ferngehalten werden.	SQL-Äquivalent
Normaler Beitritt	Nur passende	Nur passende	Innere Verbindung
Master-Outer-Join	Nur passende	Alle Zeilen	Linker äußerer Join auf der Detailquelle
Detaillierte äußere Verbindung	Alle Zeilen	Nur passende	Left Outer Join auf der Masterquelle
Vollständiger äußerer Join	Alle Zeilen	Alle Zeilen	Vollständiger äußerer Join

Der Join-Typ ist eine Eigenschaft, keine strukturelle Entscheidung, daher kann er später geändert werden, ohne die Karte neu erstellen zu müssen.ping oder das erneute Verbinden von Ports.

Wie man die Joiner-Transformation in Informatica verwendet

In diesem Beispiel verknüpfen wir die Tabellen „emp“ und „dept“ mithilfe der Joiner-Transformation. Arbeiten Sie die folgenden acht Schritte in der Map durch.ping Designer.

Schritt 1) Erstellen Sie mithilfe des unten stehenden Skripts eine neue Zieltabelle EMP_DEPTNAME in der Datenbank und importieren Sie die Tabelle in die Informatica-Ziele.

Laden Sie die obige emp_deptname.sql-Datei herunter

Schritt 2) Erstelle eine neue Karteping Importieren Sie nun die Quelltabellen „EMP“ und „DEPT“ sowie die im vorherigen Schritt erstellte Zieltabelle. Alle drei Definitionen befinden sich nun auf der Arbeitsfläche, wie unten dargestellt.

Schritt 3) Wählen Sie im Menü „Transformation“ die Option „Erstellen“. Anschließend im unten angezeigten Fenster „Transformation erstellen“

1. Wählen Sie Joiner-Transformation aus
2. Geben Sie den Transformationsnamen „jnr_emp_dept“ ein.
3. Wählen Sie die Erstellungsoption

Schritt 4) Ziehen Sie alle Spalten aus beiden per Drag-and-Drop Quellenqualifizierer zur Joiner-Transformation. Beide Pipelines sind nun mit jnr_emp_dept verknüpft, wie der Screenshot zeigt.

Schritt 5) Double Klicken Sie auf die Joiner-Transformation und anschließend im Fenster „Transformationen bearbeiten“.

1. Wählen Sie die Registerkarte „Bedingung“ aus
2. Klicken Sie auf das Symbol „Neue Bedingung hinzufügen“.
3. Wählen Sie in der Liste der Haupt- und Detailspalten die Abteilungsnummer aus

Die Registerkarte „Bedingung“ enthält nun die einzelne Verknüpfungsbedingung für deptno.

Schritt 6) Dann im selben Fenster

1. Wählen Sie die Registerkarte „Eigenschaften“.
2. Wählen Sie als Join-Typ „Normal Join“ aus.
3. Wählen Sie die Schaltfläche „OK“ aus.

Im nächsten Schritt wird die Registerkarte „Eigenschaften“ mit der festgelegten Verbindungsart angezeigt.

Zur Leistungsoptimierung ordnen wir die Master-Quelle der Quelltabellen-Pipeline mit weniger Datensätzen zu. So führen Sie diese Aufgabe aus:

Schritt 7) Double Klicken Sie auf die Joiner-Transformation, um das Fenster „Transformationen bearbeiten“ zu öffnen, und dann

1. Wählen Sie die Registerkarte „Ports“ aus
2. Wählen Sie eine beliebige Spalte einer bestimmten Quelle aus, die Sie als Master erstellen möchten
3. Klicken Sie auf OK

Auf der Registerkarte „Ports“ wird die ausgewählte Pipeline als Master markiert, wie unten dargestellt.

Schritt 8) Verknüpfen Sie die relevanten Spalten der Joiner-Transformation mit der Zieltabelle. Die Zuordnungping Die Verarbeitung erfolgt nun von beiden Quellen über den Join in EMP_DEPTNAME.

Speichere nun die Karteping und führen Sie es nach dem Erstellen eines Session und Arbeitsablauf. Dafür wird der Join mithilfe des Informatica Joiners erstellt, und relevante Details werden aus beiden Tabellen abgerufen.

Eigenschaften der Joiner-Transformation

Die Registerkarte „Eigenschaften“ enthält mehr Informationen als nur den Join-Typ. Die folgenden Einstellungen steuern, wie viel Speicherplatz der Join verwendet und wo die Cache-Dateien gespeichert werden.

Rahmen	Was es steuert
Join-Typ	Normal, Master Outer, Detail Outer oder Full Outer. Legt fest, welche nicht übereinstimmenden Zeilen beibehalten werden.
Beitrittsbedingung	Die Liste der Master-Detail-Portpaare wird mit dem Gleichheitsoperator verglichen. Mehrere Bedingungen werden mit UND verknüpft.
Sortierte Eingabe	Gibt an, dass beide Pipelines bereits nach den Bedingungsports sortiert ankommen, wodurch der Integrationsdienst die Festplatteneingabe und -ausgabe minimieren kann.
Hauptsortierreihenfolge	Die Sortierreihenfolge der Master-Quelldaten, verwendet zusammen mit den sortierten Eingabedaten.
Cache-Verzeichnis	Verzeichnis, in dem die Index- und Datencache-Dateien erstellt werden. Standardmäßig wird die Prozessvariable $PMCacheDir verwendet.
Größe des Joiner-Daten-Caches	Größe des Datencaches, der die Masterzeilendaten enthält. Standardmäßig ist die Einstellung „Auto“, wodurch der Integrationsdienst die Größe festlegt.
Joiner-Index-Cache-Größe	Größe des Index-Caches, der die Master-Bedingungswerte enthält. Standardwert: Auto.
Transformationsbereich	Wendet den Join auf jede Transaktion, auf alle eingehenden Daten oder auf einen Zeilenbereich an.

Die Einstellung „Sortierte Eingabe“ ist die erste Wahl. Wenn beide Pipelines nach den Bedingungsports sortiert eintreffen, muss der Integrationsdienst nicht die gesamte Masterquelle vor Beginn des Abgleichs speichern. Dies entspricht dem Prinzip, das auch bei der folgenden Verarbeitung angewendet wird: Leistungsoptimierung von anderen zwischengespeicherten Transformationen.

Regeln und Einschränkungen der Joiner-Transformation

Manche Einschränkungen treten erst zutage, wenn die Karteping wird validiert, daher ist es günstiger, sie zu kennen, bevor die Ports verbunden werden.

• Nur Gleichheit. Eine Join-Bedingung vergleicht Ports mit dem Gleichheitsoperator. Vergleichsoperatoren wie größer als, kleiner als oder ungleich werden in der Bedingung nicht akzeptiert.
• Passende Datentypen. Beide Ports einer Bedingung müssen denselben Datentyp aufweisen. Der Designer überprüft dies, daher müssen nicht übereinstimmende Spalten zuerst konvertiert werden, üblicherweise mithilfe einer Ausdruckstransformation.
• Keine Aktualisierungsstrategie im Upstream. Eine Joiner-Transformation kann nicht verwendet werden, wenn eine der Eingabepipelines eine Update Strategy-Transformation enthält.
• Keine Sequenz Generator unmittelbar davor. Verbinden einer Sequenz Generator Eine Transformation unmittelbar vor dem Joiner wird nicht unterstützt.
• Zwischenspeicherung kann nicht deaktiviert werden. Die Master-Pipeline wird immer zwischengespeichert, weshalb die kleinere Datenquelle auf der Master-Seite liegt und die Cache-Größe bei großen Joins eine Rolle spielt.

Das Zusammenführen von drei Datenquellen erfordert zwei verkettete Joiner-Transformationen, da jede genau eine Master- und eine Detail-Pipeline akzeptiert. Wenn die zweite Datenquelle stattdessen eine kleine Referenztabelle ist, die zeilenweise gelesen wird, … Lookup-Transformation ist oft die einfachere Ausführung.

Häufig gestellte Fragen