Transaktionskontrolltransformation in Informatica (Beispiel)

⚡ Intelligente Zusammenfassung

Die Transaction Control-Transformation in Informatica ist ein aktives, verbundenes Objekt, das Zeilen festschreibt oder zurücksetzt, während eine Mapping Läufe, wobei fünf eingebaute Variablen innerhalb einer Bedingung verwendet werden, die für jede Zeile einmal ausgewertet wird.

  • 🔄 Fünf eingebaute Variablen: TC_CONTINUE_TRANSACTION, TC_COMMIT_BEFORE, TC_COMMIT_AFTER, TC_ROLLBACK_BEFORE und TC_ROLLBACK_AFTER legen fest, was in jeder Zeile geschieht.
  • ⚙️ Zustand lebt in Eigenschaften: Das Feld „Transaktionssteuerungsbedingung“ auf der Registerkarte „Eigenschaften“ enthält den IIF-Ausdruck, den der Integrationsdienst auswertet.
  • 🧪 Ausgearbeitetes Beispiel: Sieben-Karteping Die Designerschritte speichern die EMP-Daten in EMP_TARGET, sobald die Abteilungsnummer 20 gefunden wird.
  • ✅ Wirksam oder unwirksam: Jede Transformation, die Transaktionsgrenzen aufhebt, nachdem sie durchgeführt wurde, macht das Objekt für das dahinter stehende Ziel unwirksam.
  • 🔧 Sitzungs-Commit-Typ: Eine Karteping mit einer effektiven Transaktionssteuerungstransformation, die unter dem benutzerdefinierten Commit-Typ ausgeführt wird.
  • ⚠️ Strenger Rückgabewert: Wenn eine Bedingung einen anderen Wert als commit, roll back oder continue zurückgibt, schlägt die Sitzung für den Integrationsdienst fehl.

Transaktionskontrolltransformation in Informatica

Was ist Transaktionskontrolltransformation?

Die Transaktionssteuerung ist eine aktive und verbundene Transformation, die es uns ermöglicht, Transaktionen während der Ausführung der Map zu bestätigen oder rückgängig zu machen.pingCommit- und Rollback-Operationen sind von erheblicher Bedeutung, da sie die Verfügbarkeit der Daten gewährleisten.

Bei der Verarbeitung großer Datenmengen kann es erforderlich sein, die Daten im Zielsystem zu speichern. Zu häufige Speicherungen führen zu einer erhöhten Systembelastung. Werden sie hingegen zu spät durchgeführt, besteht im Fehlerfall die Gefahr von Datenverlust.

Um Flexibilität zu gewährleisten, wird die Transaktionssteuerungstransformation bereitgestellt. Anstatt den Commit-Punkt auf den Standardwert der Sitzung zu belassen, ermöglicht sie die Anwendung einer Bedingung innerhalb der Sitzung. Karteping Entscheiden Sie Zeile für Zeile, wo eine Transaktion endet und die nächste beginnt.

TCL-Commit- und Rollback-Befehle

Diese Transformation stellt fünf integrierte Variablen zur Verfügung, um die Operation zu verarbeiten. Die Bedingung muss für jede Zeile eine dieser fünf Variablen zurückgeben; ein Wert außerhalb dieser Liste führt dazu, dass der Integrationsdienst die Sitzung abbricht.

TC_CONTINUE_TRANSACTION

In TC_CONTINUE_TRANSACTION werden keine Operationen durchgeführt, der Datenladeprozess wird unverändert fortgesetzt. Dies ist der Standardwert des Ausdrucks.

TC_COMMIT_BEFORE

Wenn in TC_COMMIT_BEFORE dieses Flag gesetzt ist, wird vor der Verarbeitung der aktuellen Zeile ein Commit durchgeführt. Anschließend wird eine neue Transaktion gestartet und die aktuelle Zeile in das Zielsystem geschrieben.

TC_COMMIT_AFTER

Nach der Verarbeitung der aktuellen Zeile in TC_COMMIT_AFTER wird ein Commit durchgeführt und die nächste Transaktion beginnt.

TC_ROLLBACK_BEFORE

Bei TC_ROLLBACK_BEFORE wird zuerst ein Rollback durchgeführt, anschließend werden die Daten für den Schreibvorgang verarbeitet.

TC_ROLLBACK_AFTER

Nach der Datenverarbeitung in TC_ROLLBACK_AFTER wird der Rollback durchgeführt.

Eigenschaften der Transaktionssteuerung

Das Objekt wird im Fenster „Transformationen bearbeiten“ konfiguriert, das dieselben vier Registerkarten wie die anderen PowerCenter-Transformationen enthält. Zu wissen, welche Registerkarte welche Einstellung enthält, spart im folgenden Schritt viel Suchaufwand.

Tab Was ist dort konfiguriert?
Transformation Name der Transformation, ihre Beschreibung und ob das Objekt wiederverwendbar gemacht wird.
Häfen Die Eingangs- und Ausgangsports, die normalerweise durch Ziehen der Spalten aus der vorgelagerten Transformation erstellt werden.
Eigenschaften im Vergleich Die Transaktionssteuerungsbedingung, die mit dem kleinen Pfeil neben dem Feld geöffnet wird, und die TracDer Status „ing“ wurde in das Sitzungsprotokoll geschrieben.
Metadatenerweiterungen Benutzerdefinierte Metadaten werden zusammen mit der Transformation im Repository gespeichert.

Zwei Einstellungen leisten die eigentliche Arbeit. Transaktionskontrollbedingung enthält den Ausdruck, der üblicherweise ein IIF()-Test ist, der eine der fünf Variablen zurückgibt. Tracing Level Legt fest, wie viele Details über die Transformation im Sitzungsprotokoll angezeigt werden, wenn der Lauf untersucht wird.

Eine Einstellung liegt außerhalb der Transformation. Wenn eine Karteping enthält eine effektive Transaktionssteuerungstransformation, die Sitzung wird mit der Commit-Typ auf der Registerkarte „Eigenschaften“ auf „Benutzerdefiniert“ einstellen Session, anstatt der Target oder Quellcode-Commit-Typen, die ein festes Commit-Intervall verwenden.

Wie man die Transaktionssteuerungstransformation in Informatica verwendet

In diesem Beispiel werden wir Daten an das Zielsystem übertragen, wenn die Bedingung Abteilungsnummer = 20 erfüllt ist.

Schritt 1) Erstellen Sie eine Karteping mit EMP als Quelle und EMP_TARGET als Ziel. Die Karteping Die Designer-Arbeitsfläche enthält dann die Quelle, ihren Quellqualifizierer und die Zieldefinition.

Karteping Designer-Canvas mit der EMP-Quelle, ihrem Quellqualifizierer und der EMP_TARGET-Zieldefinition

Schritt 2) Erstellen Sie eine neue Transformation über das Menü „Transformation“ und anschließend im Fenster „Transformation erstellen“:

  1. Wählen Sie eine Transaktionssteuerung als neue Transformation aus
  2. Geben Sie den Transformationsnamen „tc_commit_dept20“ ein.
  3. Wählen Sie die Erstellungsoption

Erstellen Sie ein Transformationsfenster mit ausgewählter Transaktionssteuerung und dem Namen tc_commit_dept20.

Schritt 3) Die Transformation „Transaktionssteuerung“ wird erstellt. Klicken Sie auf die Schaltfläche „Fertig“. Das neue Objekt wird nun neben dem Quellqualifizierer auf der Arbeitsfläche angezeigt.

Die Transaktionssteuerungstransformation tc_commit_dept20 wurde neben dem Quellqualifizierer erstellt.

Schritt 4) Ziehen Sie alle Spalten aus dem Quellqualifizierer per Drag & Drop in die Transaktionssteuerungstransformation und verknüpfen Sie anschließend alle Spalten der Transaktionssteuerungstransformation mit der Zieltabelle. Die Pipeline läuft nun wie folgt ab: Quelle → Quellqualifizierer → tc_commit_dept20 → EMP_TARGET.

Die über tc_commit_dept20 verknüpften Source Qualifier-Spalten sind in der Tabelle EMP_TARGET enthalten.

Schritt 5) Double Klicken Sie auf die Transformation „Transaktionssteuerung“ und anschließend im Eigenschaftenfenster auf:

  1. Wählen Sie die Registerkarte „Eigenschaften“.
  2. Klicken Sie auf das Symbol des Transaktionssteuerungseditors

Registerkarte „Eigenschaften“ des Fensters „Transformationen bearbeiten“, die das Symbol des Transaktionssteuerungseditors anzeigt

Schritt 6) Geben Sie im Ausdruckseditor den Ausdruck ein –

iif(deptno=20,tc_commit_before,tc_continue_transaction)

und wählen Sie OK. Das bedeutet: Wenn die Abteilungsnummer 20 gefunden wird, wird die Transaktion im Zielsystem abgeschlossen, andernfalls wird die aktuelle Verarbeitung fortgesetzt.

Ausdruckseditor, der die IIF-Bedingung enthält, die vor einer Zeile mit der Abteilungsnummer 20 ausgeführt wird.

Schritt 7) Wählen Sie im vorherigen Fenster „OK“. Die Bedingung wird nun auf der Registerkarte „Eigenschaften“ der Transformation gespeichert.

Registerkarte „Eigenschaften“ des Fensters „Transformationen bearbeiten“, nachdem die Transaktionssteuerungsbedingung gespeichert wurde

Speichere nun die Karteping und führen Sie es nach dem Erstellen von Sitzungen und Workflows aus. Diese Zuordnungping Die Daten werden an das Zielsystem übertragen, sobald die Abteilungsnummer 20 in den Daten gefunden wird.

Effektive und ineffektive Transformationen der Transaktionskontrolle

Die Transformation ist ein Transaktionsgenerator. Sie verwirft die von vorgelagerten Prozessen eingehenden Transaktionsgrenzen und definiert für alle nachgelagerten Prozesse eigene neue Grenzen. Deshalb ist ihre Position in der Pipeline genauso wichtig wie ihr Zustand.

Man nennt sie wirksam für ein Ziel, wenn die von ihm geschaffenen Grenzen dieses Ziel noch erreichen, und unwirksam Wenn eine spätere Transformation diese Grenzen verwirft. Laut dem Informatica PowerCenter Transformation Guide verwerfen die folgenden Objekte eingehende Transaktionsgrenzen:

  • Ein Aggregator, Joiner, Rang, Sorter oder benutzerdefinierte Transformation, deren Transformationsbereich „Alle Eingaben“ ist.
  • Eine benutzerdefinierte Transformation, die so konfiguriert ist, dass sie Transaktionen generiert.
  • Eine weitere Transformation der Transaktionssteuerung
  • Eine Transformation mit mehreren Eingangsgruppen, die mit mehr als einem vorgelagerten Transaktionskontrollpunkt verbunden ist

Dass ein Objekt für das Zielobjekt ineffektiv ist, macht es nicht nutzlos. Eine nachgelagerte Transformation, deren Transformationsbereich „Transaktion“ ist, verwendet weiterhin die vorgelagert definierten Grenzen. Daher kann dieselbe Transformation für einen Sorter effektiv, für die dahinterliegende Tabelle jedoch ineffektiv sein.

Auf einer Karteping Bei mehreren Zielen kann das Objekt für ein Ziel wirksam und für ein anderes unwirksam sein. Die Karteping Die Gültigkeit bleibt erhalten, solange jedes Ziel mit einer effektiven Transaktionssteuerungstransformation verbunden ist, und wird ungültig, sobald ein Ziel nicht mehr verbunden ist. Der Designer meldet, welche Transformationen für Ziele ineffektiv sind, wenn die Zuordnungping wird gespeichert oder validiert.

Regeln und Leitlinien für die Transformation der Transaktionskontrolle

Die meisten Probleme bei dieser Transformation treten eher zur Laufzeit als zur Entwurfszeit auf, daher lohnt es sich, die folgenden Punkte zu überprüfen, bevor die Sitzung erstellt wird.

  • Der Rückgabewert ist strikt. Wenn die Bedingung zu einem anderen Ergebnis als „commit“, „rollback“ oder „continue“ ausgewertet wird, schlägt die Sitzung für den Integrationsdienst fehl.
  • TC_CONTINUE_TRANSACTION ist der Fallback. Jeder Zweig der IIF()-Funktion muss irgendwo enden, und continue ist der Wert, der die aktuelle Transaktion unberührt lässt.
  • Die Zielart ist entscheidend. Eine Transaktionssteuerungstransformation, die mit einem anderen Ziel als einem relationalen, XML- oder dynamischen MQSeries-Ziel verbunden ist, ist für dieses Ziel unwirksam.
  • Der Zustand kann nur das nutzen, was ihn erreicht. Im Transaktionssteuerungseditor sind nur die mit der Transformation verknüpften Ports, ihre variablen Ports und die integrierten Variablen verfügbar.
  • Die Häufigkeit von Commitments ist ein Kompromiss. Eine Bedingung, die bei nahezu jeder Zeile einen Commit auslöst, beseitigt den Vorteil der Pufferung, während eine Bedingung, die fast nie ausgelöst wird, das Datenverlustfenster wieder einführt, das die Transformation eigentlich schließen sollte.
  • Überprüfen Sie das Sitzungsprotokoll. Das Protokoll zeichnet die tatsächlich durchgeführten Commit-Punkte auf; dies ist der schnellste Weg, um zu bestätigen, dass sich die Bedingung während des Vorgangs wie beabsichtigt verhalten hat. Leistungsoptimierung.

Häufig gestellte Fragen

Ein Commit-Intervall führt nach einer festgelegten Anzahl von Zeilen in der Sitzung einen Commit durch. Eine Transaktionssteuerungsbedingung führt einen Commit auf Basis der Daten selbst durch, sodass der Commit-Punkt einer Geschäftsregel und nicht einer Zeilenanzahl folgt.

Im Informatica PowerCenter Transformation Guide wird darauf hingewiesen, dass eine Transaction Control-Transformation, die mit einem anderen Ziel als einem relationalen, XML- oder dynamischen MQSeries-Ziel verbunden ist, für dieses Ziel unwirksam ist.

Ja. Erstellen Sie es im Transformationsentwickler oder aktivieren Sie die Option „Wiederverwendbar machen“ auf der Registerkarte „Transformation“ einer bestehenden Transformation. Jede Karteping dann gilt für alle die gleiche Bedingung, sodass eine Regeländerung alle gleichzeitig betrifft.

Maschinelles Lernen anhand historischer Sitzungsprotokolle kann Lasten identifizieren, bei denen die Commit-Häufigkeit mit langen Laufzeiten oder Rollback-Stürmen korreliert. Diese Annahme ist jedoch noch hypothetisch; daher sollte sie vor einer Änderung der Bedingung anhand eines realen Testlaufs überprüft werden.

Copilot kann die IIF()-Formel erstellen und Sie an die fünf Variablennamen erinnern, kennt aber weder Ihre Portnamen noch Ihre Geschäftsregeln. Betrachten Sie die Ausgabe als Ausgangspunkt und überprüfen Sie sie im Ausdruckseditor.

Die Aktualisierungsstrategie legt fest, was mit einer Zeile geschieht, indem sie diese als einfügen, aktualisieren, löschen oder ablehnen kennzeichnet. Die Transaktionssteuerung bestimmt, wann die geschriebenen Zeilen endgültig gespeichert werden. Beide beantworten unterschiedliche Fragen und werden häufig gemeinsam verwendet.

Cloud Data Integration liefert eine eigene Transaktionssteuerungstransformation mit denselben Commit-, Rollback- und Continue-Variablen. Das Designkonzept wird beibehalten, das Objekt wird jedoch in der Cloud-Map erstellt.ping Designer und nicht im PowerCenter-Client.

Zeilen, die seit dem letzten Commit dieser Transaktion geschrieben wurden, werden verworfen. Alles, was zuvor committet wurde, bleibt im Zielsystem erhalten. Daher bestimmt die Position der Commit-Punkte, wie viel Arbeit ein Fehler verursachen kann.

Fassen Sie diesen Beitrag mit folgenden Worten zusammen: