INFORMATICA Transformaties-tutorial en filtertransformatie

Wat is transformatie?

Transformaties in Informatica zijn de objecten die gegevens creëren, wijzigen of doorgeven aan de gedefinieerde doelstructuren (tabellen, bestanden of andere doelen).

Het doel van een transformatie in Informatica is het aanpassen van de brongegevens aan de eisen van het doelsysteem. Het waarborgt tevens de kwaliteit van de gegevens die in het doelsysteem worden geladen.

Informatica biedt verschillende transformaties om specifieke functionaliteiten uit te voeren.

Bijvoorbeeld het uitvoeren van belastingberekeningen op basis van brongegevens, het opschonen van gegevens, enzovoort. Bij transformaties verbinden we de poorten om gegevens door te geven, en de transformatie retourneert de uitvoer via uitvoerpoorten.

Classificatie van transformatie

Transformaties worden ingedeeld in twee categorieën: een op basis van connectiviteit en een op basis van de verandering in het aantal rijen. We zullen eerst de transformaties op basis van connectiviteit bekijken.

Soorten transformaties gebaseerd op connectiviteit

• Verbonden transformaties
• Niet-verbonden transformaties

In Informatica, tijdens het in kaart brengen van een kaartpingTransformaties die met andere transformaties verbonden zijn, worden verbonden transformaties genoemd.

Bijvoorbeeld Transformatie van bronkwalificatie De brontabel EMP is gekoppeld aan een filtertransformatie om de medewerkers van een afdeling te filteren.

De transformaties die niet met andere transformaties zijn verbonden, worden niet-verbonden transformaties genoemd.

Hun functionaliteit wordt benut door ze aan te roepen binnen andere transformaties, zoals de Expression-transformatie. Deze transformaties maken geen deel uit van de pipeline.

De gekoppelde transformaties hebben de voorkeur wanneer voor elke invoerrij een transformatie wordt aangeroepen of een waarde moet retourneren. Bijvoorbeeld, voor de postcodes in elke rij, waarbij de transformatie de plaatsnaam retourneert.

De niet-verbonden transformaties zijn nuttig wanneer hun functionaliteit slechts periodiek of onder bepaalde voorwaarden nodig is. Bijvoorbeeld voor het berekenen van de belastinggegevens als de belastingwaarde niet beschikbaar is.

Het onderstaande diagram plaatst beide paren categorieën naast elkaar.

Soorten transformaties gebaseerd op de verandering in het aantal rijen

• Actieve transformaties
• Passieve transformaties

Actieve transformaties zijn transformaties die de gegevensrijen en het aantal invoerrijen dat eraan wordt doorgegeven, wijzigen. Als een transformatie bijvoorbeeld tien rijen als invoer ontvangt en vijftien rijen als uitvoer retourneert, is het een actieve transformatie. De gegevens in de rij worden ook gewijzigd tijdens een actieve transformatie.

Passieve transformaties zijn transformaties die het aantal invoerrijen niet veranderen. Bij passieve transformaties blijft het aantal invoer- en uitvoerrijen gelijk, en worden alleen de gegevens op rijniveau aangepast.

Bij een passieve transformatie worden geen nieuwe rijen aangemaakt en worden er geen bestaande rijen verwijderd.

Hieronder vindt u de lijst met transformaties in Informatica

• Transformatie bronkwalificatie
• Aggregator-transformatie
• Router-transformatie
• Schrijnwerker Transformatie
• Rang Transformatie
• Volgorde Generator Transformatie
• Transformatie van transactiecontrole
• Opzoeken en herbruikbare transformatie
• Transformatie van de normalisatie
• Prestatieafstemming voor transformatie
• Externe transformatie
• Expressie Transformatie

Wat is filtertransformatie?

Filtertransformatie is een actieve transformatie omdat deze het aantal records wijzigt.

Met behulp van de Filter-transformatie kunnen we de records filteren op basis van de filtervoorwaarde.

Om bijvoorbeeld alleen de werknemersgegevens te laden waarvan het deptno-nummer 10 is, kunnen we een filtertransformatie in de kaart plaatsen.ping met de filtervoorwaarde deptno=10. Dus alleen records met deptno=10 worden door de filtertransformatie doorgegeven, de rest wordt verwijderd.

De standaard filtervoorwaarde is WAAR, dus een nieuw aangemaakte filtertransformatie laat elke rij doorlopen totdat aan een voorwaarde wordt voldaan. Elke rij die ONWAAR retourneert, wordt verwijderd en er wordt een bericht naar het sessielogboek geschreven.

Hoe gebruik je filtertransformaties?

Stap 1) Maak een kaartping met bron "EMP" en doel "EMP_TARGET".

Stap 2) Vervolgens op de kaartping:

1. Selecteer het menu Transformatie.
2. Selecteer de optie 'Maken'.

Stap 3) Vervolgens in het venster 'Transformatie maken':

1. Selecteer Filtertransformatie in de lijst
2. Voer de transformatienaam “fltr_deptno_10” in.
3. Selecteer de optie 'Maken'.

Stap 4) De filtertransformatie wordt aangemaakt. Selecteer de knop 'Klaar' in het venster 'Transformatie aanmaken'.

Stap 5) Op de kaartping:

1. Sleep alle kolommen van de bronkwalificatie naar de filtertransformatie.
2. Koppel de kolommen van de filtertransformatie aan de doeltabel.

Stap 6) Double- Klik op de transformatie 'Filter' om de eigenschappen ervan te openen en vervolgens:

1. Selecteer het tabblad Eigenschappen.
2. Klik op de editor voor filtervoorwaarden.

Stap 7) Vervolgens in de editor voor de filtervoorwaarde-uitdrukking:

1. Voer de filtervoorwaarde in – deptno=10
2. Selecteer de OK-knop.

Stap 8) Ga nu terug naar het venster 'Transformaties bewerken'. Op het tabblad 'Eigenschappen' ziet u de filtervoorwaarde. Selecteer de knop 'OK'.

Sla de kaart nu op.ping en voer het uit na het aanmaken van de sessie en workflowIn de doeltabel worden alleen de records met deptno=10 geladen.

Op deze manier kunt u de bronrecords filteren met behulp van de filtertransformatie.

Filter versus router versus bronkwalificatiefilter

In Informatica zijn er drie objecten waarmee ongewenste rijen verwijderd kunnen worden. Het kiezen van het verkeerde object kan leiden tot prestatieverlies of een verminderde zichtbaarheid van de verwijderde gegevens.

Object	Hoe rijen worden verwijderd	Wanneer je het moet kiezen
Filtertransformatie	Eén voorwaarde per transformatie. Rijen die FALSE retourneren, worden verwijderd en in het sessielogboek vastgelegd.	Een enkele, simpele regel die binnen de kaart wordt toegepast.ping.
Routertransformatie	Meerdere groeperingscondities in één doorloop. Rijen die aan geen enkele groepering voldoen, gaan naar de standaardgroepering.	Rijen moeten worden opgesplitst in meerdere streams, of afgewezen rijen moeten worden opgevangen.
Bronkwalificatie filter	De voorwaarde wordt onderdeel van de WHERE-clausule van de SQL-query die uit een relationele bron wordt gelezen.	De bron is relationeel en ongewenste rijen mogen de database nooit verlaten.

Een enkele router leest de binnenkomende gegevens eenmaal, terwijl verschillende filtertransformaties die dezelfde invoer testen ervoor zorgen dat de integratieservice die gegevens voor elk ervan opnieuw verwerkt. Het bronkwalificatiefilter beperkt wat er wordt weergegeven.tracDe filtertransformatie beperkt wat er vanuit de bron wordt verzonden, terwijl de filtertransformatie beperkt wat er naar het doel wordt doorgestuurd.

Tips om de prestaties van filtertransformaties te verbeteren

De filtervoorwaarde wordt geëvalueerd voor elke rij die de transformatie bereikt, dus waar het object zich in de kaart bevindt.ping Heeft een direct effect op de sessieduur.

• Plaats de filtertransformatie zo dicht mogelijk bij de bron, zodat ongewenste rijen niet door de latere transformaties worden meegenomen.
• Voeg de voorwaarde toe aan de Source Qualifier wanneer de bron relationeel is, omdat de database rijen sneller filtert dan de Integration Service.
• Houd de voorwaarde eenvoudig. Een complexe expressie kan worden verplaatst naar een expressietransformatie en worden gereduceerd tot een enkele vlag die door het filter wordt getest.
• Gebruik één router in plaats van meerdere filtertransformaties die dezelfde invoer testen, zodat de binnenkomende gegevens slechts één keer worden gelezen.
• Onthoud dat de standaardvoorwaarde WAAR is, dus een filter dat niet geconfigureerd is, laat alles door en verbergt de fout.

Omdat elke verwijderde rij als een bericht in het sessielogboek wordt vastgelegd, wordt een onverwacht lege doellocatie meestal verklaard door dat logboek te raadplegen in plaats van door de kaart opnieuw uit te voeren.ping.

Veelgestelde vragen