INFORMATICA Transformations Tutorial & Filter Transformation

Vad är transformation?

Transformationer i Informatica är de objekt som skapar, modifierar eller skickar data till de definierade målstrukturerna (tabeller, filer eller andra mål).

Syftet med en transformation i Informatica är att modifiera källdata enligt målsystemets krav. Det säkerställer också kvaliteten på de data som laddas in i målet.

Informatica tillhandahåller olika transformationer för att utföra specifika funktioner.

Till exempel att utföra skatteberäkning baserad på källdata, datarensning etc. I transformationer ansluter vi portarna för att skicka data till dem, och transformationen returnerar utdata via utdataportarna.

Klassificering av transformation

Transformationer klassificeras i två kategorier, en baserad på anslutning och den andra baserad på förändringen i antalet rader. Först ska vi titta på transformationer baserade på anslutning.

Typer av transformation baserad på konnektivitet

• Anslutna transformationer
• Osammanhängande transformationer

I Informatica, under kartanpingDe transformationer som är kopplade till andra transformationer kallas sammankopplade transformationer.

Till exempel, Källkvalificeringstransformation av källtabellen EMP är kopplad till en filtertransformation för att filtrera anställda på en avdelning.

De transformationer som inte är kopplade till några andra transformationer kallas osammanhängande transformationer.

Deras funktionalitet används genom att anropa dem inuti andra transformationer, som t.ex. uttryckstransformationen. Dessa transformationer är inte en del av pipelinen.

De kopplade transformationerna är att föredra när transformationen anropas eller förväntas returnera ett värde för varje inmatningsrad. Till exempel, för postnumren i varje rad returnerar transformationen stadsnamnet.

De okopplade transformationerna är användbara när deras funktionalitet endast krävs periodiskt eller baserat på vissa villkor. Till exempel för att beräkna skatteuppgifterna om skattevärdet inte är tillgängligt.

Diagrammet nedan placerar båda paren av kategorier sida vid sida.

Typer av transformationer baserade på förändringen i antal rader

• Aktiva transformationer
• Passiva transformationer

Aktiva transformationer är de som modifierar dataraderna och antalet inmatningsrader som skickas till dem. Om en transformation till exempel tar emot tio rader som indata och returnerar femton rader som utdata, är det en aktiv transformation. Data i raden modifieras också i en aktiv transformation.

Passiva transformationer är de som inte ändrar antalet inmatningsrader. I passiva transformationer förblir antalet inmatnings- och utmatningsrader detsamma, och endast data ändras på radnivå.

I en passiv transformation skapas inga nya rader och inga befintliga rader tas bort.

Följande är listan över transformationer i Informatica

• Källa Qualifier Transformation
• Aggregatorförvandling
• Router transformation
• Joiner Transformation
• Rangförvandling
• Sekvens Generator Transformation
• Transaktionskontrolltransformation
• Uppslagning och återanvändbar transformation
• Normaliseringstransformation
• Performance Tuning för transformation
• Extern transformation
• Uttrycksförvandling

Vad är filteromvandling?

Filtertransformation är en aktiv transformation eftersom den ändrar antalet poster.

Med hjälp av filtertransformationen kan vi filtrera posterna baserat på filtervillkoret.

Till exempel, för att ladda medarbetarposter med avdelningsnummer lika med 10, kan vi lägga till en filtertransformation i kartan.ping med filtervillkoret deptno=10. Så endast de poster som har deptno=10 kommer att skickas vidare av filtertransformationen, och resten av posterna kommer att tas bort.

Standardfiltervillkoret är SANT, så en nyskapad filtertransformation skickas varje rad tills ett villkor anges. Varje rad som returnerar FALSKT tas bort och ett meddelande skrivs till sessionsloggen.

Hur man använder filtertransformation

Steg 1) Skapa en kartaping med källan “EMP” och målet “EMP_TARGET”.

Steg 2) Sedan på kartanping:

1. Välj menyn Transformation
2. Välj alternativet Skapa

Steg 3) Sedan i fönstret Skapa transformation:

1. Välj Filtertransformation från listan
2. Ange transformationsnamnet "fltr_deptno_10"
3. Välj alternativet Skapa

Steg 4) Filtertransformationen kommer att skapas. Välj knappen "Klar" i fönstret Skapa transformation.

Steg 5) På kartanping:

1. Dra och släpp alla kolumner för källkvalificerare till filtertransformationen
2. Länka kolumnerna från filtertransformationen till måltabellen

Steg 6) Double-klicka på Filtertransformationen för att öppna dess egenskaper och gör sedan följande:

1. Välj fliken Egenskaper
2. Klicka på filtervillkorsredigeraren

Steg 7) Sedan i filtervillkorsuttrycksredigeraren:

1. Ange filtervillkoret – deptnr=10
2. Välj OK-knappen

Steg 8) Nu ser du återigen filtervillkoret i fönstret Redigera transformationer, på fliken Egenskaper. Välj OK-knappen.

Spara nu kartanping och kör den efter att ha skapat session och arbetsflödeI måltabellen kommer endast poster med avd.nr.=10 att läsas in.

På så sätt kan du filtrera källposterna med hjälp av filtertransformationen.

Filter vs. router vs. källkvalificeringsfilter

Tre objekt i Informatica kan ta bort oönskade rader, och att välja fel objekt kostar antingen prestanda eller synlighet för den avvisade datan.

Ändamålet	Hur rader tas bort	När ska man välja det?
Filtertransformation	Ett villkor per transformation. Rader som returnerar FALSE tas bort och noteras i sessionsloggen.	En enda, enkel regel tillämpad inuti kartanping.
Routertransformation	Flera gruppvillkor i ett svep. Rader som inte matchar någon grupp hamnar i standardgruppen.	Rader måste delas upp i flera strömmar, eller så måste avvisade rader registreras.
Källkval filtrera	Villkoret blir en del av WHERE-klausulen i SQL-inläsningen från en relationskälla.	Källan är relationell och oönskade rader bör aldrig lämna databasen.

En enda router läser inkommande data en gång, medan flera filtertransformationer som testar samma indata gör att integrationstjänsten bearbetar den datan igen för var och en. Filtret Source Qualifier begränsar vad som är ex.tracfrån källan, medan Filter-transformationen begränsar vad som skickas vidare till målet.

Tips för att förbättra prestandan för filtertransformation

Filtervillkoret utvärderas för varje rad som når transformationen, så var objektet befinner sig i kartanping har en direkt effekt på sessionstiden.

• Placera filtertransformationen så nära källan som möjligt, så att oönskade rader aldrig går igenom de senare transformationerna.
• Skicka in villkoret i källkvalificeraren när källan är relationell, eftersom databasen filtrerar rader snabbare än integrationstjänsten.
• Håll villkoret enkelt. Ett komplext uttryck kan flyttas till en uttryckstransformation och reduceras till en enda flaggport som filtret testar.
• Använd en router istället för flera filtertransformationer som testar samma indata, så att inkommande data bara läses en gång.
• Kom ihåg att standardvillkoret är SANT, så ett filter som lämnas okonfigurerat skickar igenom allt och döljer felet.

Eftersom varje rad som tas bort skrivs som ett meddelande i sessionsloggen, förklaras ett oväntat tomt mål vanligtvis genom att läsa den loggen snarare än att köra kartan igen.ping.

Vanliga frågor