Tutorial de transformaciones de INFORMATICA y transformación de filtros

⚡ Resumen inteligente

Las transformaciones en Informatica son el mapaping objetos que crean, modifican o pasan datos hacia un destino, y la transformación Filter es el objeto activo que descarta cada fila que no cumpla una única condición de filtro.

  • 🔗 Conectividad: Las transformaciones conectadas se encuentran en la canalización, mientras que las no conectadas se llaman desde dentro de otra transformación.
  • 🔁 Número de filas: Las transformaciones activas cambian el número de filas; las pasivas solo cambian los valores dentro de una fila.
  • 🎯 Conceptos básicos de los filtros: Una condición decide qué filas continúan, y todas las demás abandonan la canalización.
  • 🧪 Ejemplo trabajado: La condición deptno=10 carga solo los registros del departamento diez en EMP_TARGET.
  • 📄 Registro de sesión: Las filas que se evalúan como FALSAS se descartan y se registran en el registro de sesión.
  • ⚡ Colocación: Keeping El filtro situado cerca del origen impide que las filas descartadas entren en transformaciones posteriores.

Transformaciones de Informatica y Transformación de Filtros

¿Qué es Transformación?

En Informatica, las transformaciones son los objetos que crean, modifican o transfieren datos a las estructuras de destino definidas (tablas, archivos o cualquier otro destino).

En Informatica, el objetivo de una transformación es modificar los datos de origen según los requisitos del sistema de destino. Asimismo, garantiza la calidad de los datos que se cargan en dicho sistema.

Informatica proporciona varias transformaciones para realizar funcionalidades específicas.

Por ejemplo, realizar cálculos de impuestos basados ​​en datos de origen, operaciones de limpieza de datos, etc. En las transformaciones, conectamos los puertos para pasarles datos, y la transformación devuelve el resultado a través de los puertos de salida.

Clasificación de transformación

Las transformaciones se clasifican en dos categorías: una basada en la conectividad y otra en el cambio en el número de filas. Primero, analizaremos las transformaciones basadas en la conectividad.

Tipos de transformación basados ​​en la conectividad

  • Transformaciones conectadas
  • Transformaciones desconectadas

En Informatica, durante el mapeopingLas transformaciones que están conectadas a otras transformaciones se denominan transformaciones conectadas.

Por ejemplo, Transformación del calificador de origen La tabla de origen EMP está conectada a una transformación de filtro para filtrar a los empleados de un departamento.

Aquellas transformaciones que no están conectadas con ninguna otra transformación se denominan transformaciones no conectadas.

Su funcionalidad se utiliza llamándolas dentro de otras transformaciones, como la transformación de expresiones. Estas transformaciones no forman parte del flujo de trabajo.

Se prefieren las transformaciones conectadas cuando, para cada fila de entrada, se llama a la transformación o se espera que devuelva un valor. Por ejemplo, para los códigos postales de cada fila, la transformación que devuelve el nombre de la ciudad.

Las transformaciones no conectadas son útiles cuando su funcionalidad solo se requiere periódicamente o bajo ciertas condiciones. Por ejemplo, calcular los detalles fiscales si no se dispone del valor del impuesto.

El siguiente diagrama coloca ambos pares de categorías uno al lado del otro.

Transformaciones de Informatica clasificadas por conectividad y por cambio en el número de filas.

Tipos de transformación según el cambio en el número de filas

  • Transformaciones activas
  • Transformaciones pasivas

Las transformaciones activas son aquellas que modifican las filas de datos y la cantidad de filas de entrada que reciben. Por ejemplo, si una transformación recibe diez filas como entrada y devuelve quince como salida, se trata de una transformación activa. En una transformación activa, los datos de la fila también se modifican.

Las transformaciones pasivas son aquellas que no modifican el número de filas de entrada. En las transformaciones pasivas, el número de filas de entrada y salida permanece igual, y solo se modifican los datos a nivel de fila.

En una transformación pasiva, no se crean filas nuevas ni se eliminan filas existentes.

A continuación se muestra la lista de transformaciones en Informatica

¿Qué es la transformación del filtro?

La transformación de filtro es una transformación activa, ya que cambia el número de registros.

Mediante la transformación de filtro, podemos filtrar los registros en función de la condición de filtro.

Por ejemplo, para cargar solo los registros de empleados que tengan deptno igual a 10, podemos colocar una transformación de filtro en el mapa.ping con la condición de filtro deptno=10. Por lo tanto, solo aquellos registros que tengan deptno=10 pasarán por la transformación de filtro, y el resto de los registros se descartarán.

La condición de filtro predeterminada es VERDADERA, por lo que una transformación de filtro recién creada procesa todas las filas hasta que se introduce una condición. Cada fila que devuelve FALSA se descarta y se escribe un mensaje en el registro de sesión.

Cómo utilizar la transformación de filtros

Paso 1) Créar un mapaping con origen “EMP” y destino “EMP_TARGET”.

Mapearping con la fuente EMP y el destino EMP_TARGET abiertos en Mapping Diseño

Paso 2) Luego en el mapaping:

  1. Seleccione el menú Transformación
  2. Seleccione la opción Crear.

Crear opción seleccionada del menú Transformación del mapaping Diseño

Paso 3) Luego, en la ventana Crear transformación:

  1. Seleccione Transformación de filtro de la lista
  2. Introduzca el nombre de la transformación “fltr_deptno_10”
  3. Seleccione la opción Crear.

Cree una ventana de transformación con la opción Transformación de filtro y el nombre fltr_deptno_10.

Paso 4) Se creará la transformación de filtro. Seleccione el botón "Listo" en la ventana Crear transformación.

Nueva transformación fltr_deptno_10 colocada en el mapaping lienzo

Paso 5) En el mapaping:

  1. Arrastra y suelta todas las columnas de Calificador de origen en la transformación de Filtro.
  2. Vincula las columnas de la transformación Filtro con la tabla de destino.

Puertos de calificador de origen vinculados a la transformación de filtro y a EMP_TARGET

Paso 6) Double-Haz clic en la transformación Filtro para abrir sus propiedades y, a continuación:

  1. Seleccione la pestaña Propiedades.
  2. Haga clic en el editor de condiciones de filtro.

Pestaña Propiedades de la transformación Filtro que muestra la fila Condición de filtro

Paso 7) Luego, en el editor de expresiones de condiciones de filtro:

  1. Introduzca la condición de filtro: deptno=10
  2. Seleccione el botón Aceptar

Editor de expresiones con la condición de filtro deptno=10 ingresada y validada

Paso 8) Ahora, de nuevo en la ventana Editar transformaciones, en la pestaña Propiedades verá la condición de filtro. Seleccione el botón Aceptar.

La condición de filtro deptno=10 se muestra junto a la propiedad Condición de filtro.

Ahora guarda el mapa.ping y ejecutarlo después de crear el durante toda la sesión. y flujo de trabajoEn la tabla de destino, solo se cargarán los registros que tengan deptno=10.

De esta forma, puede filtrar los registros de origen utilizando la transformación Filtro.

Filtro vs Enrutador vs Filtro calificador de origen

En Informatica, existen tres objetos que permiten eliminar filas no deseadas, y elegir el incorrecto puede afectar al rendimiento o a la visibilidad de los datos rechazados.

Objeto Cómo se eliminan las filas Cuándo elegirlo
Transformación de filtro Una condición por transformación. Las filas que devuelven FALSO se eliminan y se registran en el archivo de registro de la sesión. Una única y sencilla regla aplicada dentro del mapa.ping.
Transformación del enrutador Varias condiciones de grupo en una sola pasada. Las filas que no coincidan con ningún grupo se asignarán al grupo predeterminado. Las filas deben dividirse en varios flujos, o bien deben capturarse las filas rechazadas.
Calificador de fuente filtrar La condición pasa a formar parte de la cláusula WHERE de la consulta SQL leída desde una fuente relacional. La fuente es relacional y las filas no deseadas nunca deben salir de la base de datos.

Un único enrutador lee los datos entrantes una vez, mientras que varias transformaciones de filtro que prueban la misma entrada hacen que el Servicio de integración procese esos datos de nuevo para cada una. El filtro Calificador de origen limita lo que se extracted desde la fuente, mientras que la transformación Filter limita lo que se envía al destino.

Consejos para mejorar el rendimiento de la transformación de filtros

La condición de filtro se evalúa para cada fila que llega a la transformación, por lo que el objeto se encuentra en el mapa.ping tiene un efecto directo en el tiempo de sesión.

  • Coloca la transformación de filtro lo más cerca posible del origen, para que las filas no deseadas nunca pasen por las transformaciones posteriores.
  • Cuando el origen sea relacional, introduzca la condición en el Calificador de origen, ya que la base de datos filtra las filas más rápido que el Servicio de integración.
  • Mantén la condición simple. Una expresión compleja se puede trasladar a una transformación de expresión y reducir a un único puerto de indicador que el filtro comprueba.
  • Utilice un único enrutador en lugar de varias transformaciones de filtro que prueben la misma entrada, de modo que los datos entrantes se lean solo una vez.
  • Recuerde que la condición predeterminada es VERDADERA, por lo que un filtro que no se configura permite que todo pase y oculta el error.

Dado que cada fila descartada se escribe como un mensaje en el registro de sesión, un destino inesperadamente vacío generalmente se explica leyendo ese registro en lugar de volver a ejecutar el mapa.ping.

Preguntas Frecuentes

Solo una. La expresión puede combinar varias pruebas con AND y OR, pero la transformación evalúa una única expresión que devuelve VERDADERO o FALSO para cada fila entrante.

Un resultado nulo se trata como FALSO, por lo que se descarta la fila.ping El puerto en ISNULL o IIF hace explícita la intención y evita que las filas desaparezcan sin una razón obvia.

Sí. Las comparaciones de cadenas respetan las mayúsculas y minúsculas, por lo que un valor como SALES no coincide con Sales. Aplicar MAYÚSCULAS o MINÚSCULAS al puerto garantiza la fiabilidad de la prueba cuando los datos de origen son inconsistentes.

Los activos. El Normalizador Convierte un único registro con columnas repetidas en varias filas, y una unión fusiona flujos de datos. Los objetos pasivos siempre devuelven el mismo número de filas.

Nada le proporciona filas, porque no tiene enlaces en la canalización. Otra transformación la llama por su nombre con argumentos, recibe un único valor de retorno y el objeto se ejecuta solo para esas llamadas.

Sí. Los objetos reutilizables se crean en el Desarrollador de transformaciones y se almacenan en el repositorio, por lo que una definición se puede insertar en muchos mapapings y editado en un solo lugar.

El aprendizaje automático en las herramientas de integración modernas crea perfiles de la fuente, propone reglas de limpieza y coincidencia, e identifica las columnas cuyos valores varían, de modo que el diseñador parte de un flujo de trabajo sugerido en lugar de un lienzo en blanco.

Copilot genera la sintaxis de expresiones como IIF, ISNULL y DECODE a partir de una descripción simple, lo que agiliza la escritura de condiciones. Cada expresión generada aún necesita ser probada con filas reales dentro del Diseñador.

Resumir este post con: