Configuración de un flujo de datos para el procesamiento incremental

Aplique el procesamiento incremental en un flujo de datos para cargar solo los registros nuevos o actualizados de una base de datos.

La aplicación del procesamiento incremental en un flujo de datos le permite cargar solo los datos nuevos, en lugar de realizar una carga completa cada vez, lo que resulta costoso e ineficaz. Es decir, cada vez que carga datos mediante un flujo de datos, solo procesa los datos nuevos que se han agregado desde la última ejecución.
Antes de empezar, cree una conexión a una de las bases de datos soportadas; por ejemplo, Oracle, Oracle Autonomous Data Warehouse, Apache Hive, Hortonworks Hive o Map R Hive. A continuación, configure un indicador de nuevos datos para esa base de datos. Consulte Especificación de un indicador de nuevos datos para un origen de datos.
  1. Cree o abra el flujo de datos al que desea aplicar el procesamiento incremental.
  2. En el editor de flujos de datos, seleccione el paso Guardar datos para mostrar el panel Editor de pasos.
  3. En el campo Juego de datos, especifique el nombre del juego de datos de entrada especificado en el paso Agregar datos.
  4. En la opción Guardar datos en, seleccione Conexión a base de datos.
  5. Haga clic en Seleccionar conexión y seleccione una conexión a una de las bases de datos de destino soportadas.
  6. En el campo Tabla, especifique el nombre de la tabla de destino en la que va a escribir.
  7. En la opción Al ejecutar, seleccione Agregar nuevos datos a datos existentes.
  8. Haga clic en Guardar.