Ir al contenido principal

Spring Batch -Tablas

Spring Batch emplea una técnica llamada 'procesamiento chunk' para la ejecución de un proceso. El reader lee una porción de datos y los convierte en chunk (una entidad/objeto). Si existe un processor, ese chunk pasa al processor para que lo trate. Después el writer se encargará de guardar la información tratada.



En el anterios post vimos los componentes principales del Batch Domain Language. El JobRepository se encargará de la persistencia de los datos (de alguna fuente como archivos TXT, CSV, BD, etc.). El JobLauncher lanzará procesos suministrando los parámetros de entrada deseados. El Job servirá de proceso, un contenedor de Steps. Cada Step es un elemento independiente dentro de un Job. Además cada Step se compone de tres elementos:

  1. ItemReader: responsable de leer los datos de una fuente.
  2. ItemProcessor: encargado de procesar la información.
  3. ItemWriter: encargado de guardar la información leída por el writer y procesada por el processor. Si hay un reader debe haber un writer.
Spring Batch utiliza la base de datos para mantener el estado durante una sola ejecución y desde la ejecución hasta ejecución. Se registra información sobre la instancia de trabajo, los parámetros pasados, los resultados de la ejecución, y los resultados de cada paso.

En esa base de datos se crearán 6 tablas y éstas son:

  1. BATCH_JOB_EXECUTION
  2. BATCH_JOB_EXECUTION_CONTEXT
  3. BATCH_JOB_EXECUTION_PARAMS
  4. BATCH_JOB_INSTANCE
  5. BATCH_STEP_EXECUTION
  6. BATCH_STEP_EXECUTION_CONTEXT

Básicamente esas tablas contienen la información de los Job y Steps en una aplicación batch.


-- Nos muestra el status, exit_code, etc. 
-- Si se completó el batch, COMPLETED 
-- Si hubo alguna falla, FAILED
SELECT * FROM public.batch_job_execution;

-- Nos muestra el id del Job en ejecución, etc.
SELECT * FROM public.batch_job_execution_context;


-- Nos muestra el tipo de parámetro, su id, etc.
-- Ejemplo: LONG
SELECT * FROM public.batch_job_execution_params;

-- Nos muestra el nombre del Job a cargar, etc.
-- Ejemplo: ETL-load
SELECT * FROM public.batch_job_instance;


-- Nos muestra el nombre del Step, start_time,etc.
-- Ejemplo: ETL-file-load
SELECT * FROM public.batch_step_execution;


-- Nos muestra el short_context, etc.
SELECT * FROM public.batch_step_execution_context;

Para poder crear éstas tablas debemos tener éstos parámetros en nuestro application.properties.


#BATCH
spring.batch.job.enabled=false
spring.batch.initialize-schema=always

En siguientes post veremos más detalles de Spring Batch.

Comentarios

Entradas populares de este blog

Odin language: el lenguaje de programación orientado a datos para un desarrollo de software sensato

En esta serie sobre lenguajes de programación hablamos de Odin , un lenguaje orientado a datos. Un nuevo lenguaje de programación que nos podrá recordar a lenguajes como C++, Python, Golang o hasta Rust. Instalación (Windows): 1 2 3 4 $ git clone https://github.com/odin-lang/Odin $ cd Odin $ git pull $ build.bat release Debemos asegurarnos de crear la variable de entorno: Nombre: ODIN_HOME Valor: C:\Users\HP\Documents\pruebasOdin\Odin Ejemplo 1. Como primer programa tendremos al clásico "Hola, mundo". holamundo.odin package holamundo import " core:fmt " main : : proc ( ) { fmt . println ( " ¡Hola, mundo desde Odin! " ) } Construimos: $ odin build holamundo . odin - file Ejecutamos: $ holamundo .exe Recordar que si usamos Visual Studio Code podemos instalar el plugin de Odin Language: https://marketplace.visualstudio.com/items?itemName=DanielGavin.ols Ejemplo 2. Programa que muestre las variables que pod...

Programación Windows Batch (CMD) parte 3

Crear ciclos para efectuar operaciones tediosas nos ahorrará tiempo para realizar otras tareas. En está ocasión veremos ciclos con FOR . ¿Cuál es la síntaxis de bucle FOR en Windows Batch? Si está dentro de un archivo *.bat : FOR %%variable IN (seq) DO operaciones Si lo ejecutamos en una terminal: FOR %variable IN (seq) DO operaciones Ejemplo 1 . Recorrer una secuencia de números del 0 al 5: recorrer.bat @ echo off FOR %%i in ( 0 1 2 3 4 5 ) DO echo Hola no. %%i pause Nos imprimirá en pantalla: Hola no. 0 Hola no. 1 Hola no. 2 Hola no. 3 Hola no. 4 Hola no. 5 ¿Puedo usar contadores? Si, se pueden usar. Ejemplo 2 . Uso de contadores: contador.bat @ echo off set numeros = 1 2 3 4 5 6 7 8 9 10 set cont = 0 for %%a in ( %numeros% ) do ( echo Hola no. %%a :: Contador set /a cont+ = 1 ) echo Total: %cont% Este código nos imprimirá, además de los mensajes Hola no. 0 ..., el total de valores conta...

z/OS, ¿Qué es? y ¿Cuáles son sus herramientas?

  En este post veremos las herramientas de z/OS de IBM. z/OS es un sistema operativo de mainframe desarrollado por IBM.  Es parte de la serie IBM z Systems (anteriormente conocida como System z), que se utiliza en los sistemas mainframe de IBM. z/OS es uno de los sistemas operativos más utilizados en el mundo empresarial para ejecutar aplicaciones críticas y procesar grandes volúmenes de datos. Características clave de z/OS: Escalabilidad : z/OS es conocido por su capacidad para manejar grandes cargas de trabajo y escalabilidad vertical, lo que permite agregar recursos de hardware para satisfacer las demandas de procesamiento. Confiabilidad y disponibilidad : z/OS está diseñado para ofrecer alta disponibilidad y confiabilidad. Incorpora características como redundancia y recuperación ante fallas para garantizar la continuidad de las operaciones. Seguridad : Proporciona una amplia gama de funciones de seguridad, como autenticación, autorización y auditoría, para proteger los...