Ir al contenido principal

Spring Batch


El procesamiento por lotes es un tema recurrente en el mundo de la informática y la programación. Lenguajes como COBOL fueron hechos específicamente para cubrir esos temas. Lenguajes como Java y Python le han pisado los talones por años aunque no siempre han obtenido el rendimiento deseado. Con Spring Framework, específicamente Spring Batch, se ha paliado esa desventaja con respecto a COBOL.

La documentación oficial nos dice que Spring Batch es:

Un marco de trabajo por lotes liviano e integral diseñado para permitir el desarrollo de aplicaciones por lotes sólidas vitales para las operaciones diarias de los sistemas empresariales.
Spring Batch proporciona funciones reutilizables que son esenciales en el procesamiento de grandes volúmenes de registros, incluidos el registro / rastreo, la gestión de transacciones, las estadísticas de procesamiento de trabajos, el reinicio de trabajos, la omisión y la gestión de recursos. También proporciona servicios técnicos más avanzados y características que permitirán trabajos por lotes de alto volumen y alto rendimiento a través de técnicas de optimización y partición. Los trabajos por lotes de gran volumen, tanto simples como complejos, pueden aprovechar el marco de una manera altamente escalable para procesar volúmenes significativos de información.

Características:
  • Gestión de transacciones 
  • Procesamiento basado en fragmentos 
  • E/S declarativa 
  • Iniciar/Parar/Reiniciar
  • Reintentar/Saltar 
  • Interfaz de administración basada en web (Spring Cloud Data Flow) 
Dentro del Batch Domain Language existen algunos términos importantes por conocer.

JobRepository (org.springframework.batch.core.repository)
Una interface Java que sirve de repositorio responsable de la persistencia de las entidades de metadatos por lotes. SimpleJobRepository es una implementación de está interface.

JobLauncher (org.springframework.batch.core.launch)
Interfaz simple para controlar trabajos, incluidas posibles ejecuciones ad-hoc, basadas en diferentes identificadores de tiempo de ejecución. SimpleJobLauncher es una implementación de está interface.

Job (org.springframework.batch.core)
Una interface Java. Un objeto de dominio por lotes que representa un Job. Trabajo es una abstracción explícita que representa la configuración de un Job especificado por un desarrollador.

Step (org.springframework.batch.core)
Interfaz de dominio por lotes que representa la configuración de un paso (Step). Al igual que con el trabajo (Job), un paso (Step) está destinado a representar explícitamente la configuración de un paso (Step) por un desarrollador, pero también la capacidad de ejecutar el paso (Step).

Un Step se compone de:
  1. ItemReader
  2. ItemProcessor y
  3. ItemWriter

ItemReader (org.springframework.batch.item)
Interfaz de estrategia para proporcionar los datos.
Se espera que las implementaciones sean con estado y se llamarán varias veces para cada lote, con cada llamada a read () que devuelve un valor diferente y finalmente devuelve un valor nulo cuando se agotan todos los datos de entrada.

 
Las implementaciones no necesitan ser seguras para subprocesos y los clientes de un ItemReader deben ser conscientes de que este es el caso.


ItemProcessor (org.springframework.batch.item)
Interfaz para la transformación del Item. Dado un elemento como entrada, esta interfaz proporciona un punto de extensión que permite la aplicación de la lógica empresarial en un escenario de procesamiento orientado a elementos.

ItemWriter (org.springframework.batch.item)
Interfaz básica para operaciones de salida genéricas. La clase que implementa esta interfaz será responsable de serializar los objetos según sea necesario.



Enlaces:
https://howtodoinjava.com/spring-batch/
https://spring.io/projects/spring-batch
http://www.andrew-programming.com/2018/09/07/spring-batch-csv-to-mysql/
http://www.andrew-programming.com/spring-batch-tutorial/
https://spring.io/guides/gs/batch-processing/ 
https://alquimistadecodigo.blogspot.com/2019/08/spring-batch-in-spring-boot-csv-to.html
https://blog.nearsoftjobs.com/spring-batch-es-un-proyecto-de-la-familia-de-spring-que-permite-realizar-procesamiento-etl-export-769ecc1d3805 

Comentarios

Entradas populares de este blog

Programación Windows Batch (CMD) parte 3

Crear ciclos para efectuar operaciones tediosas nos ahorrará tiempo para realizar otras tareas. En está ocasión veremos ciclos con FOR . ¿Cuál es la síntaxis de bucle FOR en Windows Batch? Si está dentro de un archivo *.bat : FOR %%variable IN (seq) DO operaciones Si lo ejecutamos en una terminal: FOR %variable IN (seq) DO operaciones Ejemplo 1 . Recorrer una secuencia de números del 0 al 5: recorrer.bat @ echo off FOR %%i in ( 0 1 2 3 4 5 ) DO echo Hola no. %%i pause Nos imprimirá en pantalla: Hola no. 0 Hola no. 1 Hola no. 2 Hola no. 3 Hola no. 4 Hola no. 5 ¿Puedo usar contadores? Si, se pueden usar. Ejemplo 2 . Uso de contadores: contador.bat @ echo off set numeros = 1 2 3 4 5 6 7 8 9 10 set cont = 0 for %%a in ( %numeros% ) do ( echo Hola no. %%a :: Contador set /a cont+ = 1 ) echo Total: %cont% Este código nos imprimirá, además de los mensajes Hola no. 0 ..., el total de valores conta

Programación Windows Batch (CMD) parte 4

Siguiendo con la serie de post sobre programación ( 1 , 2 , y 3 ) batch ahora veremos algunas cosas como operaciones aritméticas, operadores lógicos  y uso de ficheros. Cuando somos administradores de servidores o desarrolladores muchas veces tenemos que realizar tareas que nos quitan, relativamente, tiempo valioso que podríamos ocupar para otras cosas (como ver nuestro Facebook, jeje, broma).  Aprender a escribir scripts que nos faciliten algunas tareas siempre es útil. Por ejemplo, conocer todas las características técnicas de nuestro equipo de cómputo nos servirá cuando se realiza peritajes informáticos y soporte al equipo. Realizar respaldos automáticos a nuestras carpetas , archivos y directorios será más sencillo gracias a un script. Pero antes debemos aprender lo básico de la programación en batch. Ejemplo 1. Operaciones aritméticas básicas. aritmetica.bat @ echo off ::Nombre del archivo, imprimirá: aritmetica.bat echo %0 :: Set nos servirá para asignar va

COBOL para principiantes #1

COBOL es un lenguaje de programación que sigue dando de que hablar. Los programadores Java, C#, Python, etc. saben que aún existen aplicaciones hechas en COBOL y es difícil que éstas migren a un lenguaje más actual. Es por esa y otras razones que muchos han pensado en aprender este lenguaje 'obsoleto'. ¡COBOL is the king, no ha muerto! ¡A desempolvar los libros de nuestros abuelos, tíos o maestros! ¿Qué debemos hacer para aprender COBOL y no morir en el intento? Para empezar necesitas: Tener bases de programación (obvio). Conseguir un compilador dependiendo del sistema operativo que uses (si usas Windows puedes usar Visual Studio e instalar un compilador; si usas Linux puedes usar Gnu OpenCOBOL, nosotros usaremos éste último en el blog ). Saber qué extensión se usa para crear un programa COBOL (.cb, cbl, .cb). Nosotros usaremos .cbl  Comprender la estructura de un programa COBOL.  Conocer las estructuras de control y estructuras de datos en COBOL. Practicar.