Ir al contenido principal

Spring Batch: Spring Cloud Data Flow

Spring Cloud Data Flow es un kit de herramientas nativo de la nube para construir canalizaciones de datos en tiempo real y procesos por lotes. Se encarga de administrar aplicaciones ETL (Extract-Transform-Load) de Spring Batch. Spring Cloud Data Flow proporciona herramientas para crear topologías complejas para transmisión y canalizaciones de datos por lotes.

Características

  1. El servidor Spring Cloud Data Flow utiliza Spring Cloud Deployer, para implementar canalizaciones de datos hechas de aplicaciones Spring Cloud Stream o Spring Cloud Task en plataformas modernas como Cloud Foundry y Kubernetes.
  2. Una selección de aplicaciones preestablecidas de flujo y de inicio de tareas / lotes para diversos escenarios de integración y procesamiento de datos facilitan el aprendizaje y la experimentación.
  3. Se pueden crear aplicaciones de flujo y tareas personalizadas, dirigidas a diferentes servicios de datos o middleware, utilizando el conocido modelo de programación de estilo Spring Boot.
  4. Un simple flujo de flujo DSL facilita la especificación de qué aplicaciones implementar y cómo conectar salidas y entradas. La tarea compuesta DSL es útil para cuando una serie de aplicaciones de tareas requieren ejecutarse como un gráfico dirigido.
  5. El tablero de instrumentos ofrece un editor gráfico para construir canalizaciones de datos de manera interactiva, así como vistas de aplicaciones desplegables y monitorearlas con métricas usando Prometheus, InfluxDB u otros sistemas de monitoreo.
  6. El servidor Spring Cloud Data Flow expone una API REST para componer e implementar canalizaciones de datos. Un shell separado facilita el trabajo con la API desde la línea de comandos.

En siguientes post veremos más a detalle ésta herramienta.

Enlaces:
https://docs.spring.io/spring-cloud-dataflow/docs/current/reference/htmlsingle/
https://www.e4developer.com/2018/02/18/getting-started-with-spring-cloud-data-flow/
https://spring.io/projects/spring-cloud-dataflow
https://www.baeldung.com/spring-cloud-data-flow-etl
https://dataflow.spring.io/getting-started/
https://codenotfound.com/spring-batch-tasklet-example.html
https://www.mkyong.com/spring-batch/spring-batch-tasklet-example/


Comentarios

Entradas populares de este blog

Rocket: un framework web para Rust

Rocket Framework es: Un framework web escrito en Rust.   Inspirado en Rails, Flask, Bottle y Yesod.  Admite el manejo de solicitudes HTTP, Web Sockets, JSON, plantillas y más. Creando un proyecto con Rocket Framework En primer lugar, verificamos la instalación de Rust en nuestras máquinas: rustc - - version Continuamos con la configuración de Rust nightly como nuestra cadena de herramientas predeterminada ejecutando el comando: rustup default nightly Si lo prefieres, una vez que configuremos un directorio de proyecto en la siguiente sección, puedes usar anulaciones por directorio para usar la versión nocturna solo para tu proyecto Rocket ejecutando el siguiente comando en el directorio: rustup override set nightly Creamos nuevo proyecto `` hola-rocket `` y nos ubicamos en el directorio creado: cargo new hola - rocket - - bin cd hola - rocket Con Cargo, agregamos la dependencia de rocket: cargo add rocket Abrimos el archivo `` Cargo.toml `` Ca...

Odin language: el lenguaje de programación orientado a datos para un desarrollo de software sensato

En esta serie sobre lenguajes de programación hablamos de Odin , un lenguaje orientado a datos. Un nuevo lenguaje de programación que nos podrá recordar a lenguajes como C++, Python, Golang o hasta Rust. Instalación (Windows): 1 2 3 4 $ git clone https://github.com/odin-lang/Odin $ cd Odin $ git pull $ build.bat release Debemos asegurarnos de crear la variable de entorno: Nombre: ODIN_HOME Valor: C:\Users\HP\Documents\pruebasOdin\Odin Ejemplo 1. Como primer programa tendremos al clásico "Hola, mundo". holamundo.odin package holamundo import " core:fmt " main : : proc ( ) { fmt . println ( " ¡Hola, mundo desde Odin! " ) } Construimos: $ odin build holamundo . odin - file Ejecutamos: $ holamundo .exe Recordar que si usamos Visual Studio Code podemos instalar el plugin de Odin Language: https://marketplace.visualstudio.com/items?itemName=DanielGavin.ols Ejemplo 2. Programa que muestre las variables que pod...

Programación Windows Batch (CMD) parte 3

Crear ciclos para efectuar operaciones tediosas nos ahorrará tiempo para realizar otras tareas. En está ocasión veremos ciclos con FOR . ¿Cuál es la síntaxis de bucle FOR en Windows Batch? Si está dentro de un archivo *.bat : FOR %%variable IN (seq) DO operaciones Si lo ejecutamos en una terminal: FOR %variable IN (seq) DO operaciones Ejemplo 1 . Recorrer una secuencia de números del 0 al 5: recorrer.bat @ echo off FOR %%i in ( 0 1 2 3 4 5 ) DO echo Hola no. %%i pause Nos imprimirá en pantalla: Hola no. 0 Hola no. 1 Hola no. 2 Hola no. 3 Hola no. 4 Hola no. 5 ¿Puedo usar contadores? Si, se pueden usar. Ejemplo 2 . Uso de contadores: contador.bat @ echo off set numeros = 1 2 3 4 5 6 7 8 9 10 set cont = 0 for %%a in ( %numeros% ) do ( echo Hola no. %%a :: Contador set /a cont+ = 1 ) echo Total: %cont% Este código nos imprimirá, además de los mensajes Hola no. 0 ..., el total de valores conta...