Etiqueta etl

Data Engineering, Software

Plugin Apache Hop para Apache Airflow

Introducción Desde el lanzamiento de nuestro plugin PDI de Pentaho para Apache Airflow, hemos visto un cambio en la industria hacia el uso de Apache Hop para el procesamiento de datos. ¿Qué es Apache Hop? Apache Hop comenzó (a finales…

Pere Alzamora
2022-09-30

Data Engineering

Apache Kafka + Apache Spark: Aprovechando tecnologías Streaming para el procesamiento en Batch

Proceso ETL. Pieza central del proyecto Big Data Recopilar, ingestar, integrar, tratar, almacenar y analizar grandes volúmenes de información son el conjunto de actividades fundamentales de un proyecto Big Data. Es la unión de estas tareas lo que permite tener…

Antonio Boutaour
2021-12-16

Data Engineering

Despliegue de Airflow: CeleryExecutor en Kubernetes

Cómo desplegar el orquestador de procesos Apache Airflow en Kubernetes

Antonio Boutaour
2021-02-17