Con la reciente salida de la beta de DBT v2, la herramienta de transformación de datos marca su mayor actualización hasta el momento. Siendo un cambio tan considerable, vale la pena analizar qué conlleva y qué se replantea. Novedades principales…
En el post Process Discovery: Métodos y ejemplo práctico ya analizamos esta popular técnica para obtener un modelo de un proceso a partir de logs del sistema original. No obstante, es posible hacer mucho más con esos logs de los…
En ocasiones, a la hora de analizar el comportamiento de un sistema, es habitual encontrarse algún tipo de problema o dificultad. Por ejemplo, queremos mejorar el estado de un proceso, desde distribuir mejor las cargas hasta evitar largas esperas, o…
A través de distintas entradas de nuestro blog, hemos analizado qué son y cómo funcionan los grafos desde una perspectiva tanto teórica como práctica. En el post Bases de datos de grafos: Análisis y ejemplos ya abordamos cómo esta tecnología…
En el mundo de la ingeniería de datos, el uso de orquestadores de tareas es clave para asegurar que la información llega en el momento adecuado y de la forma correcta. Uno de los orquestadores más extendidos, y que ya…
Una de las peculiaridades de SQL y sus muchos dialectos es que intentan añadir funcionalidades que no están presentes en ANSI SQL. Este fenómeno es tan común, que es habitual encontrar que cada dialecto implementa dichas funciones de una forma…
En los casos en los que es necesario modelar las relaciones entre entidades, es habitual recurrir un sistema de grafos. El funcionamiento de este tipo de elementos es muy simple. Su estructura se compone de entidades, representadas como nodos, y…
¿Qué son los los problemas de optimización de rutas de vehículos? El concepto de Vehicle Routing Problem (VRP) o Problema de Rutas de Vehículos es una generalización del conocido Traveling Salesman Problem (TSP) o Problema del Viajero. En concreto, el…
Recientemente, se produjo el lanzamiento oficial de la versión 3.0.0 de Airflow y, con ella, llegan varias novedades en las funcionalidades implementadas y la interfaz gráfica. En este post, abordaremos los cambios más interesantes. Versionamiento de DAGs Una de las…
La realización de test es un proceso que siempre es necesario para asegurarnos de que el comportamiento que esperamos de una aplicación es también el comportamiento real. Sin las pruebas apropiadas, subir un cambio puede provocar cierta inseguridad, ya que…