En la primera entrada de Unity Catalog describí brevemente qué es Unity Catalog para saltar a la configuración de nuestro primer Metastore. Ahora, vamos a profundizar en los aspecto de gobernanza, comenzando por la creación de grupos. Como el primer schema que creamos es production, vamos a crear un grupo específico para ese schema. ¡Veamos!Sigue leyendo «Unity Catalog en Azure Databricks: gobernando el Lakehouse»
Archivo del autor: alb3rtoalonso
Unity Catalog en Azure Databricks: creando nuestro primer metastore
Hace tiempo que tenía ganas de hacer un artículo acerca de Unity Catalog profundizando en elementos como Metastore, Catalog, Schema,… Databricks a día de hoy es una de las piezas clave en el desarrollo de soluciones de Analítica Avanzada y justo por eso es por lo que este artículo cobra especial valor. Desde que haceSigue leyendo «Unity Catalog en Azure Databricks: creando nuestro primer metastore»
¡Cosas chulas que llegan!
En este primer trimestre de 2023 me están sucediendo muchas «cosas» chulas y hay ocasiones en las que no sabes si se debe a la casualidad o si por contra, se debe a todo el trabajo que hay por detrás. Sea como sea, en estos días toca recoger 😉 Pues entre esas «cosas» chulas, laSigue leyendo «¡Cosas chulas que llegan!»
A veces, parece que «alguien» nos hace un guiño
La verdad es que no sé por donde empezar., así que comenzaré relatando lo que sucedió el pasado lunes 13 de febrero. Eran cerca de las cuatro y media de la tarde y me encontraba en una sala de actividades de una Residencia para Personas Mayores de la localidad de Alcobendas. Estaba allí porque ibaSigue leyendo «A veces, parece que «alguien» nos hace un guiño»
Change Data Capture en Azure SQL Database y Azure Data Factory
Azure SQL Database Change Data Capture o CDC es una capacidad que permite a los sistema de bases de datos (SQL y NoSQL) como Azure SQL Database capturar aquellos registros que han sufrido modificaciones (lo que son inserciones, borrados y actualizaciones). Dicha cualidad se apoya en elementos como la metadata y tablas de control deSigue leyendo «Change Data Capture en Azure SQL Database y Azure Data Factory»
Cómo usar Try-Catch en Databricks SQL Notebooks
El control de los procesos es una buena práctica de datos ya que te permite identificar aquellos posibles puntos de fallo en tus scripts durante el tiempo de ejecución. Sin embargo, para los que habitualmente se pegan con los Notebooks de SQL en Databricks, vemos que no es posible incluir bloques de captura de erroresSigue leyendo «Cómo usar Try-Catch en Databricks SQL Notebooks»
Dispara tus pipelines de Azure Data Factory mediante eventos
Azure Data Factory hace tiempo que dejó de ser una simple ETL para convertirse en un genial orquestador de procesos de datos. Es más, para mi que he tenido la oportunidad de trabajar con multitud de herramientas similares, creo que Data Factory hoy en día está, sin duda, en el top 3. Uno de losSigue leyendo «Dispara tus pipelines de Azure Data Factory mediante eventos»
A veces, no es aconsejable mezclar peras con manzanas
Esta semana, tratando de crear un pipeline de Azure Data Factory que ejecuta una actividad de Azure Databricks, que levanta un clúster pasando un conjunto de parámetros para la configuración y, además, utilizando el fichero dh-init.sh para completar la instalación de un conjunto de librerías desde la zona de configuración avanzada, he sufrido un montónSigue leyendo «A veces, no es aconsejable mezclar peras con manzanas»
Probando un ordenador con ruedas
No son ni las cinco de la mañana y tengo los ojos como platos. Desde pequeño me viene pasando que, si al día siguiente tengo algún plan genial, no soy capaz de dormir. Así que no me ha quedado otra que levantarme y ponerme a escribir esta entrada para, al menos, aprovechar que estoy enSigue leyendo «Probando un ordenador con ruedas»
Mis amigos «digitales», de conectar a conocer y colaborar
Fue a raíz de la pandemia cuando el uso de herramientas como Skype, Teams, Zoom y otras, saltó desde el mundo empresarial al personal. Así que, durante esos meses era frecuente encontrarte tomando un café virtual con tus amigos alguna tarde que otra del fin de semana, mientras que sufrías por no montar conversaciones paralelasSigue leyendo «Mis amigos «digitales», de conectar a conocer y colaborar»
Alb3rto Alonso 