Azure Data Factory es un muy buen orquestador como ya venimos viendo desde hace tiempo. Son muchas las entradas donde a lo largo de estos años he hablado acerca de él, por lo que hoy vamos a sumar un nuevo artículo al conjunto. En esta ocasión quiero describir cómo configurar la actividad de copia, siendoSigue leyendo «Copy Activity de ADF para Delta Lake»
Archivo de etiqueta: #Cloud
Pon siempre un identificador en tus tablas y a ser posible que sea PK
Que el propietario del dominio tenga cada vez más peso en las nuevas aproximaciones de datos como Data Mesh está genial porque él mismo comienza a «sufrir», en primera persona, los errores de diseño de sus tablas transaccionales al moverse del operacional a la analítica. Suele suceder que, en la mayor parte de soluciones deSigue leyendo «Pon siempre un identificador en tus tablas y a ser posible que sea PK»
Fabric, el todo en uno de Microsoft
Hace tan sólo unas semanas que se lanzó la solución de datos integral de Microsoft y digo «solución» porque se trata de un SaaS. Con Fabric las organizaciones se pueden ir olvidando de la infraestructura, ni tan siquiera como código. Hay que decir adiós a Terraform, ARM, Bíceps,… y quizás, también irnos despidiendo de nuestrosSigue leyendo «Fabric, el todo en uno de Microsoft»
Cómo usar el Filtro en Azure Data Factory
Desde hace tiempo vengo escribiendo acerca de Azure Databricks, pero en esta ocasión voy a escribir un breve artículo acerca de cómo emplear la actividad de filtro en un pipeline de datos de Azure Data Factory. Son muchas la ocasiones en las que debemos realizar diferentes ajustes en los flujos de datos y por ello,Sigue leyendo «Cómo usar el Filtro en Azure Data Factory»
Delta Sharing, un «must» para tu solución de analítica avanzada
Cada vez que avanzo un poco más con Unity Catalog, más me gusta y sobre todo entiendo el motivo por el cual Databricks se está volcando en ello. Si hace unas semanas hablé de la gobernanza y configuración de un metastore, hoy quiero continuar con Delta Sharing que no es otra cosa que un protocoloSigue leyendo «Delta Sharing, un «must» para tu solución de analítica avanzada»
Data Contracts para una «descentralización comprometida»
Si hace un par de semanas pude participar en un Hands-on con Fivetran y DBT, la semana pasada he podido asistir a una sesión con Piethein Strengholt, actual CDO de Microsoft en Holanda, donde nos ha presentado su particular visión acerca de Data Contracts en arquitecturas de datos distribuidas. Como ya he comentado en másSigue leyendo «Data Contracts para una «descentralización comprometida»»
¡Quien rompe paga!
La frase que da título a la entrada era muy frecuente en mis tiempo mozos,… o al menos así la recuerdo y justo fruto de estas warning quizás sea por lo que muchas personas no suelen arriesgarse a salir de la zona de confort. No sea que la líe y encima tenga que soltar unosSigue leyendo «¡Quien rompe paga!»
Veto a ChatGPT, ¿estamos locos?
Hace unos días saltó la noticia acerca de que Italia iba a prohibir el uso de ChatGPT por presuntos problemas con respecto a la normativa GDPR, y como no, el contagio a otros países del viejo continente cabía esperarse. Pues así fue, España también se está planteando el veto a la solución tecnológica del momento.Sigue leyendo «Veto a ChatGPT, ¿estamos locos?»
Data Linaje con Unity Catalog de Databricks
Como ya mencioné en la anterior entrada, donde hice un breve resumen del Lakehouse Day de Databricks en Madrid, la incorporación de Unity Catalog suma y mucho a la hora de tomar la decisión sobre cual es la mejor herramienta con la que construir la solución de datos corporativa. Del mismo modo mencioné que, paraSigue leyendo «Data Linaje con Unity Catalog de Databricks»
Simple, Open Source y Multicloud
Hace unas semanas estuve en el Lakehouse de Databricks que se celebró en Madrid y entre las muchas cosas que aprendí, me quedo con la frase del título. Haz las cosas de un modo Simple, apuesta por proyectos Open Source y si puedes, sé Multicloud. Estos tres aspectos se mencionaron en multitud de ocasiones duranteSigue leyendo «Simple, Open Source y Multicloud»
Alb3rto Alonso 