Replicando el Data Pipeline de Zendesk desde AWS a Azure, parte I

Hace unos días leí el caso de éxito de arquitectura de datos de la empresa Zendesk sobre AWS y decidí hacer un ejercicio de revisión y adaptación del mismo en Azure. En esta primera entrada, el scope es el relativo a la para del Data Lake Pipeline marcado en rojo. Lo primero es crear losSigue leyendo «Replicando el Data Pipeline de Zendesk desde AWS a Azure, parte I»

¡Bendita condena la mía!

Suelo repetir habitualmente que es una buena práctica enfrentar desafíos para continuar mejorándote. En mi caso, tengo la suerte de disponer de esa inercia que me «obliga» a no rechazar ningún reto. La semana pasada por ejemplo, durante algún que otro rato libre, estuve analizando el pipeline de procesamiento de datos batch del caso deSigue leyendo «¡Bendita condena la mía!»

DataOps con Visual Code, Azure Databricks y Azure Data Factory

En la primera entrada de DataOps con Visual Code y Azure Databricks realicé un step by step para conectar nuestro IDE con Azure Databricks y así poder ejecutar en local nuestros scripts de Spark (recordar que soporta varios lenguajes como pySpark, SparkQL, Scala, R). En la entrada de hoy, hablo acerca de cómo configurar losSigue leyendo «DataOps con Visual Code, Azure Databricks y Azure Data Factory»

DataOps con VS Code y Azure Databricks

En más de una ocasión he hablado acerca de la importancia de desarrollar con calidad nuestros proyectos, algo que resulta especialmente delicado cuando de datos se trata y es ahí, por tanto, donde cobra especial relevancia la adopción de buenas prácticas y cómo éstas se ponen en valor. En mi caso, abogo por utilizar unSigue leyendo «DataOps con VS Code y Azure Databricks»

Esto es un no parar,… En la Arquitectura de Datos, ¿dónde está el límite?

Ayer tarde tuve la oportunidad de ver el documental sobre David Bowie en Netflix. Era una de esas tardes poco movidas y en las que encadenas una película con otra y parece como si el sofá te fuera engullendo poco a poco. No me mires mal, ¡alguna vez te tienes que dar ese capricho! 😉Sigue leyendo «Esto es un no parar,… En la Arquitectura de Datos, ¿dónde está el límite?»

Azure Metrics Advisor para ayudar al equipo de IT gracias a la Inteligencia Artificial

Hace unas semanas encontré un hueco para echar un vistazo a dos componentes recientemente desplegados en Azure que implementan Inteligencia Artificial y me resultaron especialmente interesantes, pues dan cobertura a varios casos de uso que llevaba tiempo tratando de optimizar. El primero fue Azure Cognitive Servicies Spatial Analysis y el segundo, del que trataré enSigue leyendo «Azure Metrics Advisor para ayudar al equipo de IT gracias a la Inteligencia Artificial»

Construyendo Cubos en Analysis Services sobre Azure

El otro día me plantearon un pequeño desafío, migrar cubos multidimensionales On premise a Azure. Al principio podía parecer sencillo, de hecho pequé de optimista, pero según fui revisando mis apuntes y demás, fui dándome cuenta de que el proceso se complicaba por momentos, pero claro… ¡con lo que me gusta remangarme, no lo podíaSigue leyendo «Construyendo Cubos en Analysis Services sobre Azure»

Data Mesh, ¿hacia un nuevo paradigma en Datos?

En el mundo de los datos, cada poco tiempo se lanzan nuevas palabras al ruedo y parece que se acerca una revolución. Ya pasó hace tiempo atrás con el Big Data (que empezó como 3V y ya va por nV), el Near Real Time, el Real Real Time y desde hace unos años, resuenan conSigue leyendo «Data Mesh, ¿hacia un nuevo paradigma en Datos?»

Azure Synapse SQL Dedicated Pool, subiendo a siguiente nivel

El motor SQL siempre ha estado presente en el componente central de la arquitectura de Datos de Microsoft, inicialmente como Azure SQL Data Warehouse y ahora bajo el nombre de Azure Synapse Workspace. Pero en este tiempo han existido cambios sobre él hasta convertirlo en lo que hoy es. Veamos qué presenta actualmente el PoolSigue leyendo «Azure Synapse SQL Dedicated Pool, subiendo a siguiente nivel»

Azure Digital Twins, aterrizando el concepto

Hace unos días puede asistir a un café virtual con el equipo de Microsoft España donde se trataron temas de Inteligencia Artificial, IoT, Digital Twins y el tan de moda Metaverso. Si bien todas las las tecnologías comentadas me parecen alucinantes, lo mejor es que ninguna es excluyente. Al contrario, todas se pueden abordar aSigue leyendo «Azure Digital Twins, aterrizando el concepto»