En la primera entrada de DataOps con Visual Code y Azure Databricks realicé un step by step para conectar nuestro IDE con Azure Databricks y así poder ejecutar en local nuestros scripts de Spark (recordar que soporta varios lenguajes como pySpark, SparkQL, Scala, R). En la entrada de hoy, hablo acerca de cómo configurar losSigue leyendo «DataOps con Visual Code, Azure Databricks y Azure Data Factory»
Archivo de etiqueta: #Microsoft
DataOps con VS Code y Azure Databricks
En más de una ocasión he hablado acerca de la importancia de desarrollar con calidad nuestros proyectos, algo que resulta especialmente delicado cuando de datos se trata y es ahí, por tanto, donde cobra especial relevancia la adopción de buenas prácticas y cómo éstas se ponen en valor. En mi caso, abogo por utilizar unSigue leyendo «DataOps con VS Code y Azure Databricks»
Esto es un no parar,… En la Arquitectura de Datos, ¿dónde está el límite?
Ayer tarde tuve la oportunidad de ver el documental sobre David Bowie en Netflix. Era una de esas tardes poco movidas y en las que encadenas una película con otra y parece como si el sofá te fuera engullendo poco a poco. No me mires mal, ¡alguna vez te tienes que dar ese capricho! 😉Sigue leyendo «Esto es un no parar,… En la Arquitectura de Datos, ¿dónde está el límite?»
Azure Metrics Advisor para ayudar al equipo de IT gracias a la Inteligencia Artificial
Hace unas semanas encontré un hueco para echar un vistazo a dos componentes recientemente desplegados en Azure que implementan Inteligencia Artificial y me resultaron especialmente interesantes, pues dan cobertura a varios casos de uso que llevaba tiempo tratando de optimizar. El primero fue Azure Cognitive Servicies Spatial Analysis y el segundo, del que trataré enSigue leyendo «Azure Metrics Advisor para ayudar al equipo de IT gracias a la Inteligencia Artificial»
Construyendo Cubos en Analysis Services sobre Azure
El otro día me plantearon un pequeño desafío, migrar cubos multidimensionales On premise a Azure. Al principio podía parecer sencillo, de hecho pequé de optimista, pero según fui revisando mis apuntes y demás, fui dándome cuenta de que el proceso se complicaba por momentos, pero claro… ¡con lo que me gusta remangarme, no lo podíaSigue leyendo «Construyendo Cubos en Analysis Services sobre Azure»
Data Mesh, ¿hacia un nuevo paradigma en Datos?
En el mundo de los datos, cada poco tiempo se lanzan nuevas palabras al ruedo y parece que se acerca una revolución. Ya pasó hace tiempo atrás con el Big Data (que empezó como 3V y ya va por nV), el Near Real Time, el Real Real Time y desde hace unos años, resuenan conSigue leyendo «Data Mesh, ¿hacia un nuevo paradigma en Datos?»
Azure Synapse SQL Dedicated Pool, subiendo a siguiente nivel
El motor SQL siempre ha estado presente en el componente central de la arquitectura de Datos de Microsoft, inicialmente como Azure SQL Data Warehouse y ahora bajo el nombre de Azure Synapse Workspace. Pero en este tiempo han existido cambios sobre él hasta convertirlo en lo que hoy es. Veamos qué presenta actualmente el PoolSigue leyendo «Azure Synapse SQL Dedicated Pool, subiendo a siguiente nivel»
Azure Digital Twins, aterrizando el concepto
Hace unos días puede asistir a un café virtual con el equipo de Microsoft España donde se trataron temas de Inteligencia Artificial, IoT, Digital Twins y el tan de moda Metaverso. Si bien todas las las tecnologías comentadas me parecen alucinantes, lo mejor es que ninguna es excluyente. Al contrario, todas se pueden abordar aSigue leyendo «Azure Digital Twins, aterrizando el concepto»
Azure Synapse Analytics como Business Data Core
Existen muchos tipos de arquitecturas de datos, ya estén alineadas con el BI tradicional o se hayan movido hacia el real time incluyendo capacidades de Streaming Analytics o incluso evolucionado a Modern Data Warehouse. Sin embargo gracias a soluciones como Databricks, Snowflake, AWS Redshift, nació un nuevo concepto de arquitectura, el de Data Lakehouse queSigue leyendo «Azure Synapse Analytics como Business Data Core»
Deconstruyendo Azure Storage Account – Keys, SAS, Service Endpoints
En las próximas entradas voy a profundizar en un componente de Azure que día a día va cobrando mayor importancia, ya que permite configurar el tipo de almacenamiento, tipo de información a almacenar, seguridad y todo a unos costes muy contenidos. Estoy hablando de Azure Storage Account. Como no quiero hacer una primera entrada muySigue leyendo «Deconstruyendo Azure Storage Account – Keys, SAS, Service Endpoints»
Alb3rto Alonso 