Ingeniería de datos en Microsoft Azure

Contenido

Módulo 1: Explorar las opciones de computación y almacenamiento para las cargas de trabajo de ingeniería de datos

• Introducción a Azure Synapse Analytics
• Describir Azure Databricks
• Introducción al almacenamiento de Azure Data Lake
• Describir la arquitectura de Delta Lake
• Trabajar con flujos de datos utilizando Azure Stream Analytics

Módulo 2: Diseñar e implementar la capa de servicio

• Diseñar un esquema multidimensional para optimizar las cargas de trabajo analíticas
• Transformación sin código a escala con Azure Data Factory
• Rellenar dimensiones que cambian lentamente en los pipelines de Azure Synapse Analytics

Módulo 3: Consideraciones de ingeniería de datos para archivos de origen

• Diseñar un almacén de datos moderno utilizando Azure Synapse Analytics
• Asegurar un almacén de datos en Azure Synapse Analytics

Módulo 4: Ejecutar consultas interactivas utilizando los pools SQL sin servidor de Azure Synapse Analytics

• Explorar capacidades de los pools SQL sin servidor de Azure Synapse
• Consultar de datos en el lago utilizando pools SQL sin servidor de Azure Synapse
• Crear objetos de metadatos en pools SQL sin servidor de Azure Synapse
• Proteger datos y gestionar usuarios en pools SQL sin servidor de Azure Synapse

Módulo 5: Explorar, transformar y cargar datos en el almacén de datos utilizando Apache Spark

• Comprender la ingeniería de big data con Apache Spark en Azure Synapse Analytics
• Ingesta de datos con notebooks Apache Spark en Azure Synapse Analytics
• Transformar datos con DataFrames en Apache Spark Pools en Azure Synapse Analytics
• Integrar pools de SQL y Apache Spark en Azure Synapse Analytics

Módulo 6: Exploración y transformación de datos en Azure Databricks

• Describir Azure Databricks
• Leer y escribir datos en Azure Databricks
• Trabajar con DataFrames en Azure Databricks
• Trabajar con métodos avanzados de DataFrames en Azure Databricks

Módulo 7: Ingerir y cargar datos en el almacén de datos

• Utilizar las mejores prácticas de carga de datos en Azure Synapse Analytics
• Ingesta a escala de petabytes con Azure Data Factory

Módulo 8: Transformar Datos con Azure Data Factory o Azure Synapse Pipelines

• Integración de datos con Azure Data Factory o Azure Synapse Pipelines
• Transformación sin código a escala con Azure Data Factory o Azure Synapse Pipelines

Módulo 9: Orquestar el movimiento y transformación de datos en Azure Synapse Pipelines

• Orquestar el movimiento y la transformación de datos en Azure Data Factory

Módulo 10: Optimizar el rendimiento de las consultas con pools SQL dedicados en Azure Synapse

• Optimizar el rendimiento de las consultas del almacén de datos en Azure Synapse Analytics
• Comprender funciones de programador de almacén de datos de Azure Synapse Analytics

Módulo 11: Analizar y Optimizar el Almacenamiento del Almacén de Datos

• Analizar y optimizar almacenamiento del almacén de datos en Azure Synapse Analytics

Módulo 12: Apoyar el Hybrid Transactional Analytical Processing (HTAP) con Azure Synapse Link

• Diseñar un procesamiento transaccional y analítico híbrido utilizando Azure Synapse Analytics
• Configurar Azure Synapse Link con Azure Cosmos DB
• Consultar Azure Cosmos DB con pools de Apache Spark
• Consultar Azure Cosmos DB con pools SQL sin servidor

Módulo 13: Seguridad de extremo a extremo con Azure Synapse Analytics

• Asegurar un almacén de datos en Azure Synapse Analytics
• Configurar y gestionar los secretos en Azure Key Vault
• Implementar controles de cumplimiento para los datos sensibles

Módulo 14: Procesamiento de flujos en tiempo real con Stream Analytics

• Habilitar la mensajería fiable para aplicaciones de Big Data utilizando Azure Event Hubs
• Trabajar con flujos de datos utilizando Azure Stream Analytics
• Ingerir flujos de datos con Azure Stream Analytics

Módulo 15: Crear una solución de procesamiento de flujos con Event Hubs y Azure Databricks

• Procesar datos de streaming con el streaming estructurado de Azure Databricks

Módulo 16: Construir informes utilizando la integración de Power BI con Azure Synapse Analytics

• Crear informes con Power BI utilizando su integración con Azure Synapse Analytics

Módulo 17: Realizar procesos de aprendizaje automático integrados en Azure Synapse Analytics

• Utilizar el proceso de aprendizaje automático integrado en Azure Synapse Analytics