Diseñar, desplegar y operar plataformas de datos escalables y seguras (Data Warehouse/ Data Lake/ Lakehouse), con pipelines batch y streaming, orquestación, repositorio de código y gestión de secretos y ejeccuón de contenedores.

Tareas

1. Arquitectura y construcción de infraestructura de datos

• Definir y desplegar Data Lake / Data Warehouse / Lakehouse (por ejemplo: S3, Redshift/BigQuery/ClickHouse)


• Modelado de datos.

2. Más allá del ETL/DAG

• Entender y configurar los sistemas de ejecucción detrás de Airflow


• Integración con Data Lake/DWH, orquestador, repositorio Git, gestión de secretos (AWS Secrets Manager)

3. Despliegue de infraestructura (DevOps)

• Infra as Code (CI/CD)

4. Contenedores y ejeccución

• Dockerización de jobs/algoritmos (Docke...