Mantenimiento Data Lake Azure + Pipelines Etl en Databricks Proyecto Max

Tenemos un DataLake montado en Azure con tres capas de explotación de datos Oro/Plata/Bronce. Dentro de la infraestructura tenemos una serie de Pipelines (ETL's) complejos que nos permiten generar una serie de informes.

Buscamos un perfil que sea capaz de resolvernos varias incidencias que se han acumulado desde que montamos el DL con una empresa externa, que nos pueda hacer mantenimiento de la infraestructura, así como modificar los flujos y pipelines montados para afinar los informes diseñados.

El perfil tendrá como funciones:
- Diseñar y mantener pipelines de datos.
- Optimizar el rendimiento de bases de datos analíticas.
- Diseñar modelos de datos y estructuras de Data Lake.
- Garantizar la calidad y trazabilidad de la información.
- Dar soporte en analítica y reporting (en la transformaciones de las capas Gold/Silver).
- Colaborar en la definición de KPIs y explotación de datos para negocio.


Como requisitos ha de tener conocimientos de:
- Diseño y desarrollo de procesos etl/elt.
- SQL avanzado.
- PostgreSQL y optimización de consultas, índices, particiones y almacenamiento.
- Modelado de datos para entornos analíticos.
- Data Lakes con arquitecturas Bronze / Silver / Gold.
- Orquestación de procesos con Airflow o herramientas similares.
- Python para procesamiento y transformación de datos.
- Experiencia con Azure y Databricks.

El perfil tiene que poder reunirse en horario de España, aunque trabaje de forma asíncrona mayormente. Imprescindible un perfil de habla hispana.