Data Engineer para unirse a un proyecto estratégico de creación y migración de una plataforma de datos desde cero.

Te integrarás en un equipo orientado a la innovación, trabajando en un entorno tecnológico avanzado con arquitectura Lakehouse y tecnologías punteras en Azure.

El enfoque del rol es el diseño, desarrollo y despliegue de pipelines de datos robustos, asegurando la escalabilidad y calidad del ecosistema de datos de la compañía.

Responsabilidades del puesto

• Diseño, desarrollo, despliegue y migración de la nueva plataforma de datos.
• Construcción y mantenimiento de pipelines ETL/ELT eficientes utilizando Databricks y Azure Data Factory.
• Implementación de arquitecturas de datos modernas (Medallion Architecture) y gestión de Delta Lake Tables.
• Optimización de jobs de Spark y clusters para garantizar el rendimiento y la eficiencia de costes.
• Elaboración de documentación técnica, especificaciones de integración y guías de troubleshooting.

Requisitos

• Al menos 4 años de experiencia contrastada como Data Engineer.
• Experiencia sólida con Databricks, incluyendo el uso de UNITY CATALOG y Autologger.
• Excelentes habilidades de programación en Python (PySpark) y SQL.
• Conocimientos profundos en modelado de datos y arquitectura Medallion.
• Experiencia con buenas prácticas de desarrollo: Control de versiones y CI/CD.

Requisitos deseables

• Conocimientos en programación con Scala.
• Experiencia con otras nubes como GCP o AWS.
• Conocimientos en tecnologías de Data Streaming (Spark Streaming).
• Familiaridad con Infraestructura como Código (IaC) y Data Governance.
• Nivel fluido de inglés.

Beneficios

• 1.200€ al año en formación.
• Retribución flexible en transporte, guardería y tickets restaurante.
• Eventos, team buildings y afterworks cada dos meses.
• Patrocinamos nuestro equipo de fútbol si te animas a jugar.
• Comunidades tecnológicas internas para compartir y crecer juntos.

Políticas de seguridad

El empleado tendrá acceso a información confidencial relacionada con Capitole y el proyecto en el que está trabajando. Deberá cumplir con las políticas de seguridad y las pautas internas de la empresa y del cliente. Se le requerirá firmar un NDA.