Data engineer
pasiona · Barcelona, Catalonia, ES
Descripción del puesto / Funciones Buscamos un/a Data Engineer con experiencia en entornos cloud para el desarrollo, despliegue y mantenimiento de pipelines...
Job description
Descripción del puesto / Funciones Buscamos un/a Data Engineer con experiencia en entornos cloud para el desarrollo, despliegue y mantenimiento de pipelines de datos (ETL/ELT) en Azure y Databricks. Formarás parte de un equipo de datos colaborativo, trabajando junto a arquitectos, analistas y científicos de datos en la construcción de soluciones robustas, escalables y orientadas a la calidad del dato. Funciones: - Diseñar, desarrollar y mantener pipelines de datos (ETL/ELT) en entornos cloud. - Trabajar con plataformas de datos basadas en Azure y Databricks. - Diseñar y construir data marts anonimizados dentro de la plataforma corporativa de datos. - Implementar procesos de ingesta, transformación y almacenamiento de datos. - Optimizar jobs y clusters en Apache Spark. - Gestionar workflows y jobs en Databricks. - Trabajar con arquitecturas Lakehouse y medallion architecture. - Diseñar modelos de datos eficientes y escalables. - Implementar procesos de anonimización de datos garantizando calidad y cumplimiento. - Asegurar la calidad, consistencia y fiabilidad del dato. - Generar documentación técnica y evidencias de implementación. - Colaborar con equipos de datos (arquitectos, anal...