Spécialiste en ingénierie des données

Job description

Description du poste Relevant du Directeur du développement, vous serez responsable de: Concevoir, développer et maintenir des pipelines de données automatisés (Apache Airflow, Bash) Implémenter des solutions de traitement avec Python, PySpark et travailler dans l’environnement Databricks Intégrer des données provenant de sources variées (API, bases relationnelles, fichiers) dans des environnements infonuagiques Assurer la qualité, la gouvernance et la sécurité des données et prendre en charge les projets liés (catalogage, monitoring, audit) Fait figure de point de repère organisationnel dans son secteur d’activités et collabore avec les équipes TI et affaires pour comprendre les besoins, proposer des solutions adaptées et produire des jeux de données fiables et performants Documenter les processus, architectures et bonnes pratiques Participer aux revues de code, à l’amélioration continue et à l’intégration continue (CI/CD) Profil: Connaissance des architectures Data Lake, couches sémantiques et principes de gouvernance des données Solide expérience en Python (POO, bibliothèques de traitement), PySpark et concepts de traitement distribué Expérience pratique avec Databricks (workflo...