SeniorDataengineerDatabricksH/F

Une agence multi spécialiste de plus de 40 collaborateurs qui forment des communautés d’experts sur le Cloud & DevOps, la data et la gestion de projet. Devoteam Lille accompagne ses clients dans une transformation digitale durable. A l’agence de Lille, les consultants peuvent intégrer nos clubs happiness Running, Gastronomy, Raquettes, Basket, Foot, ou encore gaming. Data Driven a pour ambition d’aider ses clients à transformer la valeur de leurs données en succès durable. Nous tirons parti à la fois de notre expertise sur les plateformes technologiques les plus innovantes et de notre connaissance métier avec la meilleure combinaison d’experts pour accompagner nos clients dans leur quête d’agilité, de compétitivité et de croissance durable. Dans le cadre d'un projet d'envergure pour l'un de nos clients majeurs du secteur retail, vos missions principales seront les suivantes : * 🛠️ Concevoir, construire et maintenir des infrastructures et des pipelines de données robustes, performants et évolutifs. * 📈 Transformer la stack legacy vers les nouveaux standards de la Data Platform en optimisant la modélisation des flux. * 🔍 Assurer la qualité, la fiabilité et la gouvernance des données de la Marketplace tout en maîtrisant la qualité du code. * 👥 Apporter votre expertise technique à l'équipe pour orienter les choix d'architecture et promouvoir les meilleures pratiques. * 🌍 Collaborer en environnement Agile au sein d'une équipe internationale et garantir un RUN de qualité selon le principe "You build it, you run it". ## Qualifications Pour ce poste, vous justifiez des compétences clés suivantes : * Expertise technique Data : Maîtrise avancée de Python/PySpark, de DBT (Data Build Tool) et de l'optimisation SQL pour la modélisation de données. * Outils & Cloud : Expérience confirmée sur Databricks (clusters, workloads Big Data) et sur l'orchestration de flux complexes avec Airflow. * Méthodologie & CI/CD : Pratique quotidienne des revues de code, de Git/GitHub, de la CI