Lead Data Engineer Python (H/F)

DGTL / Signe + est le facilitateur pour tous les acteurs qui recherchent des ressources ou des missions DATA.

Spécialiste du marché Data et BI, nous intervenons dans toute la France comme à l'étranger ; en sous-traitance, pré-embauche, recrutement, portage commercial, portage salarial, etc.

Depuis 2018, nous accompagnons nos clients avec proximité, juste prix et préoccupation éthique de tous les instants.

https://www.dgtl-performance.com

Le poste :

Nous recherchons un Lead Data Engineer Python pour rejoindre une mission stratégique au sein d'un grand groupe international du secteur de la restauration et des services. Vous piloterez le développement de solutions data robustes et scalables, en combinant expertise technique approfondie et leadership d'équipe.

Ce rôle est hautement opérationnel : vous contribuerez directement au développement des pipelines de données, prendrez des décisions techniques structurantes, garantirez la qualité du code et accompagnerez techniquement vos pairs. Vous évoluez dans un environnement où rigueur, performance et innovation sont au cœur des enjeux.

Le projet s'inscrit dans une démarche de modernisation des infrastructures data et analytics. Vous serez au carrefour entre les besoins métier (ingestion, transformation, traitement massif de données) et les exigences techniques d'une plateforme data d'entreprise, en appliquant les meilleures pratiques du Software Engineering et en favorisant la scalabilité des solutions.

Responsabilités :

• Concevoir, développer et maintenir des data pipelines robustes et performants en Python
• Manipuler, nettoyer, transformer et enrichir les données avec Pandas, NumPy et les DataFrames
• Développer des composants Python réutilisables, maintenables et testables, en respectant les principes du Clean Code
• Définir les solutions techniques optimales pour les phases d'ingestion, transformation et traitement des données
• Garantir la qualité, la fiabilité et la performance des pipelines, notamment via la validation des données et la gestion de la data quality
• Mettre en œuvre les bonnes pratiques de Software Engineering : modularité, code review rigoureuse, tests unitaires et d'intégration
• Analyser et résoudre les problématiques de performance et de scalabilité
• Assumer le leadership technique sur votre périmètre, piloter les choix architecturaux et accompagner les Data Engineers juniors
• Collaborer étroitement avec les Product Owners, Data Analysts, Data Scientists et équipes Engineering
• Identifier proactivement les opportunités d'optimisation et d'automatisation des processus data

Télétravail : Télétravail total

Profil recherché :

Indispensables :

• Python niveau avancé, avec maîtrise démontrée de la data engineering (au moins 5-6 ans d'expérience en production)
• Expertise approfondie de Pandas et NumPy, manipulation complexe de DataFrames
• Conception et développement de data pipelines, expérience en data ingestion et transformation à grande échelle
• Solides connaissances en SQL (requêtes complexes, optimisation, tuning)
• Tests unitaires et tests d'intégration (frameworks Python pertinents)
• Maîtrise du Clean Code, refactoring et bonnes pratiques de Software Engineering (SOLID, DRY, etc.)
• Versioning (Git) et pratiques CI/CD, compréhension des workflows de déploiement
• Data quality et validation des données, approche méthodique de la gestion de la fiabilité des données
• Optimisation des performances et capacité à diagnostiquer et résoudre les goulots d'étranglement
• Capacités de leadership technique : ownership, décisions architecturales, code reviews constructives, mentorat
• Autonomie, rigueur et communication technique claire

Fortement appréciés :

• Databricks et environnements de traitement distribué
• Microsoft Azure (Data Factory, Data Lake, DevOps)
• PySpark et Spark (traitement massif de données)
• Delta Lake et concepts du Lakehouse
• DBT (data build tool) pour la transformation de données
• Expérience en environnements Agile/Scrum et méthodologies collaboratives
• Sensibilité aux enjeux de gouvernance data et de scalabilité d'entreprise