Tech Lead Data Engineering - Expert Databricks H / F
Role details
Job location
Tech stack
Job description
Nous recherchons un Tech Lead Data Engineering spécialisé Databricks pour accompagner la conception et l'industrialisation de pipelines data temps réel et batch. Vous jouerez un rôle moteur dans la définition des design patterns, l'implémentation des meilleures pratiques (Autoloader, Delta Live Tables, ingestion temps réel) et l'encadrement technique des équipes Data. Missions : En tant que Tech Lead Data Engineering spécialisé sur Databricks, vous serez chargé(e) de :
Définir et promouvoir les design patterns de data engineering autour de Databricks et Delta Lake. Concevoir et développer des pipelines de données batch et streaming (Autoloader, Structured Streaming, DLT). Garantir la qualité, la robustesse et la scalabilité des workflows d'ingestion et de transformation. Encadrer et accompagner les ingénieurs data sur les bonnes pratiques de développement et d'optimisation; Mettre en place des standards de code, tests unitaires et intégration continue (CI / CD); Optimiser la performance et les coûts des traitements Spark et Databricks. Participer à l'architecture fonctionnelle et applicative en lien avec l'architecte data / cloud. Contribuer à la roadmap technique et technologique de la data platform. Travailler étroitement avec les équipes Data Science, BI et métiers pour assurer l'adéquation des solutions.
Requirements
Expertise Databricks : Spark, Autoloader, Delta Live Tables, Delta Lake. Très bonne maîtrise de PySpark, SQL (Scala / Java en plus est un atout). Expérience en streaming temps réel et ingestion de données massives. Connaissance approfondie des design patterns Data Engineering et des architectures modernes (Lakehouse, Data Mesh). Maîtrise des pratiques CI / CD, Git, tests automatisés et déploiements industrialisés. Capacité à encadrer techniquement une équipe et à diffuser les bonnes pratiques. Compréhension des problématiques de performance, optimisation des clusters et gouvernance des données., Diplôme Bac +5 en informatique, data engineering ou équivalent. 5+ ans d'expérience en data engineering dont au moins 3 ans avec Databricks. Expérience confirmée en leadership technique et mentoring. Excellent communicant, capable de vulgariser et de convaincre sur des choix techniques. Curiosité et veille constante sur les innovations Data & Cloud.
Benefits & conditions
1er échange RH avec ou : échange sur vos souhaits et motivation, présentation de l'entreprise (durée : 30mn, Teams ou présentiel) 2ème échange avec un opérationnel (durée : 1h, Teams ou présentiel) 3ème échange avec un opérationnel (durée : 1h, Teams ou présentiel) 4ème échange avec un Partner : projection sur votre rôle au sein de Onepoint (durée : 1h, Teams ou présentiel)