Lead Data Engineer / Expert Databricks – Services Financiers

À propos du poste

Dans le cadre d’un programme stratégique de transformation data pour un grand compte du secteur financier, Sopra Steria recherche à Nantes un Lead Data Engineer / Expert Databricks. Vous intégrerez le centre de compétences Data & IA et participerez à la migration d’architectures legacy vers une plateforme moderne basée sur Databricks et Azure.

Missions principales

• Concevoir des architectures data cloud (Azure & Databricks) adaptées aux besoins du client.
• Développer et industrialiser des pipelines data batch et streaming avec Spark, PySpark ou Scala.
• Optimiser les traitements en termes de performance, coûts et scalabilité.
• Mettre en place les bonnes pratiques DevOps (CI/CD, qualité des données, sécurité).
• Accompagner les équipes client dans la montée en compétences, le coaching et le transfert de connaissances.
• Participer aux choix technologiques et être acteur clé de la data factory de plus de 200 ingénieurs.

Profil recherché

• Diplômé(e) d’une école d’ingénieurs ou formation équivalente.
• Minimum 3 ans d’expérience sur un poste similaire en data (Big Data, BI).
• Expérience significative sur Databricks (au moins 2 projets) et maîtrise de Spark (PySpark ou Scala).
• Très bon niveau en SQL et Python, expertise en streaming.
• Connaissances en Machine Learning / MLOps et pratiques DevOps (Git, CI/CD).
• Certification Databricks requise, connaissance de Delta Lake, Unity Catalog, DQX.
• Autonomie, rigueur et bon relationnel.

Compétences requises

• Databricks
• Azure
• Spark / PySpark / Scala
• SQL
• Python
• Streaming
• Machine Learning & MLOps
• Git & CI/CD
• Delta Lake, Unity Catalog, DQX

Ce que nous offrons

• Intégrer un centre d’expertise Data & IA en forte croissance.
• Travailler sur des projets à fort impact et à grande échelle.
• Parcours de formation et certifications avec les leaders du cloud et de la data.
• Possibilités d’évolution (Lead dev, Tech lead, Architecte, Référent offre).
• Accord télétravail jusqu’à 2 jours par semaine.