Data Engineer Cloud AWS – Snowflake – Terraform

À propos du poste

La filière SI d'un grand groupe mutualiste a mis en place une plateforme data basée sur AWS et Snowflake, déjà utilisée par plusieurs directions métiers. Pour étendre le périmètre métier de la plateforme, le groupe renforce son équipe technique à Lyon. Le poste est proposé en CDI ou en freelance, avec un salaire de 40 k à 70 k € par an.

Missions principales

• Concevoir, développer et maintenir des pipelines de données scalables sur AWS et Snowflake, et optimiser les processus d'intégration et de traitement
• Garantir une gestion des données sécurisée et conforme, et documenter les processus et architectures
• Exploiter les services AWS (Lambda, Step Functions, Fargate, Glue, Spark, EMR) et créer des pipelines CI/CD et superviser le dépôt Git
• Concevoir des solutions Snowflake multi-cluster, optimiser les requêtes et les processus ETL/ELT, et développer des outils personnalisés (Streamlit, conteneurs)
• Superviser l'intégration de données structurées et non structurées, leur nettoyage, validation et sécurisation
• Assurer la conformité des solutions avec les politiques de sécurité et participer à l'amélioration continue et à la veille technologique

Profil recherché

• Expérience avec les services AWS (EC2, S3, Lambda, Step Functions, Glue, etc.)
• Maîtrise de Snowflake et de ses fonctionnalités avancées (multi-cluster, partage sécurisé, optimisation des charges)
• Capacité à concevoir et optimiser des pipelines de données scalables et sécurisés
• Capacité à collaborer avec des équipes techniques et métiers

Compétences requises

• Python et SQL
• Outils CI/CD et Terraform
• Gestion de versions Git et conteneurisation Docker
• Administration, sécurité et conformité des infrastructures cloud et données