Data Engineer plateforme IA (GCP / Cloud de confiance)

À propos du poste

Dans sa pratique Data & IA, Magellan construit les fondations data robustes nécessaires aux projets d'intelligence artificielle de ses clients grands comptes. Elle recherche un Data Engineer (H/F) pour bâtir ces plateformes et préparer les données aux cas d'usage IA. Le poste est basé à Issy-les-Moulineaux, en temps plein.

Missions principales

• Concevoir et industrialiser des pipelines de données batch et streaming, en priorité sur GCP.
• Préparer les données pour l'IA : ingestion documentaire, découpage, embeddings, bases vectorielles.
• Déployer l'infrastructure as code (Terraform) et orchestrer les traitements (Airflow / Cloud Composer).
• Garantir la gouvernance, la qualité et la sécurité (catalogue, lignage, droits).
• Optimiser les performances et piloter les coûts (FinOps).

Profil recherché

• Consultant confirmé à senior, habitué des grands comptes et de la mise en production (au-delà du POC).
• Expérience cloud confirmée sur GCP (BigQuery, Dataflow) ou équivalent.
• Les plus : expérience S3NS ou autre cloud de confiance, dbt, Databricks, pipelines LLM/RAG, outils de gouvernance (OpenMetadata).

Compétences requises

• Maîtrise avancée de Python et SQL.
• Traitement de données avec Spark / PySpark.
• Orchestration Airflow ou Cloud Composer.
• Terraform, CI/CD, Docker et Kubernetes.