Au sein de notre Practice Data & IA, nous construisons les fondations data robustes indispensables aux projets d'Intelligence Artificielle de nos clients grands comptes. Nous recherchons un Data Engineer (H/F) pour bâtir ces plateformes et préparer les données pour des cas d'usage IA.
💡 VOS MISSIONS
- Concevoir et industrialiser des pipelines de données (batch et streaming), en priorité sur GCP.
- Préparer les données pour l'IA : ingestion documentaire, découpage, embeddings, bases vectorielles.
- Déployer l'infrastructure as code (Terraform) et orchestrer les traitements (Airflow / Cloud Composer).
- Garantir la gouvernance, la qualité et la sécurité (catalogue, lignage, droits).
- Optimiser les performances et piloter les coûts (FinOps).
Consultant confirmé à senior, vous avez l'habitude des grands comptes et de la mise en production (au-delà du POC).
Compétences indispensables :
- Maîtrise avancée de Python et SQL.
- Expérience cloud confirmée sur GCP (BigQuery, Dataflow) ou équivalent.
- Traitement de données avec Spark / PySpark.
- Orchestration (Airflow ou Cloud Composer).
- Pratique de Terraform, CI/CD et Docker/Kubernetes.
Les plus : Expérience S3NS (ou autre cloud de confiance), dbt, Databricks, pipelines pour cas d'usage LLM/RAG, outils de gouvernance (OpenMetadata).
En rejoignant Magellan, vous intégrerez des équipes pluridisciplinaires et contribuerez à des projets concrets, au cœur des grandes transformations : IA générative, plateformes intelligentes, impératifs sociaux et environnementaux, etc.
Ce que Magellan vous garantit : une expérience professionnelle humaine, apprenante et épanouissante