Dans le cadre du plan de transformation DATA de notre Client, notre client développe des applications et plateformes DATA pour rendre nos métiers (pilotage, marketing, commerce, etc.) autonomes dans l?analyse de leurs données et KPI.
Les infrastructures et projets incluent :
AWS, GitLab, Terraform, DBT, Snowflake, Python, Scala, Spark, PowerBI, AI/GenAI
Architectures Big Data sophistiquées pour ingérer plus de 100 par jour (Datalake, Event-Driven, Streaming, etc.)
Exemples de projets :
Chatbot AI
Socle vidéo, navigation et calcul des audiences
Recommandation de programmes via IA
Feature Store et modernisation des flux financiers
Plateformes CRM et partage de données partenaires
Kubernetes et applications de data self-service
MissionsEn tant que Data Engineer, vous serez en charge de :
Concevoir, développer et maintenir des pipelines de données scalables et performants (ingestion, traitement et stockage de données massives).
Développer des architectures Big Data sur AWS (S3, EMR, Lambda, Kinesis, Batch?), Snowflake et Spark.
Développer en Scala et Python pour le traitement massif des données.
Automatiser les workflows et orchestrer les pipelines avec Airflow et DBT.
Concevoir et exposer des APIs customer-facing performantes.
Optimiser les performances et garantir la scalabilité pour gérer un volume important d?utilisateurs.
Collaborer avec les équipes Data Science, Produit et DevOps pour une intégration fluide.
Profil candidat:
Profil recherchéExpérience : minimum 5 ans dans un rôle similaire, idéalement dans un environnement Big Data cloud.
Compétences techniques :
Scala, Spark, Python
AWS (Kinesis, S3, EMR, Lambda, Batch?)
Snowflake, SQL
Terraform, GitLab CI/CD
Airflow, DBT
Connaissance des systèmes temps réel et du streaming de données
GenAI (fortement appréciée)
Méthodologies : Agile / JIRA
Soft skills : autonome, curieux, communicatif, esprit scientifique
Langues : anglais courant