Symbiose.
Data engineer

Data Engineer Scala / Java confirmé(e) - Data Platform (H/F) - Freelance

Collective.work Lyon Indépendant publiée aujourd'hui

Le poste

Taux journalier (TJM): 450 Pour l'un de nos clients, un grand groupe international de la distribution, nous recherchons un(e) Data Engineer pour renforcer sa Data Platform. Cette plateforme conçoit des services digitaux centrés sur la donnée. Elle fournit aux équipes des données fiables, accessibles via API, et accélère les traitements analytiques. Vous rejoindrez une équipe existante d'une dizaine de personnes (développeurs, Tech Lead, Product Owners, chef de projet), en remplacement d'un membre de l'équipe. Elle travaille en Scrum sur 4 à 5 projets à forte criticité, centrés sur les référentiels de données. VOS MISSIONS * Concevoir, développer et maintenir des pipelines de données complexes et robustes sur la Data Platform * Développer des traitements en streaming temps réel * Orchestrer et transformer la donnée avec DBT * Industrialiser et automatiser les workflows data via la CI/CD * Concevoir des solutions intégrant de l'IA générative et des agents IA connectés aux flux de données * Partager vos connaissances avec l'équipe et contribuer à l'amélioration continue des pratiques Indispensable * Solide expérience de développement en Scala et/ou Java, avec une bonne compréhension de la programmation fonctionnelle * Expérience confirmée du streaming de données avec Apache Kafka * Maîtrise de DBT pour l'orchestration et la transformation des pipelines * Aisance sur l'écosystème Google Cloud Platform : BigQuery (SQL avancé, gros volumes), Cloud Composer * Maîtrise des outils CI/CD (GitLab CI/CD, Docker Compose) Appréciés * Apache Spark et Pub/Sub * Bonne connaissance de Linux, de Git et des outils en ligne de commande * Formation Bac+5 (école d'ingénieur ou université) en informatique, ou expérience équivalente * Expérience dans le retail / la grande distribution Savoir-être * Communication claire à l'écrit et à l'oral, en français * Esprit d'équipe, rigueur et sens du délai, avec un haut niveau de qualité * Capacité d'analyse et force de proposition