Data engineer
Data Engineer / Analytics Engineer expérimenté - Spécialiste dbt & BigQuery - Freelance (H/F)
Collective.work Paris Indépendant publiée aujourd'hui
Le poste
CONTEXTE
Une organisation engagée dans le décommissionnement de son environnement SAP BW étoffe son équipe Data Platform. L'objectif est de concevoir, industrialiser et optimiser ses flux de données sur Google Cloud.
Les données sources arrivent à l'état brut dans BigQuery par l'intermédiaire de SAP Datasphere. L'essentiel de la mission consiste à les transformer en modèles analytiques robustes, performants et directement utilisables pour les besoins décisionnels.
LIVRABLES
* Pipelines de transformation réalisés avec dbt sur BigQuery.
* Modèles analytiques structurés et documentés.
* Contrôles qualité intégrés aux traitements.
* Développements versionnés et inscrits dans la chaîne CI/CD.
* Documentation technique et documentation d'exploitation.
RESPONSABILITÉS
* Concevoir et développer les transformations de données dans BigQuery avec dbt.
* Organiser les modèles selon une architecture médaillon en plusieurs couches : données brutes, données nettoyées et harmonisées, puis modèles analytiques.
* Transposer en SQL les règles de gestion établies avec les interlocuteurs métier et techniques.
* Améliorer la performance et maîtriser les coûts des traitements BigQuery, en s'appuyant notamment sur le partitionnement, le clustering et des stratégies de chargement appropriées.
* Définir et déployer des tests et contrôles de qualité des données.
* Industrialiser les développements en appliquant les bonnes pratiques de versionnement, de revue de code et d'intégration/déploiement continus.
* Participer à la fiabilisation des pipelines et à l'analyse des incidents.
* Documenter les modèles de données, les transformations et les procédures d'exploitation.
* Le cas échéant, participer à la mise à disposition des données dans Looker via LookML.
CONDITIONS DE TRAVAIL
* Localisation : Paris
* Démarrage : dès que possible
* Durée : mission longue
* Expérience exigée : 7 ans minimum
1. Vous justifiez d'une solide expérience en Data Engineering ou en Analytics Engineering
2. Capacité à travailler en autonomie au sein d'une équipe Data Platform
3. Être rigoureux dans la conception, les tests et la documentation
4. Savoir appréhender les besoins métier et préciser les règles de transformation
5. Excellente maîtrise du SQL avancé et de la modélisation analytique
6. Solide expérience de BigQuery : développement, optimisation des requêtes, partitionnement et clustering
7. Solide expérience de dbt : modèles, gestion des dépendances, tests et documentation
8. Bonne maîtrise de Git et des pratiques CI/CD appliquées aux projets data
9. Aptitude à concevoir des traitements fiables et maintenables en production
Offres proches
Data & AI Manager Pricing (f/m/d) H/FParisCDIData Engineer Expert - Assurance - Freelance (H/F)Collective.work · ParisIndépendantSenior Data Quality Manager - Data Governance - Freelance (H/F)Collective.work · ParisIndépendantTech Lead Data Engineer - Azure Databricks - Freelance (H/F)Collective.work · ParisIndépendantSenior Data Engineer (Azure Databricks,Kafka) - Freelance (H/F)Collective.work · ParisIndépendantPierre & Vacances - Data manager (H/F)PIERRE & VACANCES SENIORIALES PROGRAMMES IMMOBILIERS · Paris 19e ArrondissementCDI