Data Engineer - Analytics Engineer Expérimenté - Spécialiste Dbt & Bigquery H/F - Collective Works
Data Engineer - Analytics Engineer Expérimenté - Spécialiste Dbt & Bigquery H/F
Collective Works · Paris - 75 · Indépendant
Les missions du poste
Contexte
Une organisation engagée dans le décommissionnement de son environnement SAP BW étoffe son équipe Data Platform. L'objectif est de concevoir, industrialiser et optimiser ses flux de données sur Google Cloud.
Les données sources arrivent à l'état brut dans BigQuery par l'intermédiaire de SAP Datasphere. L'essentiel de la mission consiste à les transformer en modèles analytiques robustes, performants et directement utilisables pour les besoins décisionnels.
Livrables
- Pipelines de transformation réalisés avec dbt sur BigQuery.
- Modèles analytiques structurés et documentés.
- Contrôles qualité intégrés aux traitements.
- Développements versionnés et inscrits dans la chaîne CI/CD.
- Documentation technique et documentation d'exploitation.
Responsabilités
- Concevoir et développer les transformations de données dans BigQuery avec dbt.
- Organiser les modèles selon une architecture médaillon en plusieurs couches : données brutes, données nettoyées et harmonisées, puis modèles analytiques.
- Transposer en SQL les règles de gestion établies avec les interlocuteurs métier et techniques.
- Améliorer la performance et maîtriser les coûts des traitements BigQuery, en s'appuyant notamment sur le partitionnement, le clustering et des stratégies de chargement appropriées.
- Définir et déployer des tests et contrôles de qualité des données.
- Industrialiser les développements en appliquant les bonnes pratiques de versionnement, de revue de code et d'intégration/déploiement continus.
- Participer à la fiabilisation des pipelines et à l'analyse des incidents.
- Documenter les modèles de données, les transformations et les procédures d'exploitation.
- Le cas échéant, participer à la mise à disposition des données dans Looker via LookML.
Conditions de travail
- Localisation : Paris
- Démarrage : dès que possible
- Durée : mission longue
- Expérience exigée : 7 ans minimum
Le profil recherché
- Vous justifiez d'une solide expérience en Data Engineering ou en Analytics Engineering
- Capacité à travailler en autonomie au sein d'une équipe Data Platform
- Être rigoureux dans la conception, les tests et la documentation
- Savoir appréhender les besoins métier et préciser les règles de transformation
- Excellente maîtrise du SQL avancé et de la modélisation analytique
- Solide expérience de BigQuery : développement, optimisation des requêtes, partitionnement et clustering
- Solide expérience de dbt : modèles, gestion des dépendances, tests et documentation
- Bonne maîtrise de Git et des pratiques CI/CD appliquées aux projets data
- Aptitude à concevoir des traitements fiables et maintenables en production