Data Engineer Cloud H/F - Caveo Consulting
- Lyon - 69
- CDI
- Caveo Consulting
Les missions du poste
La société CAVEO consulting est née de dix années d'expertise dans les métiers du service, du recrutement et de l'ingénierie informatique. Dix années riches d'enseignements humains et de merveilleuses rencontres qui nous ont menées à penser à ce que serait l'ESN de demain.
L'ESN de demain, c'est quoi ? Une ESN à taille humaine qui se développe autour de 3 axes : l'écoute, la transparence et la loyauté. Nous avons envie de casser les codes et d'assumer pleinement ce rôle de conseil qu'une ESN doit avoir tant à l'égard de ses consultants que de ses clients.
Le conseil fait partie de notre ADN.Nous recherchons pour l'un de nos clients, Data Engineer Cloud.
Missions principales :
- Concevoir, développer et maintenir des pipelines de données cloud sur Azure.
- Implémenter des traitements de données batch et streaming à grande échelle à l'aide de Databricks (Spark) et Python, en garantissant performance et fiabilité.
- Participer à la mise en place d'architectures Lakehouse avec Microsoft Fabric, en assurant la modélisation des données et l'optimisation des flux.
- Automatiser et industrialiser les workflows data (orchestration, monitoring, gestion des erreurs) en respectant les bonnes pratiques DataOps / CI-CD sur Azure.
- Assurer la qualité, la sécurité et la gouvernance des données (contrôles, accès, conformité) dans un environnement cloud.
Le profil recherché
Expérience :
- minimum 3 ans en data engineering ;
- Databricks, Fabric, Cloud Azure, python.