Ao Data Ingénieur H/F - Vibtic

Responsabilités :

Expertise technique Databricks

-Accompagner les équipes projet dans la conception de leurs solutions (modélisation et conception de flux, choix d'architecture dans Databricks).

-Analyser et résoudre les problématiques techniques rencontrées (blocages, performances, scalabilité, optimisation des coûts).

-Auditer le code (Spark, Python, notebooks) produit par les projets et formuler des recommandations (qualité, normes, bonnes pratiques, sécurité).

Outillage de la plateforme Data

-Améliorer l'intégration de Databricks dans la chaîne CI/CD (Maintenir et faire évoluer les pipelines de déploiements, packaging, tests automatisés, etc.).

-Améliorer les outils de monitoring des flux (suivi d'exécution, alerting, logs, metrics).

-Automatiser les principaux gestes d'exploitation : gestion des habilitations, création et gestion des catalogues (Unity Catalog), provisioning des espaces de travail et ressources, scripts/outils d'administration.

Veille et démonstration

-Assurer une veille active sur l'écosystème Databricks (nouvelles fonctionnalités, bonnes pratiques, patterns d'architecture).

-Proposer et réaliser des démonstrateurs (PoC) pour illustrer de nouveaux usages, valider des choix techniques ou outiller les projets.

-Partager les retours d'expérience (guides, documents de référence, sessions de présentation aux équipes).

Technologies:

-Cloud/Serverless: Microsoft Azure, Databricks, compte de stockage gen 2 (datalake), AKS

-Apache Nifi & zookeeper BDD PostgreSQL

-Langage Spark/python

-Power BI

Méthodologie de gestion de projet : Agile-Scrum

Outils de gestion de versioning: Git, GitLab

Nous sommes à la recherche des ingénieurs IT qualifiés et certifiés pour occuper des postes avec l'un de nos clients grands comptes

Rejoignez notre team d'ingénieurs pour développer avec nous une entreprise en pleine croissance !