Architecte Data Platform - Cloudera Cdp - Admin Hadoop Support N3 Niort H/F - Neonum
Les missions du poste
Le besoin
Contexte et enjeux
Dans le cadre d'un programme stratégique de transformation du système d'information et de modernisation de sa plateforme Data Hub, un acteur majeur du secteur de l'assurance recherche un Expert Data Platform / Cloudera CDP pour renforcer son équipe Socle Data.
La mission s'inscrit dans une démarche de transformation vers une organisation davantage Data Driven, avec plusieurs chantiers structurants :
Modernisation et évolution technique de la plateforme Data Hub.
Accompagnement du projet de montée de version de la plateforme Cloudera.
Maintien en condition opérationnelle (MCO) et amélioration de la disponibilité des services Data.
Évolution des architectures événementielles.
Étude et intégration de technologies Lakehouse.
Développement de l'interopérabilité entre différentes plateformes Data.
Réflexions sur les modèles de partage de données (Data Sharing).
Préparation de scénarios d'hybridation et d'évolution vers des architectures proches du Data Mesh.
L'objectif est d'accompagner les équipes métiers, projets et exploitation dans la conception, la modernisation et l'exploitation des services Data Hub, tout en garantissant leur robustesse, leurs performances et leur sécurité.
Missions détaillées
Sous la responsabilité du Product Owner du domaine, les activités seront organisées et priorisées à travers un backlog de demandes.
1. Architecture et expertise technique
Réaliser des études techniques d'évolution de l'écosystème Cloudera CDP et de la plateforme Data Hub.
Analyser les impacts techniques et fonctionnels des évolutions envisagées.
Produire les dossiers d'architecture, notes de cadrage et recommandations techniques.
Présenter les conclusions des études aux responsables techniques et aux interlocuteurs métiers.
Contribuer à la modernisation des services Data proposés aux consommateurs de la plateforme.
Accompagner les réflexions et travaux autour des architectures événementielles, Lakehouse, Data Sharing, hybridation et Data Mesh.
Participer aux travaux d'interopérabilité entre plateformes Data.
2. Administration Cloudera et montée de version
Contribuer à l'évolution technique des clusters Hadoop Cloudera.
Accompagner les travaux liés à la montée de version de la plateforme Cloudera.
Analyser les impacts des changements sur les composants techniques et les services existants.
Assurer l'administration et le maintien en condition opérationnelle de la plateforme.
Participer à la gestion des changements et aux opérations sensibles de production.
Garantir la stabilité et la continuité des services Data Hub pendant les évolutions.
3. Support expert N3 et gestion de production
Assurer le support technique de niveau 3 sur l'ensemble de la plateforme Data Hub.
Diagnostiquer et résoudre les incidents complexes de production.
Participer aux cellules de crise lors d'incidents majeurs.
Conduire les analyses de causes racines (Root Cause Analysis).
Définir et suivre les plans de remédiation.
Accompagner les équipes DataOps de niveau 2 dans la résolution des problématiques techniques.
Contribuer à l'amélioration continue des processus d'exploitation et de support.
4. Performance, capacité et sécurité
Réaliser les activités de Capacity Planning pour anticiper les besoins en ressources.
Effectuer les analyses de performance et les opérations de Performance Tuning.
Améliorer la robustesse, la disponibilité et les performances de la plateforme.
Contribuer à la sécurisation et au durcissement des systèmes.
Participer à l'amélioration continue du maintien en condition opérationnelle.
5. Industrialisation et automatisation
Industrialiser les processus d'administration et d'exploitation.
Développer et maintenir des automatisations à l'aide d'Ansible, AWX et de scripts Shell.
Contribuer à la fiabilisation et à la standardisation des opérations techniques.
Participer à l'amélioration des pratiques d'exploitation et d'automatisation de la plateforme Data.
6. Interventions en production
La mission implique une participation aux opérations sensibles sur des environnements critiques, avec la possibilité d'interventions ponctuelles en Heures Non Ouvrées (HNO).
Stack technique
Niveau
Technologies et compétences
Expertise obligatoire
Cloudera CDP, Hadoop Cloudera, administration et exploitation de clusters, MCO Data Platform, support N3
Niveau avancé
Linux RHEL, Ansible, AWX, Talend, scripting Shell
Compétences appréciées
Kubernetes, Docker, Git, GitLab, Jenkins, OpenShift, Terraform, Python, Java, Scala
Architecture Data
Data Driven, Data Mesh, Lakehouse, architectures événementielles, Data Sharing, interopérabilité et hybridation
Exploitation
Gestion des incidents, cellules de crise, gestion des changements, Capacity Planning, Performance Tuning, sécurité et durcissement, HNO
Informations pratiques
Localisation : Niort (79)
Niveau : Consultant confirmé - Architecte niveau 2
Environnement : Plateforme Data Hub d'un grand groupe d'assurance
Contraintes : Interventions HNO ponctuelles possibles
Le profil recherché
Profil recherché
Profil recherché
Nous recherchons un consultant confirmé, expert des plateformes Data Cloudera, capable d'intervenir aussi bien sur les sujets d'architecture et de modernisation que sur les problématiques complexes d'exploitation et de production.
Compétences indispensables
Expérience significative et concrète sur Cloudera CDP.
Solide expérience d'administration et d'exploitation de clusters Hadoop Cloudera.
Expertise de l'environnement Linux Red Hat Enterprise Linux (RHEL).
Expérience confirmée en support de production N3 et résolution d'incidents complexes.
Capacité à intervenir sur des plateformes Data critiques avec de fortes exigences de disponibilité.
Compétences différenciantes
Expérience sur des programmes de transformation Data Driven ou des approches Data Mesh.
Connaissance des architectures événementielles.
Compréhension des architectures et solutions Lakehouse.
Pratique des environnements conteneurisés Kubernetes et OpenShift.
Expérience de modernisation et d'évolution de plateformes Data en production.
Qualités attendues
Forte autonomie dans l'analyse et la résolution de problématiques techniques complexes.
Capacité à formaliser des recommandations et dossiers d'architecture.
Rigueur dans la gestion des changements et des incidents critiques.
Aptitude à collaborer avec les équipes DataOps, architecture, projets et métiers.
Capacité à travailler dans un environnement piloté par un Product Owner et un backlog de demandes.