Expert Confluent Kafka Senior - Migration 8.X & Gouvernance H/F - Veilos
- Nantes - 44
- Freelance
- Télétravail accepté
- Veilos
Les missions du poste
Le besoin
Une fintech recherche un Expert Confluent Kafka Senior pour piloter une transition technologique majeure, renforcer la sécurité de sa plateforme de streaming et structurer durablement sa gouvernance data. La mission s'inscrit dans une logique de modernisation d'une infrastructure critique déployée sur trois environnements.
Modalités de la mission
Démarrage souhaité : Asap
Durée : 6 mois
Localisation : Nantes intra-muros (centre-ville)
Télétravail : 2 jours par semaine
Contexte
Le système d'information du client repose sur une infrastructure Kafka critique, déployée sur trois environnements (Production, Préproduction, Staging). Dans un contexte de maintien en condition opérationnelle et d'évolution vers une architecture moderne, le client souhaite s'appuyer sur une prestation d'expert pour accompagner la montée en compétence et la restructuration de sa plateforme.
L'environnement est contraint (normes PCI DSS / secteur bancaire), ce qui impose un niveau d'exigence élevé sur la sécurité, la conformité et la résilience.
Ce que vous allez faire
Pilotage de la migration 8.X : identifier la version cible optimale, piloter l'infogéreur dans la mise en oeuvre d'une migration « cassante », revoir le dimensionnement du cluster (nombre de noeuds) et orchestrer la bascule vers le moteur Kraft en remplacement de ZooKeeper.
Architecture et sécurité (ADR) : répondre aux sollicitations techniques des équipes de développement, étudier l'impact et la faisabilité des exigences de sécurité, notamment le chiffrement des données at rest et in transit.
Gouvernance et audit opérationnel : mettre en place une gouvernance robuste autour des usages Kafka (politiques de logs, droits, monitoring), reprendre la main sur les configurations existantes, auditer l'existant pour aligner les pratiques sur les standards de production internes.
Livrables attendus
Plan de migration détaillé (stratégie rolling restart, version cible, procédure de rollback)
Dossier d'Architecture Technique (DAT) mis à jour
Rapport de compatibilité clients (Java/Spring)
Rapport d'audit de configuration brokers, topics, connecteurs
Audit des processus opérationnels (incidents, backup/restauration, capacity planning)
Rapport de performance avec KPIs et points de contention
Matrice Effort / Valeur explicitant les risques du « statu quo » pour chaque audit
Étude de faisabilité chiffrement (at rest + in transit)
Matrice de conformité sécurité (RBAC, ACLs, KMS, CSFLE)
Référentiel de bonnes pratiques (nommage, Schema Registry, catalogue de services/événements)
Document de gouvernance opérationnelle (rôles infra vs dev, processus de reprise en main)
Le profil recherché
Profil recherché
Expert Confluent Kafka senior avec une expérience confirmée sur Kafka en environnement contraint (PCI DSS / Banque). Vous savez dialoguer aussi bien avec des équipes de développement qu'avec un infogéreur, et vous êtes capable de reprendre la main technique sur une plateforme existante pour la faire monter en maturité.
Compétences attendues
Pilotage de migrations majeures Kafka en environnement de production critique
Capacité à structurer une gouvernance opérationnelle et à formaliser des bonnes pratiques
Aisance à interagir avec des partenaires infogéreurs et à orchestrer leur action
Posture d'auditeur : capacité à challenger l'existant et à prioriser via une matrice Effort / Valeur
Excellente communication écrite et orale pour produire des livrables structurés (DAT, rapports, ADR)
Compétences techniques
Apache Kafka et Confluent Platform, expertise confirmée sur la version 8.X
Bascule ZooKeeper vers Kraft (KRaft)
Schema Registry, Connect, topics, brokers, partitionnement, réplication
Sécurité Kafka : chiffrement at rest et in transit, RBAC, ACLs, KMS, CSFLE
Observabilité et monitoring Kafka (KPIs, points de contention)
Clients Java / Spring : impacts de compatibilité lors d'une montée de version majeure
Capacity planning, backup/restauration, gestion des incidents en production
Normes PCI DSS et contraintes d'environnement bancaire