Data Engineer H/F - Skiils

Le besoinContextede la mission - SynthèseATTENTION NE SERONT PRIS EN COMPTE UNIQUEMENT LES PROFILS LILLOISAu sein d'une équipe Data Expérience, une cellule de Data Engineers collabore avec les équipes d'un produit financier SaaS dédié à l'analyse de performance et au pilotage économique.L'équipe projet comprend plusieurs relais fonctionnels (dont un Product Owner), un interlocuteur technico-fonctionnel et un Data Engineer à temps partiel.Un programme de migration est en cours afin de rationaliser l'écosystème Data : l'ensemble des scripts sera transféré vers une plateforme unifiée et optimisée pour réduire la complexité technique et les coûts opérationnels.Objectifs et livrables attendusExpertise technique : maîtrise avancée d'Apache Spark (Python/Scala) et optimisation de clusters cloudMigration des flux : transfert des traitements existants avec interruption minimale de serviceGouvernance : pilotage rigoureux (suivi d'avancement, gestion des risques, reporting)Support & formation : accompagnement des équipes internes durant la transition (documentation, tutoriels, assistance technique)Compétences clés requisesDatabricksApache SparkAWSSQL