Senior Data Engineer - Data Platform Engineer H/F - Lùkla

Bienvenue chez LùklaExpert en transformation digitale, nous accompagnons nos clients à chaque étape de leur développement pour répondre à leurs enjeux métiers et technologiques.Avec 14 agences en France, au Portugal et au Canada, Lùkla a su développer un portefeuille de clients sur un vaste champ de compétences et dans de nombreux secteurs.Nous proposons un catalogue de 6 offres complémentaires : Managed Services, Digital Workplace, Change & Adopt, Apps & Data, Web & Marketing, et Cloud & Cyber. Ancrée dans les valeurs de proximité, d'engagement, de confiance et de respect, notre entreprise crée une atmosphère propice au développement de compétences et au bien-être.Rejoindre Lùkla, c'est embarquer dans une aventure collective où passion et expertise se mêlent pour répondre aux besoins de chacun. Ensemble, allons plus haut et plus loin pour libérer votre potentiel.
Dans le cadre de notre croissance et de nos projets de transformation digitale, nous recherchons un(e) Senior Data Engineer pour accompagner nos clients dans la conception, le développement et l'industrialisation de plateformes Data modernes.Vous interviendrez sur des projets stratégiques autour des architectures Data Cloud, des plateformes Big Data, des traitements temps réel et de la valorisation des données, dans des environnements techniques exigeants et à forte volumétrie.En collaboration avec les Architectes Data, Data Scientists, Business Analysts, DevOps et équipes métiers, vous participerez à la conception de solutions robustes, évolutives et sécurisées répondant aux enjeux de performance et de gouvernance des données. En tant que Senior Data Engineer, vous serez amené(e) à :Concevoir et développer des architectures Data évolutives et performantes.Développer, maintenir et optimiser des pipelines de données (ETL / ELT) en mode batch et streaming.Concevoir et exploiter des plateformes Data Lake, Data Warehouse et Lakehouse.Mettre en oeuvre des solutions d'ingestion de données issues de multiples sources (API, bases de données, fichiers, IoT, événements temps réel).Développer des traitements distribués pour de forts volumes de données.Industrialiser les traitements Data grâce aux pratiques DevOps et DataOps.Concevoir les chaînes CI/CD des plateformes Data.Garantir la qualité, la traçabilité, la sécurité et la gouvernance des données.Optimiser les performances des traitements et les coûts d'exploitation des infrastructures Cloud (FinOps).Participer à la définition des architectures techniques et aux choix technologiques.Assurer le monitoring, l'observabilité et le support des plateformes Data.Produire la documentation technique et accompagner les équipes dans le partage des bonnes pratiques.Participer aux revues de code et contribuer à l'amélioration continue des plateformes.Selon les projets, vous pourrez également intervenir sur :la définition de référentiels techniques,l'accompagnement des équipes de développement,le mentorat de Data Engineers,ou l'évolution vers un rôle de Tech Lead ou de Data Architect.

Diplômé(e) d'une école d'ingénieur ou d'un Master (Bac +5) en informatique ou Data Engineering, vous justifiez d'une expérience significative dans la conception et le développement de plateformes Data modernes.Vous êtes à l'aise aussi bien dans les phases de conception que dans le développement et l'industrialisation des solutions.Vous appréciez les environnements Cloud, les architectures distribuées et les problématiques de performance liées aux traitements de données à grande échelle.Compétences techniquesLangagesPython (indispensable)SQL avancé (indispensable)PySparkScala ou Java (apprécié)Data EngineeringDéveloppement de pipelines ETL / ELTData LakeData WarehouseLakehouseModélisation des donnéesData QualityData GovernanceData CatalogArchitecture Medallion (Bronze / Silver / Gold)Big DataApache SparkPySparkDatabricksDelta LakeStreamingApache KafkaAzure Event HubGoogle Pub/SubTraitements temps réelCloudUne expérience sur au moins une des plateformes suivantes est attendue :Microsoft AzureAmazon Web Services (AWS)Google Cloud Platform (GCP)Services fréquemment rencontrés :Azure Data FactoryAzure Synapse AnalyticsAWS GlueAmazon S3BigQueryGoogle Cloud StorageDataprocOutils ETLTalendAzure Data FactorySSISdbt (apprécié)Bases de donnéesSQL ServerPostgreSQLOracleSnowflakeBigQueryDevOps / DataOpsGitAzure DevOpsGitLab CIGitHub ActionsJenkinsDockerKubernetesInfrastructure as CodeTerraform (apprécié)Monitoring & ObservabilitéGrafanaPrometheusAlertingLoggingSupervision des pipelinesFinOpsOptimisation des coûts CloudSuivi de la consommation des plateformes DataOptimisation des traitements distribués