Architecte - Tech Lead Data - Azure Databricks H/F - collectivite
- Lyon - 69
- Freelance
- collectivite
Les missions du poste
Information importanteType de contrat: FreelanceTaux journalier : Salaire selon profilLocalisation : Lyon, FranceDate de démarrage :UrgentMode de travail : HybridePublié le : 9 juillet 2026Le besoinContexte FREELANCE OU CDIRemplacement à faire au sein d'une équipe de 5 à 6 personnes sur un projet long terme.La mission concerne une Data Platform existante avec maintien et amélioration, intégration de l'IA et prise en compte de la sécurité client.Démarrage ASAP, en présentiel 2 à 3 jours par semaine à Lyon, avec un temps plein souhaité (possibilité de démarrer à 3/5ème).MissionsOptimisation et mise en place de l'architecture Data Platform (Azure Databricks) en appliquant les bonnes pratiques de gouvernance, performance et scalabilitéOrganisation et structuration des ressources pour l'industrialisation de nouveaux use cases et la livraison en productionMontée en compétence de l'équipe Data (mentorat, standards d'architecture, bonnes pratiques CI/CD)Implémentation d'une architecture Data Mesh orientée domainesMise en place des droits d'accès et de la gouvernance des Data Domains et des use cases via Databricks Unity CatalogGestion centralisée du catalogue de données, data lineage et sécuritéRefonte et optimisation de l'architecture Data Platform pour améliorer performance, coûts et maintenabilitéOptimisation des performances de traitement (Spark tuning, optimisation Delta, partitioning, caching)Création et orchestration de workflows sur Azure DatabricksDéveloppement de notebooks d'intégration et de transformation des données (PySpark / SQL)Développement de pipelines Azure Data FactoryMise en place de pipelines DevOps CI/CD et industrialisation des déploiements multi-environnements (DEV / UAT / PROD)Mirroring des catalogues et use cases Databricks vers Fabric pour unifier la gouvernance et faciliter l'adoption métierUtilisation des Shortcuts vers OneLake afin d'éviter la duplication de données, réduire les coûts de stockage et améliorer la performance des rapports Microsoft Power BIImplémentation d'AI Data Agents pour démocratiser l'accès aux donnéesUtilisation de Copilot via Data Agent pour permettre aux utilisateurs métier d'interagir en langage naturel avec les donnéesIntégration des Data Agents dans Microsoft Teams afin d'améliorer la collaboration et la génération assistée d'insightsOutils & EnvironnementAzure Databricks, Databricks Unity CatalogAzure Data Factory, Azure DevOps, Azure Key VaultAzure Data Lake Storage (ADLS Gen2), Azure Cosmos DBMicrosoft Power BI, OneLakePySpark, Spark SQL, Delta LakeCI/CD, Data Mesh, Lakehouse ArchitectureConditions de travailTemps plein souhaité (possibilité de démarrer à 3/5ème)Présentiel 2 à 3 jours par semaine à LyonDémarrage ASAPRôle partagé : 2/5 architecture, 2/5 lead tech Databricks, 1/5 travail sur les use cases métierAnglais requisFR NucléaireProfil recherché2 à 3 jours par semaine disponibles, idéalement à LyonExpérience en architecture (2/5)Expérience en lead technique Databricks (2/5)Compétences métier (1/5 sur les use cases)Maîtrise de l'anglaisCompétences en Azure Databricks, Databricks Unity Catalog, Azure Data Factory, Azure DevOps, Azure Key Vault, Azure Data Lake Storage (ADLS Gen2), Azure Cosmos DB, Microsoft Power BI, OneLakeMaîtrise de PySpark, Spark SQL, Delta LakeExpérience avec les pratiques de CI/CD et Data MeshConnaissance de l'architecture Lakehouse