QA Lead Transverse - Applicatif Delivery & ai H/F - Raedy
- Courbevoie - 92
- Freelance
- Raedy
Les missions du poste
Le besoinQA Lead transverse - Applicatif, Delivery & IAContexte Dans le cadre de l'industrialisation de produits digitaux intégrant de l'IA générative, l'équipe recherche un QA Lead transverse chargé de définir et piloter la stratégie qualité sur 3 axes : applicatif, delivery, et IA. Interviendra aux côtés des équipes Produit, Dev, Architecture, DevOps, Data/IA et Cybersécurité sur l'ensemble du cycle de vie produit.MissionsQualité applicativeDéfinir stratégie de tests et critères d'acceptationConcevoir/exécuter tests fonctionnels, techniques, API, intégration, non-régressionIdentifier les parcours critiques et automatiser leur validationSuivre les anomalies jusqu'à résolutionParticiper aux décisions Go/No GoGarantir la qualité des échanges applications/API/servicesQualité du deliveryIntégrer les tests automatisés en CI/CDDéfinir et mettre en place des quality gatesFiabiliser release, déploiement, rollbackContrôler la couverture de tests avant mise en productionMettre en place tests de performance, charge, résilienceAnalyser les incidents de production, contribuer à l'amélioration continueAccompagner l'adoption des pratiques shift-leftConstruire des indicateurs qualité partagésQualité des solutions IADéfinir une stratégie d'évaluation des fonctionnalités IA/GenAIConstituer jeux de tests et référentiels de réponses attenduesMesurer pertinence, fidélité, complétude, stabilité des réponsesIdentifier et mesurer les hallucinationsTester les chaînes RAG (ingestion, recherche, contexte, génération)Garantir la non-régression lors des changements de modèles/prompts/sourcesTester les risques prompt injection, jailbreak, fuite de donnéesAutomatiser les campagnes d'évaluation IADéfinir métriques et seuils d'acceptation (Go/No Go)Traduire les attentes métier subjectives en critères mesurablesCompétences recherchéesSolide expérience QA Engineering, automatisation, stratégie de testsTests web, API, E2E, intégration, non-régressionPlaywright, Cypress, Selenium (ou équivalent)Postman, REST Assured (ou équivalent)CI/CD & qualité logicielle : Azure DevOps, GitLab CI, GitHub Actions, Jenkins, SonarQubeTests de performance : K6, JMeter, GatlingBonne compréhension architectures cloud, API, microservicesPython pour automatisation et évaluation IACompréhension LLM, prompt engineering, architectures RAGOutils d'évaluation IA : Promptflow, RAGAS, DeepEval (ou équivalent)Azure OpenAI / Azure AI Foundry (apprécié)Sensibilité sécurité IA, RGPD, AI Act
Le profil recherché
Profil recherchéProfil recherchéEnviron 7 ans d'expérience minimum en QA, dont une expérience significative en automatisation.Expérience de QA Lead ou de référent qualité dans un environnement multi-produits.Expérience concrète sur une application intégrant de l'IA générative fortement souhaitée.Capacité à construire la stratégie autant qu'à intervenir opérationnellement.Excellente communication avec les équipes Produit, Développement, DevOps, Architecture, Sécurité et IA.Forte autonomie, esprit critique et capacité à challenger les pratiques existantes.