Visian
Publiée hier · Paris
TEST – Consultant Expert Test IA – Senior
- Paris
- Freelance
- Télétravail possible
Outils et compétences cités dans l'annonce
Description du poste
Budget publié : 390. Définir et structurer la stratégie de test des solutions intégrant de l'IA. Intégrer les contrôles qualité tout au long du SDLC. Évaluer la fiabilité, la robustesse et la conformité des agents IA et des LLM. Industrialiser et automatiser les tests dans les pipelines CI/CD. Accompagner les équipes dans la mise en place des bonnes pratiques QA. Poste et responsabilités Définition de la stratégie de test et des critères qualité. Conception et exécution des tests fonctionnels, techniques et IA. Évaluation des agents IA, des orchestrations multi-agents et des hallucinations. Mise en place des quality gates et des tests automatisés. Suivi des résultats, reporting et accompagnement des équipes. Consultant Test / QA Senior. Expérience confirmée en stratégie de test sur un SDLC mature. Expérience en mise en production de solutions logicielles et CI/CD. Expérience concrète en tests et évaluation de LLM, agents IA et architectures agentiques. Capacité à transformer les besoins métier en scénarios et critères de test mesurables. Compétences techniques Test / QA : stratégie de test, tests fonctionnels, automatisation, non-régression. IA / LLM : évaluation IA, hallucinations, robustesse, agents et multi-agents. Automatisation : Python, Pytest, Playwright, REST Assured. Delivery : GitHub Enterprise, GitHub Actions, CI/CD, Quality Gates. Évaluation IA : Promptfoo, DeepEval, Ragas, LangSmith. Sécurité IA : Prompt injection, exfiltration de données, garde-fous. Observabilité : logs, traces, coûts, latences et suivi des erreurs.
Annonce publiée sur collective.work et reprise par Intelligence Academy. Seule l'annonce d'origine fait foi ; nous ne sommes pas l'employeur.
Offres semblables
Software Engineer Expert Genai - Sdlc - Llm K275 H/F
Kaiman Services
- Clermont-Ferrand
- 40 k€ – 43 k€ / an
Votre mission Au sein d'une équipe spécialisée en intelligence artificielle générative, vous participez à la conception et au développement d'applications innovantes exploitant les LLM dans un contexte de transformation numérique d'envergure. Vos missions - Concevoir et développer des applications intégrant des LLM (RA
Expert en ingénierie logicielle spécialisée en IA
Skills & Affinity
- Neuilly-sur-Seine
- 60 k€ – 90 k€ / an
Description du poste Affiner la stratégie AI for Software Engineering Évaluer les outils, modèles et plateformes du marché. Définir les cas d'usage à fort retour sur investissement. Industrialiser le développement augmenté Concevoir des usines logicielles intégrant l'IA générative. Mettre en pl
- Paris
- Freelance
Dans le cadre d?un programme de transformation visant à intégrer l?intelligence artificielle dans les processus de développement logiciel et dans les parcours métier, nous recherchons un consultant senior expert en stratégie de test et en qualification de solutions d?intelligence artificielle, avec une expertise partic
Directeur de projet/CP Data & IA - Freelance
Collective.work
- 8ème Arrondissement
- Freelance
Description du poste Taux journalier (TJM): 570 Contexte de la mission Au sein de la Direction des Systèmes d'Information, le Département SI Data & IA conduit plusieurs programmes de transformation majeurs portant sur les domaines de la donnée, des plateformes technologiques et des applications métier stratégiques. Dan


