Visian

Publiée hier · Paris

TEST – Consultant Expert Test IA – Senior

  • Paris
  • Freelance
  • Télétravail possible

Outils et compétences cités dans l'annonce

PythonAgents IA

Description du poste

Budget publié : 390. Définir et structurer la stratégie de test des solutions intégrant de l'IA. Intégrer les contrôles qualité tout au long du SDLC. Évaluer la fiabilité, la robustesse et la conformité des agents IA et des LLM. Industrialiser et automatiser les tests dans les pipelines CI/CD. Accompagner les équipes dans la mise en place des bonnes pratiques QA. Poste et responsabilités Définition de la stratégie de test et des critères qualité. Conception et exécution des tests fonctionnels, techniques et IA. Évaluation des agents IA, des orchestrations multi-agents et des hallucinations. Mise en place des quality gates et des tests automatisés. Suivi des résultats, reporting et accompagnement des équipes. Consultant Test / QA Senior. Expérience confirmée en stratégie de test sur un SDLC mature. Expérience en mise en production de solutions logicielles et CI/CD. Expérience concrète en tests et évaluation de LLM, agents IA et architectures agentiques. Capacité à transformer les besoins métier en scénarios et critères de test mesurables. Compétences techniques Test / QA : stratégie de test, tests fonctionnels, automatisation, non-régression. IA / LLM : évaluation IA, hallucinations, robustesse, agents et multi-agents. Automatisation : Python, Pytest, Playwright, REST Assured. Delivery : GitHub Enterprise, GitHub Actions, CI/CD, Quality Gates. Évaluation IA : Promptfoo, DeepEval, Ragas, LangSmith. Sécurité IA : Prompt injection, exfiltration de données, garde-fous. Observabilité : logs, traces, coûts, latences et suivi des erreurs.

Annonce publiée sur collective.work et reprise par Intelligence Academy. Seule l'annonce d'origine fait foi ; nous ne sommes pas l'employeur.

Offres semblables

  • Clermont-Ferrand
  • 40 k€ – 43 k€ / an

Votre mission Au sein d'une équipe spécialisée en intelligence artificielle générative, vous participez à la conception et au développement d'applications innovantes exploitant les LLM dans un contexte de transformation numérique d'envergure. Vos missions - Concevoir et développer des applications intégrant des LLM (RA

via Adzuna
  • Neuilly-sur-Seine
  • 60 k€ – 90 k€ / an

Description du poste Affiner la stratégie AI for Software Engineering Évaluer les outils, modèles et plateformes du marché. Définir les cas d'usage à fort retour sur investissement. Industrialiser le développement augmenté Concevoir des usines logicielles intégrant l'IA générative. Mettre en pl

via Meteojob
  • Paris
  • Freelance

Dans le cadre d?un programme de transformation visant à intégrer l?intelligence artificielle dans les processus de développement logiciel et dans les parcours métier, nous recherchons un consultant senior expert en stratégie de test et en qualification de solutions d?intelligence artificielle, avec une expertise partic

via Indeed
  • 8ème Arrondissement
  • Freelance

Description du poste Taux journalier (TJM): 570 Contexte de la mission Au sein de la Direction des Systèmes d'Information, le Département SI Data & IA conduit plusieurs programmes de transformation majeurs portant sur les domaines de la donnée, des plateformes technologiques et des applications métier stratégiques. Dan

via Adzuna

Toutes les offres Consultant IA →