Collective.work

Publiée il y a 2 jours · Paris

TEST - Consultant Expert Test IA - Senior - Freelance (H/F)

  • Paris
  • Freelance

Outils et compétences cités dans l'annonce

PythonAgents IA

Description du poste

Taux journalier (TJM): 390 *

Définir et structurer la stratégie de test des solutions intégrant de l'IA.

*

Intégrer les contrôles qualité tout au long du SDLC.

*

Évaluer la fiabilité, la robustesse et la conformité des agents IA et des LLM.

*

Industrialiser et automatiser les tests dans les pipelines CI/CD.

*

Accompagner les équipes dans la mise en place des bonnes pratiques QA.

POSTE ET RESPONSABILITÉS

*

Définition de la stratégie de test et des critères qualité.

*

Conception et exécution des tests fonctionnels, techniques et IA.

*

Évaluation des agents IA, des orchestrations multi-agents et des hallucinations.

*

Mise en place des quality gates et des tests automatisés.

*

Suivi des résultats, reporting et accompagnement des équipes.

*

Consultant Test / QA Senior.

*

Expérience confirmée en stratégie de test sur un SDLC mature.

*

Expérience en mise en production de solutions logicielles et CI/CD.

*

Expérience concrète en tests et évaluation de LLM, agents IA et architectures agentiques.

*

Capacité à transformer les besoins métier en scénarios et critères de test mesurables.

Compétences techniques

*

Test / QA : stratégie de test, tests fonctionnels, automatisation, non-régression.

*

IA / LLM : évaluation IA, hallucinations, robustesse, agents et multi-agents.

*

Automatisation : Python, Pytest, Playwright, REST Assured.

*

Delivery : GitHub Enterprise, GitHub Actions, CI/CD, Quality Gates.

*

Évaluation IA : Promptfoo, DeepEval, Ragas, LangSmith.

*

Sécurité IA : Prompt injection, exfiltration de données, garde-fous.

*

Observabilité : logs, traces, coûts, latences et suivi des erreurs.

Annonce publiée sur France Travail et reprise par Intelligence Academy. Seule l'annonce d'origine fait foi ; nous ne sommes pas l'employeur.

Offres semblables

  • Hauts-de-Seine
  • 65 k€ / an

Au sein de la BU Construction & Immobilier de SOCOTEC, vous contribuez au développement et au déploiement de la stratégie Digital & IA auprès des différents métiers. Rattaché(e) au Directeur du Développement Digital & IA, vous intervenez en transverse auprès des directions métiers et assurez l'interface avec la DSI, le

via Adzuna
  • Couëron
  • 48 k€ – 50 k€ / an

Description du poste Rattaché(e) au Responsable Système d'Information, vous prenez la responsabilité managériale et opérationnelle du pôle Data. Le poste repose sur un équilibre de 60 % d'expertise technique et de R&D, et de 40 % de management et d'animation d'équipe. Il n'inclut pas de gestion de projet : votre rôle e

via Meteojob
  • Frb04

Expert(e) Data, Cloud & IA F/HDescription de posteBig Data, Data Science, Data analyse, Data architecture, ... Ça n'a pas de secret pour vous ?Que vous commenciez votre carrière professionnelle ou que vous soyez spécialiste de l'une de ces disciplines, intégrer notre communauté Data, c'est l'assurance de progresser

via europa.eu
  • Paris

Le cabinet Périclès, basé à Paris et présent internationalement, renforce son pôle Intelligence Artificielle avec un consultant senior IA générative et ML. Vous concevrez des solutions complètes, piloterez les projets et participerez à des ateliers clients tout en encadrant des profils juniors. Vous interviendrez sur d

via Adzuna

Toutes les offres Consultant IA →