Now hiring

TEST - Consultant Expert Test IA - Senior - Freelance (H/F) @ Collective.work

FR101, FROnsiteContract
Apply with ResuMinder

Opens on the employer's site

About this role

Taux journalier (TJM): 390

  • Définir et structurer la stratégie de test des solutions intégrant de l'IA.
  • Intégrer les contrôles qualité tout au long du SDLC.
  • Évaluer la fiabilité, la robustesse et la conformité des agents IA et des LLM.
  • Industrialiser et automatiser les tests dans les pipelines CI/CD.
  • Accompagner les équipes dans la mise en place des bonnes pratiques QA.POSTE ET RESPONSABILITÉS
  • Définition de la stratégie de test et des critères qualité.
  • Conception et exécution des tests fonctionnels, techniques et IA.
  • Évaluation des agents IA, des orchestrations multi-agents et des hallucinations.
  • Mise en place des quality gates et des tests automatisés.
  • Suivi des résultats, reporting et accompagnement des équipes.
  • Consultant Test / QA Senior.
  • Expérience confirmée en stratégie de test sur un SDLC mature.
  • Expérience en mise en production de solutions logicielles et CI/CD.
  • Expérience concrète en tests et évaluation de LLM, agents IA et architectures agentiques.
  • Capacité à transformer les besoins métier en scénarios et critères de test mesurables.

Compétences techniques

  • Test / QA : stratégie de test, tests fonctionnels, automatisation, non-régression.
  • IA / LLM : évaluation IA, hallucinations, robustesse, agents et multi-agents.
  • Automatisation : Python, Pytest, Playwright, REST Assured.
  • Delivery : GitHub Enterprise, GitHub Actions, CI/CD, Quality Gates.
  • Évaluation IA : Promptfoo, DeepEval, Ragas, LangSmith.
  • Sécurité IA : Prompt injection, exfiltration de données, garde-fous.
  • Observabilité : logs, traces, coûts, latences et suivi des erreurs.

Skills

Quality assuranceCI/CDPythonPytestplaywrightREST AssuredGitHub ActionspromptfooDeepEval

Ready to apply?

Install the ResuMinder extension and we'll auto-fill the application in seconds — no rewriting.

See how your CV scores