Skip to content
Search jobs inside your AI agent. Claude, ChatGPT, Claude Code, Codex, Gemini, Cursor and Grok
Connect

Collective.work

New

Ingénieur IA — Agents QA & Tests End-to-End

Posted Updated 4 views

Description

Brief IA recherche un expert QA pour concevoir et piloter la stratégie de test des agents IA utilisés dans nos projets d'audit et de conseil. Vous définirez les types de tests, les scénarios et les critères d'acceptation.

Vous couvrirez les domaines applicatif, data et data science, validerez les modèles et les prompts des LLM, et assurerez une intégration CI/CD sur Azure DevOps et GitHub.

Définir la stratégie de test globale : identifier les types de tests pertinents selon le domaine (applicatif, data, data science, IA générative) et le niveau de risque, avant toute mise en production Concevoir, développer et faire évoluer des agents IA capables de prendre en charge le cycle QA de bout en bout : analyse des besoins et génération des cas de test et scénarios, écriture et maintenance des scripts de tests automatisés, exécution, analyse des résultats et remontée des anomalies Couvrir l'ensemble des domaines : Applications : tests fonctionnels, end-to-end, API, non-régression, performance, sécurité; Data : qualité et cohérence des données, contrôle des pipelines, réconciliation; Data science / IA : validation des modèles, évaluation des LLM, RAG et agents (pertinence, fidélité, hallucinations), non-régression des prompts et des modèles; Sécuriser le passage du POC au produit : critères d'acceptation, robustesse, sécurité (injection de prompt, fuite de données), performance et maîtrise des coûts; Intégrer les agents et les tests dans les chaînes CI/CD (Azure Dev Ops / Git Hub) Accompagner les équipes produit d

Skills

Apply

See also

QA jobs by country — openings, pay and top skills →