AI Agent Developer / Évaluateur IA

Intervenir sur des sujets opérationnels avec un impact direct sur l’évaluation, l’analyse et l’amélioration d’agents IA autonomes et de modèles de langage (LLM), dans des contextes techniques complexes et multi-domaines.

Missions principales
Rédaction de grilles d’évaluation avec critères objectifs de validation
Analyse et débogage des comportements d’agents IA (traces, logs, erreurs)
Identification de scénarios d’échec, cas limites et vulnérabilités (prompt injection, abus d’outils)
Évaluation de systèmes logiciels modulaires et d’architectures techniques
Analyse de comportements multi-interactions dans des systèmes IA
Production de feedback technique structuré destiné à l’entraînement de modèles de langage
Participation à des tâches d’évaluation et de test sur différents cas d’usage (santé, éducation, usage quotidien)

Compétences attendues
Expérience en développement backend, automatisation IA ou intégration de systèmes complexes
Maîtrise d’au moins deux langages de programmation (Python, JavaScript, Go, Java)
Bonne connaissance des bases de données SQL
Expérience en développement de systèmes en environnement réel (non simulé)
Capacité à analyser des workflows multi-étapes et des architectures modulaires
Connaissance des API et intégrations de services externes appréciée

Profil recherché
Expérience en ingénierie logicielle, IA ou automatisation avancée
Capacité à identifier des erreurs système et comportements non conformes
Rigueur analytique et esprit critique
Autonomie dans l’exécution de tâches techniques
Intérêt pour les systèmes IA et les modèles de langage