Ingénieur Développeur IA Senior

La mission

Rejoignez une équipe constituée sur un projet d’IA générative déjà en place. Votre rôle : apporter une expertise senior pour fiabiliser l’usage des LLM, renforcer l’évaluation et faire évoluer l’architecture à partir de résultats mesurables.
Vos responsabilités

• Concevoir la chaîne d’extraction d’informations (function calling, sorties structurées, vérification et réparation)

• Mesurer pour décider : construire les jeux de cas, mener les expériences et comparer prompts, modèles et méthodes sur des critères chiffrés

• Qualifier les juges LLM face au jugement humain

• Choisir les modèles en arbitrant qualité, coût et latence, dans un cadre souverain (Mistral, AWS Bedrock région UE)

• Industrialiser : code testé, observabilité, gestion des pannes et des dérives

• Transmettre : expliquer vos choix à l’équipe et au métier, et la faire monter en compétence sur l’évaluation

Profil recherché

• 5 ans minimum en développement, dont 2 ans sur des produits LLM en production

• Pratique avérée de l’évaluation de LLM : jeux de cas, métriques, LLM-as-judge et ses biais, variance entre exécutions

• Maîtrise de l’extraction d’informations structurées (sortie structurée, function calling, validation de schéma)

• Python avancé, code testé (obligatoire)

• LLM / RAG (obligatoire)

• Capacité à trancher à partir de mesures et à l’expliquer simplement