AI Engineer Python – Agentic AI / LLM

Au sein d’une équipe spécialisée en Agentic AI, vous intervenez sur une solution d’analyse conversationnelle de données basée sur les LLM, déployée en production sur Google Cloud.

L’objectif est d’assurer la robustesse, la maintenance et l’amélioration continue de la solution, notamment sur l’évaluation de la qualité des réponses LLM et l’analyse avancée du comportement des agents.

Missions

• Concevoir et industrialiser des frameworks d’évaluation LLM-as-a-Judge.

• Définir et suivre les métriques, jeux de tests et seuils de qualité.

• Assurer la maintenance corrective et évolutive de la solution en production.

• Réaliser des analyses LLM avancées et identifier les axes d’amélioration.

• Concevoir des workflows multi-agents et intégrer les protocoles A2A / A2UI.

• Intégrer des fonctionnalités de visualisation et d’exposition de graphiques dans l’interface de l’agent.

• Parser et structurer des données non structurées : PDF, images, tableaux.

• Solide maîtrise de Google Cloud Platform : Agent Platform, Cloud Run, Cloud Batch, Pub/Sub, Cloud Logging, Cloud Tracing.

• Expérience en Agentic AI / LLM et workflows multi-agents.

• Maîtrise des protocoles A2A / A2UI.

• Expérience dans le traitement et la structuration de données non structurées.