La base de référence compare le modèle configuré avec un candidat moins cher sur des cas répétés d’orientation et de parcours complets. Elle enregistre la précision, les échecs, la consommation de jetons, le coût estimé et la latence. La revue garde le modèle et les réglages actuels de l’assistant et autorise la tâche suivante, le catalogue typé.
Revue de la base de référence de l’assistant
Mesure de l’orientation vers les outils et de parcours synthétiques complets avant de changer l’architecture de l’assistant.