Testez les agents avant la mise en ligne.
Écrivez des appelants réalistes, un LLM les joue par chat ou vrai appel vocal, un juge note les critères de succès.
Chat ou vrai appel vocal
Testez par un chat texte rapide ou par un vrai appel : un appelant simulé parle à votre agent en ligne.
Un juge par critère
Chaque critère de succès reçoit réussi ou échoué avec sa justification. Vous voyez pourquoi un test échoue.
Temps de réponse par tour
Les tests vocaux mesurent chaque étape : reconnaissance, premier token, premier audio, en médiane et p95.
Outils attendus vérifiés
Indiquez les outils que l’agent doit appeler. Chaque test liste ses appels d’outils et les vérifie.
Des tests issus d’appels réels
Transformez un appel terminé en test en un clic. Famulor rédige persona, objectif et critères.
Lancez toute la suite
Lancez un test ou tous après chaque changement de prompt ou de flux. Milian propose des personas prêtes.
Écrivez l’appelant une fois, retestez à chaque changement
Chaque test enregistre persona, objectif, critères de succès, outils attendus et nombre max de tours. Milian propose une suite, ou vous la créez depuis un appel réel.
- Parcours nominal, cas limites, transferts
- Pour les assistants prompt et flux
- API, MCP et CLI pour créer et lancer
Suite de tests
Persona · objectif · critères
Réinitialiser le mot de passe
ChatTitulaire bloqué hors de son compte
3 critères de succès
Réussi ou échoué, avec les raisons
Après chaque test, un LLM juge note chaque critère et explique pourquoi. Résultats, transcript, temps de réponse et outils ont chacun leur onglet.
- Chat pour itérer vite sur le prompt
- Voix pour toute la chaîne vocale
- Outils attendus vérifiés à chaque test
Verdict du juge
Réussi · 3 critères sur 3
- Propose une réinitialisation claire
- Vérifie d’abord l’identité
- Rappelle de ne pas partager le mot de passe
Transcript, justification et appels d’outils restent sur le test : vous savez pourquoi un critère échoue avant la mise en ligne.
Livrez les prompts comme du code. Avec une suite.
Ouvrez Simulations depuis le menu Test de l'assistant. Scriptez l'appelant, lancez la suite, lisez le juge, puis publiez.
Les tests chat sont rapides à chaque changement de prompt. Les tests vocaux passent un vrai appel et couvrent tout le parcours vocal.
Questions fréquentes sur les simulations
Elles peuvent l’être. En mode Voice, un appelant simulé avec sa propre voix de la bibliothèque appelle votre assistant en ligne, sans modification, par le même chemin qu’un vrai appel. Le mode Chat mène une conversation texte rapide.
Testez les prompts avant que les campagnes composent.
Construisez une suite de scénarios une fois, relancez-la après chaque changement de prompt ou de flux, et ne publiez que lorsque le juge reste vert.