Recettes d'audit

Utilisez ces recettes comme objectifs de départ, puis ajoutez votre agent, votre environnement et le workflow attendu.

Tableau de bord
CLI

Accédez à Analyser → Audits → Nouvel audit, copiez une recette dans la description ou le résumé, puis ajoutez l’environnement, l’agent, la période de référence et les URL pertinents. Créez l’audit et inspectez la première exécution avant de le planifier.Le formulaire de création d’audit transforme une recette en contrôle de défaillance exécutable en y ajoutant une portée, un contexte, une cadence et des notifications.

Le formulaire de création d'audit configuré avec un objectif ciblé, une planification, une portée d'agent et d'environnement, un contexte et des canaux de notification.

Après la création, vérifiez que l’audit apparaît dans la liste avec le statut et la planification attendus avant de vous fier aux exécutions récurrentes.

La page Audits où une recette d'audit spécifique à un workflow apparaît après sa création.

Ouvrez la première exécution et affinez la recette si ses résultats sont plus larges ou plus étroits que le mode de défaillance visé.

Enregistrez une recette dans un fichier texte et joignez-le lors de la création :

fp audits create retry-loop-review \
  --scope '{"environments":["production"]}' \
  --text-file ./retry-loop-audit.txt \
  --schedule-interval-secs 86400

Boucles de réessai répétées

Trouvez les sessions où l’agent répète le même appel d’outil échoué sans modifier les paramètres d’entrée, sélectionner un outil alternatif ou escalader vers un humain.

Utilisation incorrecte des outils

Trouvez les sessions où l’outil choisi ne correspond pas à la tâche énoncée, ou où les paramètres d’entrée de l’outil enfreignent les préconditions requises par le workflow.

Accès non autorisé aux données

Trouvez les sessions qui lisent, écrivent ou transmettent des données sensibles en dehors des chemins et services approuvés pour cet agent.

Abandon de tâche

Trouvez les sessions qui se terminent sans le résultat demandé, sans erreur claire ou sans transfert explicite à un humain.

Régression de coût ou de latence

Trouvez les sessions dont la durée totale liée au modèle, aux outils ou à l’ensemble du traitement dépasse le budget prévu, et identifiez le schéma d’événements responsable.

Escalade humaine manquée

Trouvez les sessions où le niveau de confiance, les échecs répétés ou les recommandations de politique exigeaient une décision humaine, mais où l’agent a continué de manière autonome.

Evaluate agents

Find and manage failures