Recettes d'audit - Failproof AI

Utilisez ces éléments comme points de départ, puis ajoutez votre agent, votre environnement et le flux de travail attendu.

Tableau de bord
CLI

Accédez à Analyser → Audits → Nouvel audit, copiez une recette dans la description ou le résumé, puis ajoutez l’environnement, l’agent, la période de référence et les URL pertinents. Créez l’audit et inspectez la première exécution avant de le planifier.Le formulaire de création d’audit transforme une recette en vérification exécutable des défaillances en y ajoutant une portée, un contexte, une cadence et des notifications.

Le formulaire de nouvel audit configuré avec un objectif ciblé, un calendrier, une portée d'agent et d'environnement, un contexte et des canaux de notification.

Après la création, confirmez que l’audit apparaît dans la liste avec le statut et le calendrier attendus avant de vous fier aux exécutions récurrentes.

La page Audits où une recette d'audit spécifique à un flux de travail apparaît après la création.

Ouvrez la première exécution et affinez la recette si ses résultats sont plus larges ou plus étroits que le mode de défaillance visé.

Enregistrez une recette dans un fichier texte et joignez-la lors de la création :

fp audits create retry-loop-review \
  --scope '{"environments":["production"]}' \
  --text-file ./retry-loop-audit.txt \
  --schedule-interval-secs 86400

Boucles de réessai répétées

Trouvez les sessions où l’agent répète le même appel d’outil en échec sans modifier les paramètres d’entrée, sélectionner un outil alternatif ou escalader vers un humain.

Utilisation incorrecte d'un outil

Trouvez les sessions où l’outil choisi ne correspond pas à la tâche déclarée, ou où les paramètres d’entrée de l’outil ne respectent pas les préconditions requises par le flux de travail.

Accès non autorisé aux données

Trouvez les sessions qui lisent, écrivent ou transmettent des données sensibles en dehors des chemins et services approuvés pour cet agent.

Abandon de tâche

Trouvez les sessions qui se terminent sans le résultat demandé, sans erreur claire ni transfert explicite à un humain.

Régression de coût ou de latence

Trouvez les sessions dont la durée du modèle, des outils ou la durée totale dépasse le budget prévu, et identifiez le schéma d’événements responsable.

Escalade humaine manquée

Trouvez les sessions où le niveau de confiance, les échecs répétés ou les directives de politique nécessitaient une décision humaine, mais où l’agent a continué de manière autonome.