감사 레시피 - Failproof AI

이 레시피들을 시작 목표로 활용한 뒤, 에이전트와 환경, 예상 워크플로우를 추가하세요.

대시보드
CLI

분석 → 감사 → 새 감사로 이동하여 레시피 중 하나를 설명 또는 요약란에 붙여넣은 다음, 관련 환경, 에이전트, 조회 기간, 참조 URL을 추가하세요. 감사를 생성한 후 예약하기 전에 첫 번째 실행 결과를 확인하세요.새 감사 양식은 범위, 컨텍스트, 주기, 알림을 추가하여 레시피를 실행 가능한 오류 점검으로 변환합니다.

집중된 목표, 일정, 에이전트 및 환경 범위, 컨텍스트, 알림 채널이 설정된 새 감사 양식.

생성 후에는 반복 실행에 의존하기 전에 감사가 예상 상태 및 일정과 함께 목록에 표시되는지 확인하세요.

첫 번째 실행 결과를 열어보고, 발견된 내용이 의도한 오류 모드보다 너무 광범위하거나 좁다면 레시피를 수정하세요.

레시피를 텍스트 파일로 저장한 후 생성 시 첨부하세요:

fp audits create retry-loop-review \
  --scope '{"environments":["production"]}' \
  --text-file ./retry-loop-audit.txt \
  --schedule-interval-secs 86400

반복 재시도 루프

에이전트가 입력을 변경하거나 대체 도구를 선택하거나 사람에게 에스컬레이션하지 않고 동일한 실패 도구 호출을 반복하는 세션을 찾습니다.

잘못된 도구 사용

선택한 도구가 명시된 작업과 일치하지 않거나, 도구 입력이 워크플로우의 필수 전제 조건을 위반하는 세션을 찾습니다.

안전하지 않은 데이터 접근

에이전트에 승인된 경로와 서비스 외부에서 민감한 데이터를 읽거나 쓰거나 전송하는 세션을 찾습니다.

작업 중단

요청된 결과, 명확한 오류, 또는 사람에 대한 명시적인 인계 없이 종료된 세션을 찾습니다.

비용 또는 지연 시간 회귀

모델, 도구 또는 전체 실행 시간이 예상 한도를 초과하는 세션을 찾고, 원인이 되는 이벤트 패턴을 식별합니다.

사람 에스컬레이션 누락

신뢰도 부족, 반복된 실패, 또는 정책 지침으로 인해 사람의 판단이 필요했음에도 에이전트가 자율적으로 계속 실행한 세션을 찾습니다.