FailproofAI Observability, FailproofAI’dan bir kurumsal üründür. Onu çalışırken görmek ister misiniz? Demo talep edin: nikita@befailproof.ai adresine e-posta gönderin.
Bunu çalışırken görün
İki kısa video, ekiplerin ilk olarak başvurduğu iki şeyi gösterir: bir çalışmayı izlemek ve hataları otomatik olarak bulmak. Ajan izleme: hedeften araçlara ve nihai cevaba kadar tek bir çalışmayı adım adım izleyin. Failproof Denetim: FailproofAI Observability’nin oturumlar arasında günlüklerinizi aramasına ve düzeltmeniz gerekeni size söylemesine izin verin.Ekipler neden kullanır
- Ajanınızın aslında ne yaptığını görün. Her çalışma, okunabilir bir git tarzı yürütme grafiğine dönüşür: hangi araçlar paralel çalıştı, hangi alt-ajanlar dal oluşturdu, nerede takılı kaldı ve ne harcadı.
- Kalite gerileme durumlarını otomatik olarak yakalayın. Küçük bir puanlama hizmetini bağlayın ve FailproofAI Observability her tamamlanan çalışmayı puanlar, böylece yararlılıkta düşüş veya halüsinasyonlarda ani artış kendi başına görünür.
- Bir kural yazmadığınız hataları bulun. Yinelenen denetimler, oturumlar arasında günlüklerinizi inceleyerek hata kümelerini, gecikme aykırı değerlerini, düşük puanları ve takılmış çalışmaları bulur ve ardından size sıralanmış, kanıtla desteklenen bulgular sunar.
- Önemli olduğunda haber alın. Eşik kuralları, hata oranı, gecikme, maliyet veya değerlendirici puanları üzerinde tetiklenir ve kabul edebileceğiniz, atayabileceğiniz ve çözebileceğiniz olaylar açılır.
- Düz İngilizce ile soru sorun. Pano içi bir yapay zeka asistanı, kendi verileriniz üzerinde “bu hafta üretimde kalite nasıl gidiyor?” gibi soruları cevaplar. Yaptığı herhangi bir değişiklik onay gatesinin ardından gelir.
- Verilerinizi tutun. FailproofAI Observability kendinden barındırılan bir sistemdir: olaylar, istemler ve analizler kontrol ettiğiniz altyapıda kalır.
Ne elde edersiniz
FailproofAI Observability, üç fikir etrafında organize edilir (observe, analyze ve admin), panonun sol kenar çubuğunda da yansıtılır. Observe (ne olduğunun ham gerçeği):- Event stream: her çalışmanın canlı, adım adım izi (araç çağrıları, model çağrıları, kancalar, hatalar).
- Sessions: bu olaylar çalışma başına bir satıra katlanır; her biri puanlanmaya hazır ve git tarzı bir yürütme grafiği ile birlikte.
- Performance metrics: yüzey başına gecikme ısı haritaları ve modeller, araçlar ve kancalar için p50/p95/p99 hayat bulguları, böylece kuyruk artışı ortalamanın dışında öne çıkar.
- Error tracking: yanlış giden her şey için tek bir triage yüzeyi, ateşlenen bir uyarıdan bir tık uzakta.
- Queries ve dashboards: olaylarınız ve değerlendirmeleriniz üzerinde kaydedilmiş SQL, paylaşılan, org kapsamlı panolara çizilmiş.
- Evaluations: kendi değerlendirici hizmetiniz tarafından üretilen kalite puanları, puanlar başına akıl yürütme ile.
- Audits: oturumlar arasında hata desenleri yüzeye çıkaran yinelenen araştırmalar.
- Alerts ve incidents: sizi sayfaya çeken eşik kuralları, ayrıca bunları triage etmek için bir olay iş akışı.
- CLI: tüm dağıtımınızı terminalden veya bir betiğin tarafından çalıştırın ve bir kodlama ajanının bunu düz İngilizce ile yapmasına izin verin.
- AI assistant: ajanlarınız hakkında düz İngilizce ile soru sorun, doğrudan pano içinde.
- API keys: toplayıcı, pano ve asistan için kapsamlı jetonlar.
- Users: şifresiz, e-posta tabanlı giriş ve bir beyaz liste ile.
- Settings: org başına yapılandırma, model bağlam penceresine sahip geçersiz kılmaları içerir.
Parçaların nasıl bir araya geldiği
Veriler tek yönde akar, ajan kodunuzdan panoya: ajanınız (Python SDK aracılığıyla) olayları agenteye-collector’e yayar, bu da bunları sunucuya gönderi, sunucu da panoyu sunar. İki isteğe bağlı hizmet bunu tamamlar — bir puanlama hizmeti (evaluations) ve bir AI asistan hizmeti (pano içi sohbet).- Python SDK: ajanınıza birkaç
agenteye.event.*çağrısı eklersiniz; olaylar yerel olarak arabelleğe alınır. - agenteye-collector: her ajan makinasında bulunan ve olayları toplu olarak sunucuya gönderen hafif bir daemon.
- Server: olaylarınızı alır ve operasyonel durumu kendi veritabanlarınızda tutar.
- Dashboard: her şeyi keşfettiğiniz yer.
- Optional services: bir puanlama hizmeti (evaluations) ve bir AI asistan hizmeti (pano içi sohbet).
FailproofAI Observability’yi Alma
FailproofAI Observability, FailproofAI’dan bir kurumsal üründür ve FailproofAI Enforcement — politika ve koruma ürünü — ile FailproofAI markası altında birlikte çalışır. Tamamen kendi ortamınızda çalışır. Henüz paketlere erişiminiz yoksa demo talep edin ve sizi ayarlayacağız: nikita@befailproof.ai adresine e-posta gönderin.Sonraki adımlar
- Concepts: FailproofAI Observability kelime dağarcığı tek bir yerde.
- Observability: ajanlarınızın ne yaptığını çalışma bazında izleyin.
- Security: FailproofAI Observability verilerinizi nasıl izole tutar ve kontrol altında tutar.