किसी एजेंट या वर्कफ़्लो के लिए महत्वपूर्ण विश्वसनीयता संकेतों को ट्रैक करें।
डैशबोर्ड सहेजी गई क्वेरीज़ को एक ऑपरेशनल दृश्य में संयोजित करते हैं। किसी ऐसे निर्णय के चारों ओर एक बनाएं जिसे आप किसी से लेने की अपेक्षा करते हैं—हर उपलब्ध मीट्रिक के चारों ओर नहीं।
Analyze → Queries पर जाएं, एक सहेजी गई क्वेरी बनाएं या खोलें, और इसके परिणाम की पुष्टि करें।
add to dashboard चुनें, फिर एक मौजूदा डैशबोर्ड चुनें या Analyze → Dashboards के तहत एक नया बनाएं।
डैशबोर्ड खोलें, संपादन मोड में प्रवेश करें, टाइलें व्यवस्थित करें, और लेआउट सहेजें।
जब आपको किसी टाइल के पीछे के डेटा या फ़िल्टर को बदलने की आवश्यकता हो तो क्वेरी पर वापस लौटें।
Dashboard CRUD को वर्तमान Cloud CLI द्वारा उजागर नहीं किया गया है। CLI का उपयोग सहेजी गई क्वेरी बनाने और सत्यापित करने के लिए करें, फिर इसे UI में एक डैशबोर्ड में जोड़ें।
Models: volume, latency, token use, error rate, और evaluation scores।
Evaluations: एजेंट या environment द्वारा success rate और score trends।
Tools: call volume, failure rate, duration, और repeat calls।
Hooks and policies: decisions, denials, और policy match rate।
Custom workflow metrics: आपके स्वयं के event fields और SQL से परिणाम।
एक सहेजी गई क्वेरी के साथ शुरू करें, इसके परिणाम की पुष्टि करें, फिर इसे एक टाइल के रूप में जोड़ें। production और development फ़िल्टर को स्पष्ट रखें ताकि test traffic किसी regression को छिपा न दे।
हर डैशबोर्ड को एक owner और एक response question दें, जैसे “क्या checkout-agent की विश्वसनीयता पिछले सप्ताह से बदतर है?”
