Skip to main content
תוצאות מכל הערכה, המתארחות או מהעובד שלך, נוחתות באותם המקומות.

השוואת ניקוד לאורך זמן

עבור אל Observe → evaluations.
  • Recent runs מפרט כל הערכה כשהיא מגיעה: האם היא הגיעה מהמערכת המתארחת (managed) או מהמעריך שלך (customer), הסוכן והסשן, ההערכה וגרסתה, המצב שלה, והניקוד או המדדים שלה.
  • Score over time משרטט את מה שאתה מבקש. בחר add series ובחר סוכן, סביבה, הערכה וסטטיסטיקה: avg, min, max, p50, p75, p90, p95, p99, stddev, או mode. כל סדרה היא שורה אחת; תן לה curve משלה כדי לשרטט אותה על תרשים נפרד. עמוד ההערכות: הרצות אחרונות שתויגו customer, תרשים ניקוד לאורך זמן עם קווי הפניה ב-0.5 ו-0.8, וסדרה אחת המחשבת average של finished_clean בכל הסוכנים והסביבות.
טווח זמן אחד וגודל סל אחד חלים על כל סדרה. סל עדין מוצא תקרית; סל גס מציג מגמה, ויכול להסתיר את הקפיצות שאתה מחפש. דלי שבו לא ניקד כלום הוא פער בקו, לעולם לא אפס, וקווי הפניה מסמנים 0.5 ו-0.8.כל חלק בתצוגה חי ב-URL: share מעתיק אותו, וכל מי שפותח אותו רואה בדיוק את ההשוואה שבנית.
שרטט avg ו-p90 לאותה הערכה כדי לראות האם ממוצע טוב מסתיר זנב גרוע, או אותה הערכה לשני סוכנים, או לייצור וstaging, כדי להשוות ביניהם על ציר אחד. עלויות, latencies וספירות tokens, שנושאות יחידות, משרטטים תחת Observe → metrics, תרשים אחד ליחידה.

הבנת הסיבה לניקוד נמוך של סשן

פתח סשן מ-Observe → sessions; הגריד מכיל את הניקוד של כל סשן מסנן לפי טווח ניקוד. הרכבת הימנית של הסשן מתחילה בסיכום ההערכה, ואז סרגל לכל ניקוד עם נימוק המעריך מתחתיו. תצוגת פרטי סשן המציגה ניקודי הערכה ונימוק לצד הטrace המלא.

ייעוץ עם העוזר

שאל על נתוני הערכה באנגלית פשוטה: “tell me about some of the recent evaluations”, או אילו ניקודי סוכנים בהחלקה. ה-assistant קורא ומנתח את התוצאות וענה בטבלאות שאתה יכול להמשיך איתן, ושאלה ראויה לשמירה יכולה להפוך ל-query או ל-dashboard. עמוד ההערכות לצד העוזר, שעונה על "tell me about some of the recent evaluations" עם סיכום של סך הכל, סטטוסים וניקודים.

צפייה ופעולה

  • Dashboards, תחת Analyze → dashboards, משנים את הניקודים שאתה מתוכן, לכל סוכן וסביבה, לכל הארגון. לוח איכות המציג ממוצע ניקודי הערכה ומגמות לאורך זמן.
  • Alerts מודיעים לך כאשר ניקוד חוצה סף. ראה alerts.
  • כאשר ניקוד מורד בפני סשנים רבים, הרץ audit כדי לגלות למה; כאשר הסיבה היא פעולה ניתנת לחזרה, כתוב policy.