Skip to main content
Kết quả từ mỗi đánh giá, được lưu trữ hoặc từ worker của riêng bạn, đều được lưu tới những nơi giống nhau.

​
So sánh điểm theo thời gian

Đi tới Observe → evaluations.
  • Recent runs liệt kê từng đánh giá khi nó được ghi nhận: cho dù nó đến từ người đánh giá được lưu trữ (managed) hay từ người đánh giá của bạn (customer), agent và phiên, đánh giá và phiên bản của nó, trạng thái và điểm hoặc chỉ số của nó.
  • Score over time vẽ biểu đồ những gì bạn yêu cầu. Chọn add series và lựa chọn một agent, một môi trường, một đánh giá, và một thống kê: avg, min, max, p50, p75, p90, p95, p99, stddev, hoặc mode. Mỗi series là một dòng; tạo curve riêng cho nó để vẽ nó trên biểu đồ riêng. Trang đánh giá: các lần chạy gần đây được gắn thẻ customer, biểu đồ điểm theo thời gian với các đường tham chiếu ở 0.5 và 0.8, và một series lấy trung bình finished_clean trên tất cả các agent và môi trường.
Một phạm vi thời gian và một kích thước bin áp dụng cho mỗi series. Một bin nhỏ tìm thấy một sự cố; một bin lớn hơn thể hiện một xu hướng, và có thể ẩn các đỉnh bạn đang tìm kiếm. Một bucket mà không có gì được ghi điểm là một khoảng trống trong dòng, không bao giờ là số không, và các đường tham chiếu đánh dấu 0.5 và 0.8.Mỗi phần của chế độ xem nằm trong URL: share sao chép nó, và bất kỳ ai mở nó sẽ thấy chính xác so sánh bạn đã xây dựng.
Vẽ biểu đồ avg và p90 cho cùng một đánh giá để xem liệu một trung bình tốt có đang ẩn một đuôi xấu, hoặc cùng một đánh giá cho hai agent, hoặc cho production và staging, để so sánh chúng trên một trục. Chi phí, độ trễ và số lượng token, mang các đơn vị, được vẽ biểu đồ dưới Observe → metrics, một biểu đồ cho mỗi đơn vị.

​
Xem lý do tại sao một phiên ghi điểm thấp

Mở một phiên từ Observe → sessions; lưới thể hiện các điểm của mỗi phiên và lọc theo phạm vi điểm. Thanh bên phải của phiên bắt đầu với tóm tắt đánh giá, sau đó là một thanh cho mỗi điểm với lý do của người đánh giá dưới nó. Chế độ xem chi tiết phiên hiển thị điểm đánh giá và lý do bên cạnh dấu vết hoàn chỉnh.

​
Hỏi trợ lý

Hỏi về dữ liệu đánh giá bằng tiếng Anh đơn giản: “tell me about some of the recent evaluations”, hoặc điểm của các agent nào đang giảm. Trợ lý đọc và phân tích kết quả và trả lời bằng các bảng bạn có thể theo dõi, và một câu hỏi đáng giữ có thể trở thành một query hoặc một dashboard. Trang đánh giá bên cạnh trợ lý, trợ lý trả lời "tell me about some of the recent evaluations" bằng tóm tắt tổng số, trạng thái và điểm.

​
Giám sát và hành động

  • Dashboards, dưới Analyze → dashboards, theo dõi xu hướng các điểm bạn giới thiệu, trên mỗi agent và môi trường, cho toàn bộ tổ chức. Bảng điều khiển chất lượng hiển thị các điểm đánh giá trung bình và xu hướng theo thời gian.
  • Alerts thông báo cho bạn khi một điểm vượt qua ngưỡng. Xem alerts.
  • Khi một điểm giảm trong nhiều phiên, chạy một audit để tìm hiểu lý do; khi nguyên nhân là một hành động có thể lặp lại, viết một policy.