AI agent
Tool health
Tool performance from real conversations
Tool health from real conversations: confidence, failure rate, latency, and trends for every tool the agent uses.
Sayfayı panelde açAraç sağlığı nasıl ölçülür
Ajan gerçek bir sohbette her araç kullandığında — ürün arama, sipariş takibi — süresi, sonucu ve güveni kaydedilir. Bu sayfa, en az 10 kez kullanılan her araç için son 7 günü kapsar.
Bir çağrı hatayla bittiyse ya da boş döndüyse başarısız sayılır. Genel sağlık, her aracın çağrı sayısıyla ağırlıklandırılmış başarısız olmayan çağrıların oranıdır.
Rakamların anlamı
| Rakam | Anlamı |
|---|---|
| Hata oranı | Hata ya da boş sonuç ÷ tüm çağrılar |
| Ort. güven | Ajanın aracın sonucundan ne kadar emin olduğu. %50'nin altı düşüktür |
| P95 gecikme | Çağrıların %95'i bundan hızlıdır |
| Dikkat gerekiyor | Hata oranı %20'nin üstünde ya da ortalama güven %50'nin altında |
| Eğilim | Dönemin ilk ve ikinci yarısını karşılaştırır: hatalar 10 puandan fazla arttıysa “Kötüleşiyor”, 10 puandan fazla azaldıysa “İyileşiyor” |
Araç sağlığı sayfasını okuyun
- 1Genel sağlık, izlenen araçlar, uyarılar ve dönem.
- 2Bir aracın satırı: çağrılar, gecikme, eğilim ve hata oranı. Ok ayrıntıları açar.
En iyi uygulamalar
- Önce “Dikkat gerekiyor” sekmesini, sonra “En sık hata”yı görmek için “Ayrıntılar”ı açın.
- Başarısız ürün aramaları genellikle müşterilerin satmadığınız bir şeyi ya da kataloğunuzda olmayan kelimelerle sorduğu anlamına gelir; Ürün açıklarına bakın.
- Bilgi bankası aramasında düşük güven yanıtsız sorular demektir; Bilgi önerilerinden yanıtlayın.
- Eskiden çalışan sipariş takibinde ani bir başarısızlık genellikle mağaza bağlantınıza işaret eder; bağlantı sayfasını kontrol edin.
Sık yapılan hatalar ve çözümleri
Sorun“Ajan bu dönemde hiçbir aracı yeterince çağırmadı.”
ÇözümBir araç 7 günde 10 çağrıdan sonra görünür. Rakamlar daha fazla sohbetten sonra çıkar.
SorunBir araç hiç görünmüyor.
ÇözümKapalı olabilir. “Araç ayarları”nı açın ve açık olduğunu kontrol edin.
Demo mağazadan ekran görüntüsü
Sayfanın bölümleri
- 1
Overall health
Weighted average across all tools — confidence minus failures. A drop means something changed.
ÖrnekOverall health drops from 82% to 68%: the “order_tracking” tool started failing after a platform API change. - 2
Tools needing attention
Tools with >20% failure rate or <50% confidence. Open them first to fix the biggest impact.
ÖrnekThe “knowledge_base” tool has 45% confidence — the knowledge base needs updating. - 3
Per-tool details
Calls, confidence, failure rate, latency, p95, and trend for each tool. Sort by any column.
ÖrnekSort by failure rate to see the worst tool first. - 4
Confidence trends
Sparkline per tool showing confidence over time. Improving/stable/degrading badge at a glance.
ÖrnekThe “search_products” tool trend is improving after the catalog sync fixed missing descriptions.
İlgili makaleler
Yanıtınızı bulamadınız mı?