Analysen
Unter Analysen sehen Sie, was Ihr Assistent tatsächlich getan hat. Der Bereich zeichnet auf, wie Besucher seine Antworten bewertet haben, jeden Aufruf an ein KI-Modell, jeden Aufruf Ihrer API, jeden Lauf im Hintergrund und jede Nachricht, die Ihre Leitplanken blockiert haben. Jede Seite des Bereichs zeigt nur an; nichts, was Sie dort tun, ändert Ihre Einrichtung oder das, was Ihre Besucher sehen.
Nutzen Sie ihn, wenn in einem Gespräch etwas schiefging, wenn Sie wissen möchten, was eine Runde gekostet hat, oder wenn Sie prüfen, ob sich Ihre Leitplanken und Toolkits wie gewünscht verhalten. Sie öffnen den Bereich über Analysen in der Seitenleiste.
Seiten in diesem Bereich
Abschnitt betitelt „Seiten in diesem Bereich“| Seite | Was sie aufzeichnet | Was Sie dort finden |
|---|---|---|
| Feedback | Daumen-hoch- und Daumen-runter-Bewertungen der Besucher zu Antworten im Widget | Grund und Kommentar, die KI-Aktion hinter der bewerteten Antwort sowie Triage-Stand und Notizen für Ihr Team |
| KI-Aktionen | Eine Zeile pro Aufruf an ein KI-Modell und eine Zeile pro Gesprächsrunde | Anbieter, Modell, Status und Dauer jedes Aufrufs; Modelle, Versuche, Token und geschätzte Kosten jeder Runde |
| Tool-Läufe | Eine Zeile pro Versuch, Ihre API über ein Toolkit aufzurufen | Endpunkt, Status, Art des Fehlers und Wiederholungen; Anfrage und Antwort jedes Laufs |
| Agentenjobs | Hintergrundläufe, gestartet per Webhook, Zeitplan oder Jetzt ausführen | Status, Besitzer, worauf jeder Job wartet, seine Schritte, Freigaben und Ereignisse |
| Verstöße | Besuchernachrichten, die Ihre Leitplanken blockiert haben | Die Nachricht, die Gründe, die Antwort an den Besucher und die Richtlinienversion |
Vier dieser Listen öffnen eine Detailseite für einen Eintrag: Protokolldetails, Werkzeug-Ausführungsprotokoll Details, Agentenjob und Verstoßdetails.
Was Sie hier tun können
Abschnitt betitelt „Was Sie hier tun können“- Die Antworten finden, die Besuchern nicht gefallen haben. Filtern Sie Bewertungen auf Daumen runter und lesen Sie den Grund neben der KI-Aktion, die die Antwort geschrieben hat. Feedback · Antwortqualität prüfen und verbessern.
- Sehen, warum der Assistent langsam war, scheiterte oder mehr kostete als erwartet. Verfolgen Sie eine Gesprächsrunde Aufruf für Aufruf und Versuch für Versuch, mit Token und geschätzten Kosten in US-Dollar. KI-Aktionen.
- Herausfinden, warum eine Aktion im Gespräch nicht funktioniert hat. Die Läufe zeigen die genaue Anfrage an Ihre API, ihre Antwort und ob der Aufruf abgelehnt wurde, in eine Zeitüberschreitung lief oder nie gesendet wurde. Tool-Läufe.
- Ihre Automatisierungen im Blick behalten. Sehen Sie, welche Hintergrundläufe arbeiten, fertig sind oder auf die Freigabe eines Kunden warten. Agentenjobs.
- Ihre Leitplanken prüfen. Sehen Sie, was Besucher versucht haben und ob gewöhnliche Fragen blockiert werden. Verstöße.
Begriffe, die Sie kennen sollten
Abschnitt betitelt „Begriffe, die Sie kennen sollten“Runden, Aufrufe und Versuche
Abschnitt betitelt „Runden, Aufrufe und Versuche“Eine Besuchernachricht ist eine Runde. Um sie zu beantworten, macht der Assistent einen oder mehrere Aufrufe an KI-Modelle, etwa einen, der ein Tool ausführt, und einen, der die Antwort schreibt, oder Aufrufe von Sub-Agenten. Jeder Aufruf besteht aus einem oder mehreren Versuchen: Fällt ein Anbieter aus, versucht StrikeUp es erneut oder weicht auf ein anderes Modell aus, und jeder Anlauf ist ein Versuch. Der Reiter Aktivität unter KI-Aktionen fasst Versuche zu Aufrufen und Aufrufe zu Runden zusammen.
Aufrufe von StrikeUps eigenen Stufen, etwa die Sicherheitsprüfung Ihrer Leitplanken und der Planer, erscheinen nicht unter KI-Aktionen. Eine Nachricht, die die Sicherheitsprüfung blockiert, erscheint stattdessen unter Verstöße.
Wie die Einträge zusammenhängen
Abschnitt betitelt „Wie die Einträge zusammenhängen“| Von | Sie erreichen | Wie |
|---|---|---|
| Einer Bewertung unter Feedback | Die KI-Aktion, die die bewertete Antwort geschrieben hat | Im Detailfeld der Bewertung |
| Einer KI-Aktion | Die Tools, deren Resultate sie erhielt, mit Namen | Suchen Sie den Tool-Namen unter Tool-Läufe |
| Einer Gesprächsrunde | Jeden Aufruf und Versuch | Aufruf anzeigen im Dialog der Runde |
| Einem Agentenjob | Seine Schritte, Freigaben und Ereignisse | Die eigene Seite des Jobs |
| Einem Verstoß | Nichts weiter | Verstöße erfassen weder Besucher noch Gespräch noch Widget |
Was aufbewahrt und was maskiert wird
Abschnitt betitelt „Was aufbewahrt und was maskiert wird“- Bewertungen, Aufrufe an KI-Modelle, Tool-Läufe und Verstöße werden unbegrenzt aufbewahrt. StrikeUp löscht sie nicht automatisch.
- Automatisch gelöscht werden nur Ereignisse von Agentenjobs. Die Ereignisse eines beendeten Jobs werden gelöscht, sobald sie älter als 7 Tage sind; Job, Schritte und Freigaben bleiben.
- Maskierung gilt nur für die Antworten Ihrer API. Ihre Maskierungsregeln maskieren die Antworten Ihrer API, bevor sie gespeichert werden und bevor die KI sie sieht. Eingaben der Besucher, Tool-Anfragen, Endpunktadressen, blockierte Nachrichten und Kommentare der Besucher werden so gespeichert, wie sie gesendet wurden. Der Fehlertext eines fehlgeschlagenen Tool-Aufrufs erreicht die KI unmaskiert.
- Zugangsdaten werden mit einem Tool-Lauf nie gespeichert, und die Betriebsanweisungen an die KI werden nie angezeigt.
Geschätzte Kosten
Abschnitt betitelt „Geschätzte Kosten“Kosten unter KI-Aktionen und Agentenjobs sind Schätzungen in US-Dollar, für jeden KI-Aufruf beim Ausführen aus dem damals gelisteten Preis des Modells berechnet. Aufrufe ohne Preis tragen nichts bei. Die Schätzung ist keine Rechnung.
Verfügbarkeit
Abschnitt betitelt „Verfügbarkeit“Jedes Konto hat diesen Bereich, ohne Tarif oder Feature-Flag. Jede angemeldete Person kann alle fünf Listen öffnen. Eine Gesprächsrunde unter KI-Aktionen und einen Tool-Lauf zu öffnen, erfordert die Admin-Rolle, ebenso das Ändern des Triage-Stands einer Bewertung. Ihre Besucher sehen keine dieser Seiten. Keine der Seiten aktualisiert sich von selbst; nutzen Sie jeweils die Schaltfläche zum Neuladen.