Überwachen von KI-Prompt-Protokoll-Interaktionen
- Zuletzt aktualisiert2024/12/09
Überwachen von KI-Prompt-Protokoll-Interaktionen
KI-Prompt-Protokoll bietet eine konsolidierte Übersicht über alle Sitzungen, die innerhalb einer Automatisierungsausführung für Modellinteraktionen stattfinden.
Innerhalb einer Sitzung kann es zu Interaktionen mit mehreren Modellen kommen. Jeder Automatisierungsausführung wird eine Sitzungs-ID zugewiesen, mit der alle Ereignisse zu einer einzigen Sitzungs-ID zusammengefasst werden können.
Der Link in der Sitzungs-ID Spalte ermöglicht es Ihnen, tiefer einzutauchen und alle Modellinteraktionsdetails anzuzeigen, die innerhalb einer Sitzung für diese Sitzungs-ID aufgetreten sind. Die Detailansicht enthält Eingabeaufforderungen, Antworten und andere Parameter, die mit den Basismodellen ausgetauscht werden. Sie können Ihre Suche nach Sitzungs-ID verfeinern, um zusätzliche Details zu der ausgewählten Sitzung anzuzeigen.
KI-Prompt-Protokoll-Tabellendetails
Die KI-Prompt-Protokoll-Tabelle sortiert und zeigt die Details nach diesen Spalten an:
|
Dauer: Zeigt die Start- und Endzeit der Ausführung einer Sitzung an.
Anmerkung: Diese Informationen sind nicht verfügbar, wenn die Sitzung läuft.
|
|
Startzeit: Zeigt die Startzeit der Ausführung der Sitzung an. |
|
Sitzungs-ID: Zeigt die Sitzungs-ID für eine Automatisierungsausführung an. Eine Sitzung kann aus mehreren Modellinteraktionen bestehen, die Teil der gleichen Automatisierungsausführung sind. Klicken Sie auf den Link Sitzungs-ID, um Details zu allen Modellinteraktionen für diese Sitzung anzuzeigen. |
|
Eingabeaufforderungs-Typ Zeigt die Art des in der Automatisierung verwendeten Prompts an. Zum Beispiel ist Free Form relevant, wenn Generative KI-Pakete verwendet werden oder die Prompt-Vorlage ist relevant, wenn Prompt-Vorlage für generative KI-Pakete verwendet werden. |
|
Automatisierungsname: Zeigt den Namen der Automatisierung an, die die Eingabeaufforderung verwendet hat. |
|
Gerätename: Zeigt die ID des Geräts an, auf dem die Automatisierung ausgeführt wurde.
Anmerkung: Diese Information ist nicht verfügbar, wenn die Aktion im Control Room durchgeführt wurde.
|
|
Nutzer: Zeigt die ID des Nutzers an, der die Automatisierung ausgeführt hat. |
|
Ordnerpfad: Der Ordnerspeicherort der Automatisierung, von dem aus sie ausgeführt wurde. Wenn eine KI-Fähigkeit in eine Automatisierung (übergeordnet oder untergeordnet) integriert ist, wird derselbe Ordnerpfad angezeigt wie der Ordnerpfad der übergeordneten Automatisierung. |
KI-Prompt-Protokoll-Sitzungsdetails
In der KI-Prompt-Protokoll-Tabelle können Sie auf den Link Sitzungs-ID klicken, um weitere Details zu einer Sitzung anzuzeigen.
Details zur Modellinteraktion
Sie können die zusätzlichen Details der Modellinteraktionssitzung auf demselben Bildschirm anzeigen, indem Sie den Namen des für diese Interaktion angezeigten Basismodells erweitern. Klicken Sie auf die Eingabeaufforderung oder die Aktion im Detailbereich, um weitere Details der Eingabeaufforderung oder der Modellantworten anzuzeigen.
| Tabellenelement | Beschreibung |
|---|---|
| Prompt | Zeigt den Eingabeaufforderungs-Text, den der Nutzer bei der Definition der Eingabeaufforderung in das Feld Eingabeaufforderung eingegeben hat. |
| Antwort | Zeigt die vom Modell erhaltene Antwort auf die Eingabeaufforderungs-Anforderung an. |
Normalerweise haben der Automation-Lead und der GRC-Lead die Berechtigung, die zusätzlichen Details für Modellinteraktionen in jeder Sitzung einzusehen, da sie die Protokolle für Compliance und Governance überwachen, um sicherzustellen, dass die Richtlinien bei der Verwendung von Basismodellen innerhalb von Automatisierungen eingehalten werden.
| Tabellenelement | Beschreibung |
|---|---|
| Sitzungsdauer | Zeigt die Start- und Endzeit an. |
| Lieferant | Zeigt den Namen des Anbieters des Basismodells an. |
| Externe Sitzungs-ID | Zeigt die Sitzungs-ID einer bestimmten Modellinteraktion an, die innerhalb einer Sitzung erfasst wurde. Eine einzelne Sitzung kann aus mehreren Modellinteraktionen innerhalb einer einzigen Automatisierungsausführung bestehen. Sie können diese Informationen verwenden, um jede Modellinteraktion in einer Sitzung zu verfolgen. |
| Parameter | Zeigt die für die Eingabeaufforderung verwendeten Parameterwerte an, wie z. B.: Temperatur, Top P, Max Token, Präsenzstrafe und andere. Diese Parameter und ihre Werte variieren je nach Modellanbieter. |
| Aktion | Zeigt die in der Eingabeaufforderung verwendete Modellanbieter-Aktion an. |
| Modell | Zeigt den Versionsnamen des Basismodells an, z. B.: GPT 3.5 Turbo für Azure OpenAI, VertexAI für Google Vertex AI, Claude für Amazon Bedrock und andere. |
| Zeilennummer | Zeigt die Zeilennummer an, in der diese Aktion in der Automatisierung verwendet wurde. Anhand dieser Informationen können Sie die Aktion in der Automatisierung schnell identifizieren. |
Bei einer Automatisierungsausführung mit mehreren Modellinteraktionen sehen Sie im Sitzungsprotokoll für jeden Modellaufruf ein separates erweiterbares Bedienfeld. Dies ist ein typischer Anwendungsfall für Automatisierungen, die für generative KI-Pakete ausgeführt werden.
