KI-Prompt-Protokoll-Interaktionen überwachen

KI-Prompt-Protokoll bietet eine konsolidierte Übersicht über alle Sitzungen, die innerhalb einer Automatisierungsausführung für Modellinteraktionen stattfinden.

Innerhalb einer Sitzung kann es zu Interaktionen mit mehreren Modellen kommen. Jeder Automatisierungsausführung wird eine Sitzungs-ID zugewiesen, mit der alle Ereignisse zu einer einzigen Sitzungs-ID zusammengefasst werden können.

Der AI-Governance > AI-Aufforderungsprotokoll > Sitzungs-ID Link in der Sitzungs-ID Spalte ermöglicht es Ihnen, tiefer einzutauchen und alle Modellinteraktionsdetails anzuzeigen, die innerhalb einer Sitzung für diese Sitzungs-ID aufgetreten sind. Die Detailansicht enthält Eingabeaufforderungen, Antworten und andere Parameter, die mit den Basismodellen ausgetauscht werden. Sie können Ihre Suche nach Sitzungs-ID verfeinern, um zusätzliche Details zu der ausgewählten Sitzung anzuzeigen.

Anmerkung: Bewegen Sie Ihren Cursor über die Symbole der Aktionsschaltflächen, um die spezifischen Funktionen zu identifizieren.

KI-Prompt-Protokoll-Tabellendetails

Die KI-Prompt-Protokoll-Tabelle sortiert und zeigt die Details nach diesen Spalten an:

KI-Eingabeprotokoll-Updates

eins
Dauer: Zeigt die Start- und Endzeit der Ausführung einer Sitzung an.
Anmerkung: Diese Informationen sind nicht verfügbar, wenn die Sitzung läuft.
zwei

Startzeit: Zeigt die Startzeit der Ausführung der Sitzung an.
drei

Sitzungs-ID: Zeigt die Sitzungs-ID für eine Automatisierungsausführung an. Eine Sitzung kann aus mehreren Modellinteraktionen bestehen, die Teil der gleichen Automatisierungsausführung sind. Klicken Sie auf den Link Sitzungs-ID, um Details zu allen Modellinteraktionen für diese Sitzung anzuzeigen.
vier

Eingabeaufforderungs-Typ Zeigt die Art des in der Automatisierung verwendeten Prompts an. Zum Beispiel ist Free Form relevant, wenn Generative KI-Pakete verwendet werden oder die Prompt-Vorlage ist relevant, wenn Prompt-Vorlage für generative KI-Pakete verwendet werden.
fünf

Automatisierungsname: Zeigt den Namen der Automatisierung an, die die Eingabeaufforderung verwendet hat.
sechs
Gerätename: Zeigt die ID des Geräts an, auf dem die Automatisierung ausgeführt wurde.
Anmerkung: Diese Information ist nicht verfügbar, wenn die Aktion im Control Room durchgeführt wurde.
sieben

Nutzer: Zeigt die ID des Nutzers an, der die Automatisierung ausgeführt hat.
acht

KI-Schutzvorrichtung : Zeigt die spezifische Schutzvorrichtung, die auf jede KI-Sitzung angewendet wird.
neun

Ordnerpfad: Der Ordnerspeicherort der Automatisierung, von dem aus sie ausgeführt wurde. Wenn eine KI-Fähigkeit in eine Automatisierung (übergeordnet oder untergeordnet) integriert ist, wird derselbe Ordnerpfad angezeigt wie der Ordnerpfad der übergeordneten Automatisierung.

KI-Prompt-Protokoll-Sitzungs- und Modellinteraktionsdetails

In der KI-Prompt-Protokoll-Tabelle können Sie auf den Link Sitzungs-ID klicken, um weitere Details zu einer Sitzung anzuzeigen.

Sie können die zusätzlichen Details der Modellinteraktionssitzung auf demselben Bildschirm anzeigen, indem Sie den Namen des für diese Interaktion angezeigten Basismodells erweitern. Klicken Sie auf die Eingabeaufforderung oder die Aktion im Detailbereich, um weitere Details der Eingabeaufforderung oder der Modellantworten anzuzeigen.

Anmerkung: Das Feld Automatisierungstyp zeigt den Modelltyp an, für den das Basismodell in der Modellinteraktionssitzung verwendet wurde. Die übrigen Felder sind die gleichen wie in den KI-Prompt-Protokoll-Tabellendetails.

Modellinteraktionsdetails

TabellenelementBeschreibung
KI-Schutzvorrichtung zugewiesen Zeigt die spezifische Schutzvorrichtung an, die auf jede KI-Sitzung angewendet wird.
Toxizität Zeigt den Toxizitätsgrad der Eingabeaufforderung und der Antwort an.
Prompt Zeigt den Eingabetext, den der Nutzer im Feld Nutzer-Eingabeaufforderung eingegeben hat, wenn die Eingabeaufforderung definiert wird.
Antwort Zeigt die vom Modell erhaltene Antwort auf die Eingabeaufforderungs-Anforderung an.

Normalerweise haben der Automation-Lead und der GRC-Lead die Berechtigung, die zusätzlichen Details für Modellinteraktionen in jeder Sitzung einzusehen, da sie die Protokolle für Compliance und Governance überwachen, um sicherzustellen, dass die Richtlinien bei der Verwendung von Basismodellen innerhalb von Automatisierungen eingehalten werden.

Klicken Sie auf Mehr Details, um zusätzliche Parameter für die Modellinteraktion anzuzeigen:
Anmerkung: Dieser zusätzliche Drill-Down ist nur für Pro-Entwickler verfügbar, wenn die entsprechende Berechtigung vom Automatisierungsadministrator aktiviert ist ( Verwaltung > Rollen > KI-Governance > KI-Aufforderungsprotokolle anzeigen > KI-Aufforderungsdetails anzeigen). Andernfalls können sie nur die Sitzungsdetails der ersten Ebene einsehen.

TabellenelementBeschreibung
Sitzungsdauer Zeigt die Start- und Endzeit an.
Herausgeber Zeigt den Namen des Anbieters des Basismodells an.
Modell Zeigt den Versionsnamen des Basismodells an, z. B.: GPT 3.5 Turbo für Azure OpenAI, VertexAI für Google Vertex AI, Claude für Amazon Bedrock und andere.
Externe Sitzungs-ID Zeigt die Sitzungs-ID einer bestimmten Modellinteraktion an, die innerhalb einer Sitzung erfasst wurde. Eine einzelne Sitzung kann aus mehreren Modellinteraktionen innerhalb einer einzigen Automatisierungsausführung bestehen. Sie können diese Informationen verwenden, um jede Modellinteraktion in einer Sitzung zu verfolgen.
Parameter Zeigt die für die Eingabeaufforderung verwendeten Parameterwerte an, wie z. B.: Temperatur, Top P, Max Token, Präsenzstrafe und andere. Diese Parameter und ihre Werte variieren je nach Modellanbieter.
Antwortkonfigurationen Zeigt die für die Eingabeaufforderung verwendeten Parameterwerte an, wie z. B.: Temperatur, Top P, Max Token, Präsenzstrafe und andere. Diese Parameter und ihre Werte variieren je nach Modellanbieter.
Antwortattribute Zeigt die Attribute mit den Werten aus der Antwort an.
Modellverbindungstyp Gibt den Typ der Modellverbindung an. Der Modellverbindungstyp kann einer der folgenden sein:
  • Standard
  • Fein abgestimmt
  • Durch Wissensdatenbank geerdet
  • Durch Datenspeicher geerdet
  • Grounded by Enterprise Knowledge
  • Grounded durch AI search
Tipp: Bei einer Automatisierungsausführung mit mehreren Modellinteraktionen sehen Sie im Sitzungsprotokoll für jeden Modellaufruf ein separates erweiterbares Bedienfeld. Dies ist ein typischer Anwendungsfall für Automatisierungen, die für generative KI-Pakete ausgeführt werden.