Verwenden von KI-Governance-Dashboard-Widgets

Verbessern Sie Ihr KI-Governance Dashboard-Erlebnis, indem Sie Daten für Top-Automatisierungen mit KI, Am häufigsten verwendete Modelle und Token-Verbrauch Widgets überprüfen, um KI-Daten anzuzeigen, zu überwachen und zu analysieren, die aus Modellinteraktionen während der Automatisierungsentwicklung und Automatisierungsausführung in Ihrem Unternehmen abgeleitet wurden.

Berechtigungen

GRC Leads, Automation Leads und Pro Developers würden das KI-Governance-Dashboard über diese Einstellungen verwenden, die vom Automation Admin aktiviert werden müssen:
  • Rollen > KI > KI-Dashboards anzeigen
  • Rollen > KI > KI-Eingabeaufforderungsprotokolle anzeigen > KI-Eingabeaufforderungs-Protokoll-Details anzeigen
  • Rollen > KI > KI-Ereignisprotokolle anzeigen > KI-Ereignisprotokolldetails anzeigen
Anmerkung:
Wenn Sie die Einstellung KI-Dashboards anzeigen aktivieren, wird das KI-Governance Dashboard angezeigt. Um noch detailliertere Informationen anzuzeigen und auf die ausführlichen Protokolle in den Registerkarten AI-Eingabeaufforderungsprotokoll und Ereignisprotokoll zuzugreifen, müssen diese zusätzlichen Einstellungen aktiviert werden:
  • KI > KI-Eingabeaufforderungsprotokolle anzeigen > KI-Eingabeaufforderungs-Details anzeigen
  • KI > KI-Ereignisprotokolle anzeigen > KI-Ereignisdetails anzeigen

Einzelheiten finden Sie unter Zuweisung von Rollen und Berechtigungen zur Aktivierung von KI-Governance.

Top-Automatisierungen mit KI Widget

Dieses Dashboard-Widget zeigt ein Balkendiagramm mit den zehn am häufigsten ausgeführten Automatisierungen, die KI-Interaktionen verwenden. Sie können die Namen der zehn wichtigsten Automatisierungen und die Anzahl ihrer Ausführungen in den letzten 24 Stunden sehen. Wenn Sie mit der Maus über eine Automatisierungsleiste im Widget fahren, wird ein Text mit dem Namen der Automatisierung und der Gesamtzahl der Ausführungsläufe angezeigt.

Top-Automatisierungen mit KI-Widget

Drill-down:

Klicken Sie auf ein Balkendiagramm, um in die Tiefe zu gehen und zusätzliche Einzelheiten anzuzeigen. Wenn Sie auf eine Automatisierungsleiste klicken, gelangen Sie zur Registerkarte AI > AI-Governance > AI-Prompt-Protokoll im Control Room. Dort können Sie eine nach Sitzungen sortierte Liste aller Ausführungen der Automatisierung anzeigen. Durch Klicken auf jede Sitzung werden die Details angezeigt. In diesem Bildschirm können Sie den Zeitfilter ändern.

Weitere Informationen finden Sie unter Überwachen von KI-Prompt-Protokoll-Interaktionen.

Anmerkung: Sie werden den Eingabeaufforderungstext, die Eingabeaufforderungsantwort und die Daten zur Einstellung der Modellparameter in den Details der Automatisierungsausführungssitzung nicht sehen, wenn der Pro Developer die Umschaltfläche Datenprotokollierung für eine bestimmte KI-Fähigkeit auf dem Bildschirm KI-Fähigkeiten deaktiviert hat.

Am häufigsten verwendete Modelle Widget

Der GRC-Leiter und der Automatisierungsleiter würden dieses Widget verwenden, um die Modellnutzung für die Am häufigsten verwendete Modelle innerhalb von Automatisierungen zu überwachen und zu verfolgen, um Abonnements effektiv zu verwalten. Dies wird ihnen dabei helfen, die Nutzung genehmigter und unterstützter Modelle der Hyperscaler-Anbieter zu implementieren.

Das Am häufigsten verwendete Modelle-Widget bietet Einblick in die fünf am häufigsten verwendeten Modelle innerhalb von Automatisierungen, die mithilfe von Generative KI Paket und KI-Fähigkeiten Paket in der Produktionsumgebung ausgeführt werden.

Am häufigsten verwendete Modelle-Widget

Lassen Sie uns die Details des Widgets Am häufigsten verwendete Modelle überprüfen. Die Daten werden in einem Balkenformat dargestellt und nach Automatisierungsname, Modellname des Hyperscaler-Anbieters, Paketname und deren Verwendung sortiert. Standardmäßig zeigt das Am häufigsten verwendete Modelle-Widget Daten für die letzten 24 Stunden an. Jeder Balken repräsentiert Folgendes:
  • Der Name der Automatisierung mit dem verwendeten Paket, unabhängig davon, ob Generative KI Pakete oder KI-Fähigkeiten Paket verwendet wurde.
  • Das vom Hyperscaler-Anbieter verwendete Modell, zum Beispiel: GPT-4 von OpenAI

Bewegen Sie den Mauszeiger über einen Balken, um eine Zusammenfassung der Details anzuzeigen.

Drill-down:

Klicken Sie auf ein Balkendiagramm, um in die Tiefe zu gehen und neben der vollständigen Liste der am häufigsten verwendeten Modelle von Hyperscaler-Anbietern weitere Einzelheiten anzuzeigen. Wenn Sie auf die Leiste klicken, gelangen Sie zur Registerkarte KI > KI-Governance > Ereignisprotokoll im Control Room, wo Sie eine nach Modellnamen gefilterte Liste der Protokolle anzeigen können. Die Protokolle werden nach Ereignistyp angezeigt. Wenn Sie auf einen Ereignistyp klicken, können Sie zusätzliche Details zu den Modellinteraktionen einsehen, die während der Automatisierungsausführung stattgefunden haben.

Einzelheiten finden Sie unter Überwachen von Ereignisprotokolle.

  1. Klicken Sie zusätzlich zur Drilldown-Option im Balkendiagramm auf die Auslassungspunkte in der oberen rechten Ecke, um Details anzeigen für eine Detailansicht auszuwählen.
  2. Der KI-Governance-Dashboard-Bildschirm zeigt die Details der Registerkarte Modellnutzung an.
Bildschirm „Details anzeigen“

In der Modellnutzung-Detailansicht für Am häufigsten verwendete Modelle werden die fünf wichtigsten Automatisierungen im Visual sowie die vollständige Liste der Automatisierungsdetails in der Tabelle wie folgt angezeigt. In diesem Bildschirm können Sie den Zeitfilter ändern.

Exportieren Sie Berichte basierend auf den im Widget dargestellten Daten, indem Sie auf Ihrem Bildschirm auf Exportieren > Als CSV exportieren oder Exportieren > Als PDF exportieren klicken.

Modellnutzung Details für Am häufigsten verwendete Modelle

Tabelle 1. Modellnutzung Detailbildschirm für Am häufigsten verwendete Modelle
Spaltenüberschrift Beschreibung
Modellname Dies ist das Modell, das in einer bestimmten Automatisierung wie GPT-4 von OpenAI verwendet wird. Sie können auf das Modell klicken, um zur Registerkarte KI > KI-Governance > Ereignisprotokoll in Control Room zu gelangen, wo Sie alle Protokolle nach Modellnamen gefiltert anzeigen können.

Einzelheiten finden Sie unter Überwachen von Ereignisprotokolle.
Herausgeber Unterstützter Hyperscaler-Anbieter wie Amazon Bedrock, Google Vertex AI, Azure OpenAI oder OpenAI.
Automatisierungen Anzahl der generative KIBefehlsaktionen, die bei Automatisierungsausführungen unter Verwendung von Generative KI Paket und KI-Fähigkeiten Paket verwendet wurden.
KI-Fähigkeiten Anzahl der ausgeführten Anrufautomatisierungen mit KI-Fähigkeiten.
Modellaufrufe Anzahl der Anrufe, die an das Modell getätigt wurden.
Geräte Anzahl der während der Modellinteraktion verwendeten Geräte.

Token-Verbrauch Widget

Das Widget Token-Verbrauch bietet Einblick in Ihre Top-Automatisierungen, die die größte Anzahl aggregierter Token pro Modell verbrauchen. Um die Gesamtanzahl für Token-Verbrauch eines Modells zu ermitteln, werden die Metriken basierend auf dem Automatisierungsnamen, dem Ordnerpfad und dem Modellnamen des Hyperscaler-Anbieters berechnet. Bewegen Sie den Mauszeiger über einen Balken im Widget, um die Token-Verbrauch Details einer bestimmten Automatisierung anzuzeigen.

Token-Verbrauch-Widget

Standardmäßig zeigt das Widget Token-Verbrauch Daten für die letzten 24 Stunden an, die im Detailbildschirm des Widgets in einen anderen Zeitfilter geändert werden können.

Die GRC Leads und Automation Leads würden dieses Widget verwenden, um die Token-Nutzung der Modelle während ihrer Interaktionen und Ausführungen innerhalb von Automatisierungen zu überwachen und zu verfolgen, um Kosten und Abonnements effektiv zu verwalten. Dies wird ihnen dabei helfen, Token-Verbrauch basierend auf der Modellpräferenz zu projizieren..

Anmerkung: Token-Verbrauch Protokolle für die Amazon Bedrock Modelle werden nicht im Token-Verbrauch Widget und im Bildschirm Details anzeigen angezeigt. Die relevanten Felder werden mit dem Wert „0“ angezeigt. Dies ist ein bekanntes Verhalten des Produkts.
Das Widget Token-Verbrauch bietet Ihnen keine Drilldown-Ansicht. Sie können jedoch auf die Auslassungspunkte in der oberen rechten Ecke klicken und Details anzeigen auswählen, um neben der vollständigen Liste der in Automatisierungen verwendeten Modelle und deren Token-Verbrauch weitere Details zu den Token-Verbrauch für die am häufigsten verwendeten Modelle anzuzeigen.
  1. Navigieren Sie zu den Auslassungspunkten in der oberen rechten Ecke jedes Widgets und klicken Sie, um Details anzeigen für eine Detailansicht auszuwählen.
  2. Der KI-Governance-Dashboard-Bildschirm zeigt die Details der Registerkarte Token-Verbrauch an.
Bildschirm „Details anzeigen“

In der Detailansicht Token-Verbrauch werden die fünf wichtigsten Automatisierungen im Visual sowie die vollständige Liste der Automatisierungsdetails in der Tabelle wie folgt angezeigt. In diesem Bildschirm können Sie den Zeitfilter ändern.

Exportieren Sie Berichte basierend auf den im Widget dargestellten Daten, indem Sie auf Ihrem Bildschirm auf Exportieren > Als CSV exportieren oder Exportieren > Als PDF exportieren klicken.

Token-Verbrauch-Details für Modelle

Tabelle 2. Token-Verbrauch-Details-Bildschirm
Spaltenüberschrift Beschreibung
Automatisierungsname Name der Automatisierung, die ausgeführt wurde. Sie können auf den Namen klicken, um zur Registerkarte AI > AI-Governance > AI-Prompt-Log in Control Room zu gelangen, wo Sie alle Protokolle gefiltert nach dem Automatisierungsnamen anzeigen können.

Einzelheiten finden Sie unter Überwachen von KI-Prompt-Protokoll-Interaktionen.
Ordnerpfad Der Speicherort des Ordners der Automatisierungvon wo aus es ausgeführt wurde.
Herausgeber Unterstützter Hyperscaler-Anbieter wie Amazon Bedrock, Google Vertex AI, Azure OpenAI oder OpenAI.
Modellname Dies ist das Modell, das in einer bestimmten Automatisierung wie GPT-4 von OpenAI verwendet wird.
Nutzer Anzahl der Nutzer.
Arbeitsbereich Dies kann der private oder öffentliche Ordner sein, von dem aus die Automatisierung ausgeführt wurde.
KI-Fähigkeiten Anzahl der KI-Fähigkeiten, die in der Automatisierung verwendet werden.
Token Gesamtanzahl der vom Modell verwendeten Token.

Sie können Berichte basierend auf den im Widget dargestellten Daten exportieren, indem Sie auf Ihrem Bildschirm auf Exportieren > Als CSV exportieren oder Exportieren > Als PDF exportieren klicken.