Verstehen Sie, wie AI Evaluations Credits basierend auf der Token-Nutzung in AI Skills- und AI Agents-Bewertungsszenarien verbrauchen.

Lizenzmodell für KI-Bewertungen

AI Evaluations verbrauchen Automation AI Credits, wobei dasselbe zugrunde liegende Credit-Framework verwendet wird wie von AI Agents. Allerdings wird der Verbrauch für Evaluierungen durch Evaluierungsmetriken und Ausführungsumfang bestimmt und nicht durch die Ausführung von Agent-Aufgaben.

  • Enterprise-Plattformlizenz umfasst einen Basispool an Automatisierungs-KI-Credits.

  • Diese Guthaben werden von KI-gestützten Diensten gemeinsam genutzt, einschließlich AI Agents, AI Skills und AI Evaluations.

Automatisierungs-KI-Credits

Automation AI-Credits werden abgezogen, wenn ein AI Evaluations erfolgreich ausgeführt wird. AI Evaluations verbrauchen Credits basierend auf:
  • AI Evaluations verbrauchen KI-Guthaben, wenn automatische Auswertungen ausgewählt werden (kein Verbrauch bei manueller Auswertung).
  • Verbrauchte Tokens für die Auswertung von AI Agents, wenn sie aus einem öffentlichen Arbeitsbereich ausgeführt wird.
  • Für AI Skills werden zusätzliche Tokens verbraucht, wenn Out-of-the-box-Modelle verwendet werden.

  • Der Kreditverbrauch hängt von der Größe des Datensatzes ab.

Jede Evaluation kann je nach Größe des Datensatzes mehrere Modellaufrufe und Agent-Ausführungen auslösen, was sich direkt auf den Kreditverbrauch auswirkt.

Schlüsselinterpretation

  • Tokenbasiertes Abrechnungsmodell:

    AI Evaluations Verbrauch wird vollständig durch Token-Nutzung (Eingabe + Ausgabe) und nicht durch die Anzahl der Ausführungen bestimmt.

  • Kostenhierarchie:

    • AI Skills < AI Agents

    • Eingabetokens < Ausgabetokens

  • Warum der Unterschied:

    • AI Skills Auswertungen umfassen typischerweise einsschrittige Modellantworten

    • AI Agents Auswertungen umfassen mehrstufiges Schlussfolgern, den Einsatz von Tools und Orchestrierung, was die Token-Nutzung und die Kosten erhöht.

  • Praktische Auswirkung:

    Die gesamte Kreditnutzung für eine Evaluation kann wie folgt geschätzt werden:

    Total Credits = 
  (Input Tokens × Input Rate) + 
  (Output Tokens × Output Rate)

    Die Preise variieren je nach Bewertungstyp (Fähigkeiten vs. Agents).

  • Verbraucht außerdem Credits für Agent-Ausführungen, wenn sie aus einem öffentlichen Workspace ausgeführt werden, sowie Credits für die Nutzung von Out-of-the-box-Modellverbindungen. Dieser Verbrauch variiert je nach Größe des Datensatzes.

Kulanzregelung

Wenn gekaufte Credits aufgebraucht sind, können bis zu 10 % zusätzliche Credits als Kulanzpuffer verbraucht werden, um Unterbrechungen von Evaluation-Workflows zu verhindern.

Sichtbarkeit

Administratoren können die mit Auswertungen verbundene Kreditnutzung auf der Control Room Licenses page überwachen, einschließlich:

  • Gesamt gekaufte Credits

  • Verwendete Credits

  • Verbleibendes Guthaben

  • Verwendung des Kulanzvolumens

Regeln für den Verbrauch bei der Ausführung
Berechnet (Credits abgezogen) Nicht berechnet (keine Abrechnung)
AI Evaluations sowohl für öffentliche als auch private berechnet, wenn automatische Auswertung verwendet wird. Bei der Verwendung manueller Auswertung werden Evaluierungen nicht aus öffentlichen und privaten Konten berechnet.
Alle erfolgreichen Bewertungen. Fehlgeschlagene Bewertungen.