Entenda como as AI Evaluations consomem créditos com base no uso de tokens em cenários de avaliação de AI Skills e AI Agents.

Modelo de licenciamento para avaliações de IA

As AI Evaluations consomem Créditos de IA de automação, aproveitando a mesma estrutura de créditos subjacente usada por AI Agents. No entanto, o consumo para avaliações é impulsionado por métricas de avaliação e escopo de execução, em vez da execução de tarefas do agente.

  • A licença de plataforma Enterprise inclui um conjunto básico de créditos de IA de automação.

  • Esses créditos são compartilhados entre serviços com tecnologia de IA, incluindo AI Agents, AI Skills e AI Evaluations.

Créditos de automação de IA

Os créditos de IA de automação são deduzidos quando uma AI Evaluations é executada com sucesso. As AI Evaluations consomem créditos com base em:
  • As AI Evaluations consomem créditos de IA quando avaliações automáticas são selecionadas (sem consumo para avaliação manual).
  • Tokens consumidos para avaliar os AI Agents quando executados a partir do espaço de trabalho público.
  • Para AI Skills, tokens adicionais são consumidos quando modelos prontos para uso são usados.

  • O consumo de créditos depende do tamanho do conjunto de dados.

Cada avaliação pode acionar várias chamadas de modelo e execuções de agente, dependendo do tamanho do conjunto de dados, o que afeta diretamente o consumo de créditos.

Interpretação principal

  • Modelo de cobrança baseado em tokens:

    o consumo de AI Evaluations é impulsionado inteiramente pelo uso de tokens (entrada + saída) em vez da contagem de execuções.

  • Hierarquia de custos:

    • AI Skills < AI Agents

    • Tokens de entrada < Tokens de saída

  • Por que a diferença:

    • as avaliações de AI Skills normalmente envolvem respostas de modelo em uma única etapa

    • As avaliações de AI Agents envolvem raciocínio em várias etapas, uso de ferramentas e orquestração, aumentando a utilização de tokens e o custo.

  • Implicação prática:

    o consumo total de créditos para uma avaliação pode ser estimado como:

    Total Credits = 
  (Input Tokens × Input Rate) + 
  (Output Tokens × Output Rate)

    as taxas variam conforme o tipo de avaliação (habilidades vs. agentes).

  • Além disso, consome créditos para a execução de agentes quando executado a partir de um espaço de trabalho público, bem como créditos para o uso de conexões de modelo prontas para uso. Esse consumo varia com base no tamanho do conjunto de dados.

Política de carência

Se os créditos adquiridos forem esgotados, até 10% de créditos adicionais podem ser consumidos como uma margem de tolerância para evitar interrupções nos fluxos de trabalho de avaliação.

Visibilidade

Administradores podem monitorar o uso de créditos relacionado a avaliações na página de Licenças da Control Room, incluindo:

  • Total de créditos adquiridos

  • Créditos usados

  • Saldo restante

  • Utilização de volume de cortesia

Regras de consumo de avaliação
Cobrado (créditos deduzidos) Não cobrado (sem dedução)
As AI Evaluations são cobradas tanto para uso público quanto privado quando se utiliza a avaliação automática. As avaliações não são cobradas para uso público nem privado quando se utiliza a avaliação manual.
Todas as avaliações bem-sucedidas. Avaliações com falha.