Event log

Event log le brinda un resumen visual de todos los eventos que ocurren durante una sesión de interacción con el modelo.

En una sesión, puede haber varios eventos con la posibilidad de ver los detalles de un evento específico. Por ejemplo: detalles de la conexión exitosa a modelos fundacionales, envío de indicaciones y recepción de respuestas, sesiones fallidas y exitosas, uso de tokens y otros detalles de eventos. La capacidad de monitorear y ver estos detalles le permite analizar los datos y adoptar medidas preventivas de forma proactiva para la seguridad de los datos, la gobernanza y el cumplimiento.

Detalles de la tabla de Event log

Puede perfeccionar la búsqueda mediante los parámetros de búsqueda disponibles, como por ID de sesión para ver todos los eventos específicos de la sesión seleccionada.

Nota: Desplace el mouse sobre los íconos de acción para identificar funciones específicas para cada uno.

La tabla de Event log ordena y muestra detalles según estas columnas:

Detalles de la tabla Event log

uno

Estado: Muestra si un evento se realizó con éxito o falló.

dos

Hora: Muestra la hora de inicio del evento.

tres

Tipo de evento: Muestra cada tipo de sesión, como por ejemplo: Enviar indicador, respuesta recibida, Model connection y activador de AI Skill.

Puede hacer clic en el enlace Tipo de evento para buscar información específica y ver detalles adicionales del evento.

cuatro

Fuente: Muestra dónde se ingresó este indicador en el producto.

cinco

Nombre del modelo: Muestra el nombre de la versión del modelo fundamental con el que se interactuó, como los siguientes: Claude para Amazon Bedrock, VertexAI para Google Vertex AI, GPT 3.5 Turbo para Azure OpenAI y otros.

seis
Tipo de indicador: Muestra el tipo de indicador utilizado en la automatización. Las opciones son:
  • Forma libre (cuando se usan packages de Generative AI).
  • Habilidad de IA ( cuando se usan packages de AI Skills.)
siete

Nombre de la automatización: Muestra el nombre de la automatización que utilizó un indicador específico.

ocho

ID de sesión: Muestra el ID de la sesión de automatización.

nueve

Nombre del dispositivo: Muestra el ID del dispositivo en el que se ejecutó la automatización.

diez

Usuario: Muestra el ID del usuario que ejecutó la automatización.

once

AI guardrail : Muestra la barrera de seguridad específica que se implementa en cada evento.

doce

Ruta de la carpeta: La ubicación de la carpeta de la automatización desde donde se ejecutó.

Registros de tipos de eventos compatibles

Los siguientes registros de tipo de evento se capturan para todas las interacciones del modelo en una automatización.
  • Activador de AI Skill
  • enviar indicador;
  • Model connection
  • respuesta recibida;

En la columna Tipo de evento, haga clic en el enlace para buscar información específica y ver los detalles del evento según los siguientes parámetros. Los detalles varían según el tipo de evento. En la misma pantalla, podrá ver diferentes parámetros para cada tipo de evento.

Detalles de Event log

Nota: En el campo Tipo de automatización, se muestra el tipo de automatización que se utiliza en la sesión de interacción del modelo. Los campos restantes son los mismos que los detalles de la tabla de Event log.

Los registros de forma libre (se generan al usar Generative AI de Packages) se capturan en el caso de las automatizaciones ejecutadas con generative AI de Packages y son compatibles con los tipos de eventos Conexión de modelo, Enviar indicaciones y Respuesta recibida.

Cada evento muestra lo siguiente:
  • Estado: Indica si la conexión con el modelo se estableció correctamente.
  • Tipo de evento: Clasifica el evento como una Model connection.
  • Hora: Especifica la marca de tiempo del intento de conexión.
  • Tipo de indicador: Identifica el tipo de indicador utilizado.
  • Nombre del modelo: Especifica el nombre del modelo de lenguaje utilizado. Por ejemplo: GPT-4.
  • ID de sesión: Un identificador único para la sesión de conexión.
  • Nombre de la automatización Indica el nombre de la automatización.
  • Nombre del dispositivo: Especifica el dispositivo asociado con la automatización.
  • Usuario: Identifica al usuario que inició la automatización.
  • Tipo de automatización: Categoriza el tipo de automatización. Como Bot de tarea, Tarea de API.
  • Barreras de seguridad de la IA asignadas Indica si se asignaron AI Guardrails.
  • Tipo de conexión del modelo: Especifica el tipo de conexión de modelo. El Tipo de conexión del modelo puede ser uno de los siguientes:
    • Estándar
    • Ajustado
    • Anclado en la base de conocimientos
    • Basado en el almacenamiento de datos
    • Basado en el conocimiento de la empresa
    • Basado en la búsqueda de IA

Repasemos los parámetros de tipo de evento compatibles.

AI Skill de activador
  • Detalles de activación de habilidades de IA: Muestra los detalles del indicador utilizado al probar la conexión del modelo.
Enviar indicador
  • Toxicidad: Muestra el puntaje de toxicidad de todo el indicador (System prompt y el indicador del usuario). Si la barrera de seguridad está configurada para bloquear contenido tóxico, el registro puede mostrar que la acción está bloqueada por la barrera de seguridad, lo que indica explícitamente que el AI guardrail está interceptando el indicador antes de que llegue al LLM. Para obtener más información sobre toxicidad, consulte Toxicidad en IA.
  • Indicador del sistema: Muestra el texto completo del indicador del sistema que ingresó el usuario.
  • Indicador del usuario: Muestra el texto completo del indicador del usuario ingresado por el usuario.
  • Haga clic en Más detalles para ver la siguiente información:
    • Editor: Muestra el nombre del editor del modelo fundacional, como Amazon Bedrock, Google Vertex AI, Azure OpenAI, OpenAI y otros.
    • Configuración de la solicitud: Muestra los valores de los parámetros utilizados para el indicador, como los siguientes: tokens máximos, P superior, temperatura y otros. Estos parámetros varían según los diferentes modelos.
Model connection
  • Editor: Muestra el nombre del editor del modelo fundacional, como Amazon Bedrock, Google Vertex AI, Azure OpenAI, OpenAI y otros.
  • Método de conexión: Muestra el tipo de conexión que se utilizó para conectarse a un modelo. Por ejemplo: Amazon Bedrock, Azure OpenAI y OpenAI se conectan usando claves API. Google Vertex AI se conecta con una Cuenta de Usuario, Cuenta de Servicio o conexión OAuth de Control Room.
Respuesta recibida
  • Toxicidad: Muestra el puntaje de toxicidad de todo el indicador (System prompt y el indicador del usuario). Si la barrera de seguridad está configurada para bloquear contenido tóxico, el registro puede mostrar que la acción está bloqueada por la barrera de seguridad, lo que indica explícitamente que el AI guardrail está interceptando el indicador antes de que llegue al LLM.
    Nota: Si el indicador se bloquea antes de llegar al LLM, no se recibirá ninguna respuesta. Por lo tanto, en tales casos, no verá este evento en el registro de eventos. Para obtener más información sobre la configuración de la regla de toxicidad, consulte Crear y gestionar AI Guardrails.
  • Indicador del sistema: Muestra el texto completo del indicador del sistema que ingresó el usuario.
  • Indicador del usuario: Muestra el texto completo del indicador del usuario ingresado por el usuario.
  • Respuesta: Muestra la respuesta recibida del modelo.
  • Haga clic en Más detalles para ver información adicional sobre los Tokens consumidos: Muestra la cantidad de tokens consumidos por la interacción del modelo. Esto permite realizar un seguimiento de los tokens consumidos y del saldo.