Supervisión de Event logs

Event log le brinda un resumen visual de todos los eventos que ocurren durante una sesión de interacción con el modelo.

En una sesión, puede haber varios eventos con la posibilidad de ver los detalles de un evento específico. Por ejemplo: detalles de la conexión exitosa a modelos fundacionales, envío de indicaciones y recepción de respuestas, sesiones fallidas y exitosas, uso de tokens y otros detalles de eventos. La capacidad de monitorear y ver estos detalles le permite analizar los datos y adoptar medidas preventivas de forma proactiva para la seguridad de los datos, la gobernanza y el cumplimiento.

Puede perfeccionar la búsqueda utilizando los parámetros de búsqueda disponibles, como por ID de sesión para ver todos los tipos de eventos específicos de la sesión seleccionada.

Ver todos los tipos de eventos para una sesión específica

Nota: Desplace el mouse sobre los íconos de acción para identificar funciones específicas para cada uno.

Detalles de la tabla de Event log

La tabla de Event log ordena y muestra detalles según estas columnas:

Detalles de la tabla de Event log

uno

Estado: Muestra si un evento se realizó con éxito o falló.
dos

Hora: Muestra la hora de inicio del evento.
tres

Tipo de evento: Muestra cada tipo de sesión, como por ejemplo: Enviar indicación, respuesta recibida, Model connection y plantilla de indicaciones del activador.

Puede hacer clic en el enlace Tipo de evento para buscar información específica y ver detalles adicionales del evento.
cuatro

Nombre del modelo: Muestra el nombre de la versión del modelo fundamental con el que se interactuó, como los siguientes: Claude para Amazon Bedrock, VertexAI para Google Vertex AI, GPT 3.5 Turbo para Azure OpenAI y otros.
Cinco
Tipo de indicación: Muestra el tipo de indicador utilizado en la automatización. Son los siguientes:
  • Registros de indicaciones de forma libre capturados para todos los Packages de generative AI.
  • Registros de indicaciones de Prompt Template capturados para Prompt Templates.
Seis

Nombre de la automatización: Muestra el nombre de la automatización que utilizó una indicación específica.
Siete

ID de sesión: Muestra el ID de la sesión de automatización.
Ocho

ID del dispositivo: Muestra el ID del dispositivo en el que se ejecutó la automatización.
Nueve

ID de usuario: Muestra el ID del usuario que ejecutó la automatización.

Registros de tipos de eventos compatibles

Los siguientes registros de tipo de evento se capturan para todas las interacciones del modelo en una automatización.
  • Model connection
  • enviar indicador;
  • respuesta recibida;
  • Activador de Prompt Template

En la columna Tipo de evento, haga clic en el enlace para buscar información específica y ver los detalles del evento según los siguientes parámetros. Los detalles varían según el tipo de evento. En la misma pantalla, podrá ver diferentes parámetros para cada tipo de evento.

Detalles del Event log

Nota: En el campo Tipo de automatización, se muestra el tipo de automatización que se utiliza en la sesión de interacción del modelo. Los campos restantes son los mismos que los detalles de la tabla de Event log.

Los detalles del evento se muestran según el Tipo de evento.

Los registros de forma libre (se generan al usar Packages de Generative AI) se capturan en el caso de las automatizaciones ejecutadas con Packages de generative AI y son compatibles con los tipos de eventos Conexión de modelo, Enviar indicaciones y Respuesta recibida.

Repasemos los parámetros de tipo de evento compatibles.

Model connection
  • Plantilla de indicador: Muestra la Prompt Template utilizada al probar la conexión del modelo.
  • Proveedor: Muestra el nombre del proveedor del modelo fundacional, como Azure OpenAI, Google Vertex AI y otros.
  • Número de línea: Muestra el número de línea en el Task Bot donde se utilizó esta conexión.
  • Método de conexión: Muestra el tipo de conexión que se utilizó para conectarse a un modelo. Por ejemplo: Amazon Bedrock, Azure OpenAI y OpenAI se conectan utilizando claves API. Google Vertex AI se conecta con una cuenta de usuario, cuenta de servicio o conexión OAuth de Control Room.
Enviar indicación
  • Indicador: Muestra el texto completo de la indicación que ingresó el usuario.
  • Haga clic en Más detalles para ver la siguiente información:
    • Proveedor: Muestra el nombre del proveedor del modelo fundacional, como Amazon Bedrock, Google Vertex AI, Azure OpenAI, OpenAI y otros.
    • Parámetros: Muestra los valores de los parámetros utilizados para la indicación, como los siguientes: tokens máximos, P superior, temperatura y otros. Estos parámetros varían según los diferentes modelos.
Respuesta recibida
  • Indicador: Muestra el texto completo de la indicación que ingresó el usuario.
  • Respuesta: Muestra la respuesta recibida del modelo.
  • Haga clic en Más detalles para ver información adicional sobre los Tokens consumidos: Muestra la cantidad de tokens consumidos por la interacción del modelo. Esto permite realizar un seguimiento de los tokens consumidos y del saldo.
Prompt Template del activador
  • Plantilla de indicador: Muestra la Prompt Template utilizada al probar la conexión del modelo.