Grabadora generativa: respaldo de visión

El modelo de respaldo de visión en la grabadora generativa está diseñado para aumentar la resiliencia de la automatización utilizando modelos de visión como un mecanismo de respaldo adicional. El modelo de visión de respaldo mejora la eficacia del respaldo y aporta beneficios como la continuidad del negocio, minimiza el esfuerzo de mantenimiento y se adhiere a los SLA de la organización.

Un modelo de visión de IA, a menudo referido como un modelo de visión por computadora, es un sistema de inteligencia artificial diseñado para interpretar, analizar y comprender datos visuales (como imágenes o videos) mediante técnicas avanzadas de aprendizaje automático. Un modelo de visión de respaldo es un mecanismo utilizado en procesos de automatización para aumentar la resiliencia y reducir fallas de ejecución. Implica usar modelos de visión para identificar cambios y actualizar en tiempo real, lo que asegura que las tareas de automatización continúen sin problemas incluso cuando ocurren cambios inesperados.
Nota: Grabadora generativa, la opción de respaldo basada en texto y la opción de respaldo nativa no utilizan ninguna recomendación de su cuota de Automator AI. Sin embargo, la opción de respaldo de visión de Grabadora generativa consume una recomendación por cada respaldo, pero solo cuando el respaldo se activa realmente en tiempo de ejecución. El número de automatizaciones con respaldo de visión habilitado no afecta su cuota. Las recomendaciones solo se deducen cuando la visión de respaldo se activa durante la ejecución.

Capacidades

La grabadora generativa aprovecha nuestros modelos de conjunto ajustados para la automatización con el objeto de lograr una comprensión visual profunda de las aplicaciones empresariales.

El respaldo de la visión puede hacer lo siguiente:
  • Identificar con precisión las estructuras de interfaz de usuario modificadas que los métodos tradicionales podrían pasar por alto.
  • Adaptarse a los cambios de diseño y distribución sin intervención manual.
  • Mejorar la eficacia de la automatización previniendo fallas.

Para obtener información sobre las funciones disponibles, consulte grabadora generativa.

Para habilitar la opción de respaldo del modelo de visión:
  1. Inicie sesión como Bot Creator.
  2. Desde el Editor de Bot, vaya a Configuración avanzada > Configuración del paquete.
  3. En Configuración del paquete > Grabadora, habilite el Respaldo de IA generativa basado en imágenes.

Configuración de selección de respaldo del modelo de visión

Limpieza de imágenes en respaldo basado en visión

Nota: Es posible que la opción de respaldo basada en visión no funcione correctamente si existe una instalación de Python separada en el sistema, ya que esto puede causar fallos en el enmascaramiento de imágenes. Específicamente, el Python integrado utilizado por el enmascaramiento de imágenes se extrae solo durante la ejecución del bot y no interfiere; sin embargo, cualquier instalación adicional de Python visible en Panel de control > Programas y características puede tener un impacto en las operaciones de respaldo de visión. Para garantizar un rendimiento confiable del respaldo basado en visión, desinstale cualquier instalación de Python de este tipo que se encuentre en Programas y características.

Para mitigar los riesgos de seguridad de datos y privacidad, la grabadora generativa realiza la limpieza de imágenes localmente en su equipo antes de que cualquier dato se envíe fuera de su entorno. Este proceso es manejado completamente por el paquete Grabadora que se ejecuta en el dispositivo.

Durante el proceso de limpieza, se redactan todos los datos comerciales visibles en la imagen de la aplicación capturada. Esto incluye, no solo información de identificación personal (PII), sino también cualquier contenido empresarial sensible que aparezca en la pantalla.

Solo después de que se complete esta limpieza local exhaustiva, la imagen resultante y el texto extraído se envían al servicio de IA basado en la región para un procesamiento adicional. En ningún momento se comparten datos de imagen sin procesar ni limpiar más allá de su entorno.