Grabadora generativa: respaldo basado en visión

El respaldo basado en visión de la grabadora generativa está diseñado para aumentar la resiliencia de la automatización mediante el uso de modelos de visión como un mecanismo de respaldo adicional. El respaldo basado en visión mejora la eficacia del respaldo y ofrece beneficios como la continuidad operativa, la minimización del esfuerzo de mantenimiento y el cumplimiento de los SLA de la organización.

Un modelo de visión de IA, a menudo referido como un modelo de visión por computadora, es un sistema de inteligencia artificial diseñado para interpretar, analizar y comprender datos visuales (como imágenes o videos) mediante técnicas avanzadas de aprendizaje automático. Un mecanismo de respaldo basado en visión es una solución empleada en procesos de automatización para incrementar la resiliencia y disminuir las fallas de ejecución. Implica usar modelos de visión para identificar cambios y actualizar en tiempo real, lo que asegura que las tareas de automatización continúen sin problemas incluso cuando ocurren cambios inesperados.
Nota: Grabadora generativa, la opción de respaldo basada en texto y la opción de respaldo nativa no utilizan ninguna recomendación de su cuota de Automator AI. Sin embargo, la opción de respaldo basada en visión de Grabadora generativa consume una recomendación por cada respaldo, pero solo cuando el respaldo se activa realmente en tiempo de ejecución. La cantidad de automatizaciones con respaldo basado en visión habilitado no afecta su cuota. Las recomendaciones solo se deducen cuando el respaldo basado en visión se activa durante la ejecución.

Capacidades

La grabadora generativa aprovecha nuestros modelos de conjunto ajustados para la automatización con el objeto de lograr una comprensión visual profunda de las aplicaciones empresariales.

El respaldo basado en visión puede hacer lo siguiente:
  • Identificar con precisión las estructuras de interfaz de usuario modificadas que los métodos tradicionales podrían pasar por alto.
  • Adaptarse a los cambios de diseño y distribución sin intervención manual.
  • Mejorar la eficacia de la automatización previniendo fallas.

Para obtener información sobre las funciones disponibles, consulte grabadora generativa.

Para habilitar el respaldo basado en visión:
  1. Inicie sesión como Bot Creator.
  2. Desde el Editor de Bot, vaya a Configuración avanzada > Configuración del paquete.
  3. En Configuración del paquete > Grabadora, habilite el Respaldo de IA generativa basado en visión.

Configuración de selección de respaldo basada en visión

Limpieza de imágenes en respaldo basado en visión

Nota: Es posible que la opción de respaldo basada en visión no funcione correctamente si existe una instalación de Python separada en el sistema, ya que esto puede causar fallos en el enmascaramiento de imágenes. Específicamente, el Python integrado utilizado para el enmascaramiento de imágenes se extrae únicamente durante la ejecución del bot y no interfiere; sin embargo, cualquier instalación adicional de Python visible en Panel de control > Programas y características puede tener un impacto en las operaciones de respaldo basado en visión. Para garantizar un rendimiento confiable del respaldo basado en visión, desinstale cualquier instalación de Python de este tipo que se encuentre en Programas y características.

Para mitigar los riesgos de seguridad de datos y privacidad, la grabadora generativa realiza la limpieza de imágenes localmente en su equipo antes de que cualquier dato se envíe fuera de su entorno. Este proceso es manejado completamente por el paquete Grabadora que se ejecuta en el dispositivo.

La configuración Elegir método de limpieza de imágenes le permite seleccionar cómo y dónde se realiza esta limpieza. Las siguientes opciones están disponibles para la limpieza:
  • Limpieza basada en la nube: Se envían capturas de pantalla de la aplicación de destino de forma segura a Servicio en la nube de Automation Anywhere. Una vez recibidas, las imágenes se limpian automáticamente en la nube antes de ser procesadas por el modelo de IA para su análisis.

    Puede seleccionar esta opción si prefiere un procesamiento centralizado para mejorar el rendimiento y minimizar el impacto en el desempeño del dispositivo local.

  • Limpieza local: La limpieza de las capturas de pantalla se produce directamente en su dispositivo antes de que cualquier imagen se envíe para el análisis de IA.

    Puede elegir esta opción si su organización prioriza el manejo local de datos, el cumplimiento normativo o entornos de red restringidos.

Durante el proceso de limpieza, se redactan todos los datos comerciales visibles en la imagen de la aplicación capturada. Esto incluye, no solo información de identificación personal (PII), sino también cualquier contenido empresarial sensible que aparezca en la pantalla.

Solo después de que se complete esta limpieza local exhaustiva, la imagen resultante y el texto extraído se envían al servicio de IA basado en la región para un procesamiento adicional. En ningún momento se comparten datos de imagen sin procesar ni limpiar más allá de su entorno.