Grabadora generativa: respaldo basado en visión

El respaldo basado en visión de la grabadora generativa está diseñado para aumentar la resiliencia de la automatización mediante el uso de modelos de visión como un mecanismo de respaldo adicional. El respaldo basado en visión mejora la eficacia del respaldo y ofrece beneficios como la continuidad operativa, la minimización del esfuerzo de mantenimiento y el cumplimiento de los SLA de la organización.

Un modelo de visión de IA, a menudo referido como un modelo de visión por computadora, es un sistema de inteligencia artificial diseñado para interpretar, analizar y comprender datos visuales (como imágenes o videos) mediante técnicas avanzadas de aprendizaje automático. Un mecanismo de respaldo basado en visión es una solución empleada en procesos de automatización para incrementar la resiliencia y disminuir las fallas de ejecución. Implica usar modelos de visión para identificar cambios y actualizar en tiempo real, lo que asegura que las tareas de automatización continúen sin problemas incluso cuando ocurren cambios inesperados.
Nota: Grabadora generativa, la opción de respaldo basada en texto y la opción de respaldo nativa no utilizan ninguna recomendación de su cuota de Automator AI. Sin embargo, la opción de respaldo basada en visión de Grabadora generativa consume una recomendación por cada respaldo, pero solo cuando el respaldo se activa realmente en tiempo de ejecución. La cantidad de automatizaciones con respaldo basado en visión habilitado no afecta su cuota. Las recomendaciones solo se deducen cuando el respaldo basado en visión se activa durante la ejecución.

Capacidades

La grabadora generativa aprovecha nuestros modelos de conjunto ajustados para la automatización con el objeto de lograr una comprensión visual profunda de las aplicaciones empresariales.

El respaldo basado en visión puede hacer lo siguiente:
  • Identificar con precisión las estructuras de interfaz de usuario modificadas que los métodos tradicionales podrían pasar por alto.
  • Adaptarse a los cambios de diseño y distribución sin intervención manual.
  • Mejorar la eficacia de la automatización previniendo fallas.

Para obtener información sobre las funciones disponibles, consulte grabadora generativa.

Para habilitar el respaldo basado en visión:
  1. Inicie sesión como Bot Creator.
  2. Desde el Editor de Bot, vaya a Configuración avanzada > Configuración del paquete.
  3. En Configuración del paquete > Grabadora, habilite el Respaldo de IA generativa basado en visión.
    Nota: Recomendamos configurar el tiempo de espera de respaldo de visión en 90 segundos o más para garantizar un funcionamiento confiable en sus entornos.

Configuración de selección de respaldo basada en visión

Limpieza de imágenes en respaldo basado en visión

Nota: Es posible que la opción de respaldo basada en visión no funcione correctamente si existe una instalación de Python separada en el sistema, ya que esto puede causar fallos en el enmascaramiento de imágenes. Específicamente, el Python integrado utilizado para el enmascaramiento de imágenes se extrae únicamente durante la ejecución del bot y no interfiere; sin embargo, cualquier instalación adicional de Python visible en Panel de control > Programas y características puede tener un impacto en las operaciones de respaldo basado en visión. Para garantizar un rendimiento confiable del respaldo basado en visión, desinstale cualquier instalación de Python de este tipo que se encuentre en Programas y características.

La limpieza de imágenes en la grabadora generativa le permite proteger información empresarial sensible al garantizar que todas las capturas de pantalla sean limpiadas antes de que cualquier dato sea enviado fuera de su entorno.

Las capturas de pantalla tomadas durante la automatización pueden contener información empresarial sensible, como datos personales identificables (PII), información financiera, registros de clientes, paneles internos o contenido privado. Sin limpieza, esta información podría ser expuesta de manera inadvertida al interactuar con servicios de IA basados en la nube o externos.

Al limpiar las imágenes antes de que sean procesadas por cualquier servicio de IA, la grabadora generativa garantiza lo siguiente:
  • Confidencialidad: Los datos sensibles se censuran en el origen, lo que elimina el riesgo de exposición.
  • Flujo de datos controlado: Solo las imágenes y el texto que han sido depurados de información empresarial sensible se envían fuera del entorno.
  • Seguridad desde el diseño: La limpieza se realiza de forma automática y constante, lo que reduce la dependencia del juicio o la configuración del usuario.
Nota: Solo el texto en inglés se limpia en las capturas de pantalla de la aplicación.
Dependiendo de las necesidades de rendimiento y los requisitos de cumplimiento de la organización, puede seleccionar cómo se ejecuta la limpieza mediante la configuración Elegir método de limpieza de imágenes:
  • Limpieza basada en la nube: Se envían capturas de pantalla de la aplicación de destino de forma segura a Servicio en la nube de Automation Anywhere. Una vez recibidas, las imágenes se limpian automáticamente en la nube antes de ser procesadas por el modelo de IA para su análisis.

    Puede seleccionar esta opción si prefiere un procesamiento centralizado para mejorar el rendimiento y minimizar el impacto en el desempeño del dispositivo local.

  • Limpieza local: La limpieza de las capturas de pantalla se produce directamente en su dispositivo antes de que cualquier imagen se envíe para el análisis de IA. Este proceso es manejado completamente por el paquete Grabadora que se ejecuta en el dispositivo.

    Puede elegir esta opción si su organización prioriza el manejo local de datos, el cumplimiento normativo o entornos de red restringidos.