Uso de la action Buscar imagen en ventana
Descargar como PDF
- Última actualización2022/11/21
Uso de la action Buscar imagen en ventana
Utilice la action Buscar imagen en ventana para buscar un elemento de la interfaz en una ventana de aplicación (pajar) con una imagen de destino (aguja). La imagen de destino es una imagen existente que puede usar para buscar un elemento de la IU.
Procedimiento
Siga estos pasos para encontrar una imagen en una ventana de una aplicación:
- Haga doble clic en la action Buscar imagen en ventana o arrástrela desde el package Reconocimiento de imágenes en la paleta Acciones.
-
Especifique la imagen de destino que desea buscaren la ventana de la aplicación.
- Archivo del Control Room: Usa un archivo de imagen disponible en Control Room.
- Archivo de escritorio: Usa un archivo de imagen disponible en su dispositivo.
- Variable: Usa una variable de archivo que especifica la ubicación del archivo de imagen que desea utilizar.
Nota: Se admiten imágenes con los formatos .jpeg, .jpg, .jpe, .jfif, .bmp, .png y .gif. -
Especifique la ventana en la que desea encontrar la imagen fuente (pajar):
Elija entre la pestaña Aplicación, Navegador o Variable.
Opción Descripción Aplicación Seleccione de una lista de ventanas actualmente activas. Esta opción muestra una lista de todas las ventanas de aplicaciones y navegadores que están abiertas en el dispositivo de Bot Creator. Navegador Seleccione de una lista de pestañas del navegador compatibles. Nota: Esta opción es compatible con Google Chrome, Microsoft Edge basado en Chromium y los navegadores Internet Explorer. Para el resto de navegadores, utilice la opción Aplicación.Variable Seleccione una variable de ventana existente para especificar el título de la ventana de la aplicación. Inserte un carácter comodín (*) en el Título de la ventana para buscar títulos de ventanas que puedan variar. Puede especificar uno o más comodines (*) al principio, en el medio o al final del valor. Por ejemplo, para realizar una operación en cualquier ventana que tenga Microsoft en el título, use un comodín para indicar cualquier cadena y agréguelo antes o después del valor: *Microsoft*. El bot busca primero el título exacto de la ventana (Microsoft) y, si no encuentra una coincidencia, busca las ventanas con el término Microsoft en cualquier parte del título.Puede utilizar una expresión común (lo que se suele llamar regex) para identificar el título de una ventana. Seleccione la condición de expresión regular como Cadena o un Patrón y, a continuación, introduzca el valor. De forma predeterminada, el campo Título de la ventana distingue entre mayúsculas y minúsculas.
Para identificar el título de un navegador, puede habilitar la opción Distinguir mayúsculas para que identifique las mayúsculas y minúsculas, o deshabilitar la opción para identificar un título de la ventana en el que no coincidan las mayúsculas y minúsculas.Nota: Asegúrese de que la versión mínima del Bot Agent instalada en su sistema sea la versión publicada con Automation 360 v.26. Si tiene una versión de Bot Agent publicada con Automation 360 v.25 o anterior, el título de la ventana se identificará de forma predeterminada solo con las mayúsculas y minúsculas correspondientes (distinción de mayúsculas).Por ejemplo, para hacer coincidir todos los nombres de títulos de ventanas que comienzan con una palabra seguida de- Notepad
, puede ingresar el valor Cadena como * -Notepad o utilizar el valor Patrón como ((\w)\s)*document-Notepad solo para aquellos títulos de ventana que coincidan con este patrón.Nota:- Cuando se utiliza una expresión regular de tipo Cadena con -title como valor de entrada para el título de una ventana en cualquier action, el bot podría detectar un error del tiempo de ejecución. Para evitar un error de tiempo de ejecución, asegúrese de que cuando agregue la cadena de entrada como *-title, se abra la aplicación con el título específico. El asterisco (*) es solo un carácter y no un carácter comodín.
- Cuando se utiliza una expresión regular de tipo Patrón con -title como valor de entrada para un título de ventana en cualquier action, el bot podría detectar un error de tiempo de ejecución, ya que el valor de entrada *-title es incorrecto.
Asegúrese de utilizar patrones regex válidos.
- Opcional:
Seleccione la opción Cambiar el tamaño de la ventana para especificar las dimensiones de la ventana.
Esta opción ofrece una mayor confiabilidad del bot. Cambia el tamaño de la ventana a las dimensiones en las que se registró la tarea, lo que mejora la capacidad del bot para identificar el objeto de destino.
- Si la ventana está maximizada cuando registra la tarea, esta opción no se selecciona.
- Si la ventana no tiene el tamaño máximo al momento de registrar la tarea, esta opción se selecciona de forma predeterminada, y los campos de anchura y altura se rellenarán automáticamente con las dimensiones de la ventana.
Nota: Esta opción solo está disponible para las ventanas que se pueden cambiar de tamaño. No está disponible para opciones del Escritorio o la Barra de tareas. -
Haga clic en Capturar región.
Aparece la ventana seleccionada.
-
Arrastre el mouse para seleccionar el área y haga clic con el botón derecho cuando termine.
El área capturada aparece en la sección Vista previa con las coordenadas de imagen debajo.
- En el campo Esperar en ms antes de capturar la imagen, especifique el retraso (en milisegundos) antes de buscar la imagen.
-
Seleccione la casilla de verificación Repetir si no se encuentra la imagen si desea que el sistema vuelva a intentar la búsqueda de la imagen de destino en caso de no encontrarla.
- En el campo Veces, especifique la cantidad de veces que el sistema debe repetir el proceso para encontrar la imagen de destino.
- En el campo Esperar entre repeticiones (ms), especifique el período que el sistema debe esperar antes de repetir el proceso para encontrar la imagen de destino.
-
En el campo Porcentaje de coincidencia, especifique el porcentaje de píxeles coincidentes aceptable que debe haber entre ambas imágenes.
Por ejemplo, si especifica 20 en el campo como porcentaje de coincidencia, el sistema considera que las imágenes coinciden incluso aunque el 80 % restante de las imágenes no coincida.
-
En el campo Número de coincidencia seleccionado, introduzca un valor para especificar la instancia de la imagen de destino en la que desea realizar esta action.
Puede insertar una variable cuando no sepa cuántas veces puede aparecer la imagen en la pantalla. Asegúrese de asignar variables que admitan valores numéricos.
- Utilice la opción Vista previa si desea seleccionar una imagen que sea relativa (desplazada) a la imagen de destino existente que está buscando en la pantalla de la aplicación o si desea seleccionar una instancia específica si existen varias instancias de la imagen de destino.
-
Haga clic en Preview (Vista previa).
Si una imagen de destino aparece varias veces en la ventana Vista previa, cada instancia se resalta en un cuadro rectangular y se muestra un número para cada instancia.
-
Seleccione la instancia específica resaltada, y puede posicionar su ubicación de clic en relación con una imagen existente.
Nota: Si hay varias imágenes en una pantalla de aplicación que está automatizando y cuando la imagen de destino no puede buscarse fácilmente; en ese caso, puede seleccionar una imagen fácil de identificar en la región capturada y posicionar su clic en relación con ella.
-
Si la imagen de destino se encuentra varias veces en la región capturada. En ese caso, puede seleccionar la instancia de una imagen de destino determinada o seleccionar el número de instancia en el menú desplegable del campo Número de coincidencia (opcional) ubicado en el panel derecho.
Los campos Número de coincidencia (opcional) y Compensación del objetivo en el panel derecho muestran la instancia de la imagen seleccionada y sus coordenadas de compensación de la imagen de destino.
- Haga clic en Enviar.
-
En el campo Selecciones de coordenadas de destino, las opciones de coordenadas son Centro de la coincidencia o Compensación de concordancia se seleccionarán automáticamente en función de la action que haya realizado en la ventana Vista previa.
- Centro de la concordancia: La imagen se selecciona en función de las coordenadas del centro de la imagen coincidente.
- Compensación de concordancia: La imagen se selecciona en función de las coordenadas relativas a las de la imagen coincidente.
Nota: Las coordenadas de compensación miden el número de píxeles desde la esquina superior izquierda de la imagen. - Seleccione una opción desde la lista Acción para las coordenadas objetivo a fin de especificar la acción que desea realizar en la imagen coincidente en la ventana de la aplicación.
- Haga clic en Guardar.