창에서 이미지 찾기 작업 사용
- 최종 업데이트2022/11/21
창에서 이미지 찾기 작업 사용
창에서 이미지 찾기 작업을 사용하여 대상 이미지(바늘)를 사용해 애플리케이션 창(건초 더미)에서 UI 요소를 검색할 수 있습니다. 대상 이미지는 UI 요소를 검색하는 데 이용할 수 있는 기존 이미지입니다.
프로시저
애플리케이션 창에서 이미지를 찾으려면 다음 단계에 따릅니다.
- 작업 팔레트의 이미지 인식 패키지에서 창에서 이미지 찾기 작업을 더블 클릭하거나 드래그합니다.
-
애플리케이션 창에서 찾고자 하는 대상 이미지(바늘)를 지정합니다.
- Control Room 파일: Control Room에서 이용 가능한 이미지 파일을 이용합니다.
- 바탕화면 파일: 자신의 기기에서 이용 가능한 이미지 파일을 이용합니다.
- 변수: 이용할 이미지 파일의 위치를 지정하는 파일 변수를 이용합니다.
주: .jpeg, .jpg, .jpe, .jfif, .bmp, png 및 .gif 형식의 이미지를 지원합니다. -
해당 이미지를 찾을 창을 지정합니다.
애플리케이션, 브라우저 또는 변수 탭에서 선택합니다.
옵션 설명 애플리케이션 현재 활성 상태인 창 목록에서 선택합니다. 이 옵션은 Bot Creator 기기에서 열려 있는 모든 애플리케이션 및 브라우저 창의 목록을 표시합니다. 브라우저 지원되는 브라우저 탭 목록에서 선택합니다. 주: 이 옵션은 Google Chrome, Chromium 기반 Microsoft Edge, Internet Explorer 브라우저를 지원합니다. 다른 모든 브라우저에서는 애플리케이션 옵션을 사용합니다.변수 기존 창 변수를 선택하여 애플리케이션 창의 제목을 지정합니다. 변경될 수 있는 창 제목을 검색하기 위해 창 제목 필드에 와일드카드 문자(*)를 삽입합니다. 값의 시작, 중간 또는 끝에 하나 이상의 와일드카드(*)를 지정할 수 있습니다. 예를 들어, 제목에 Microsoft가 있는 창에서 작업을 수행하려면 와일드카드를 사용하여 값 앞이나 뒤에 추가하여 문자열을 표시합니다. *Microsoft*. bot이 먼저 정확한 창 제목(Microsoft)을 검색하고 일치하는 항목을 찾지 못하는 경우 제목의 모든 위치에 Microsoft 용어가 포함된 창을 검색합니다.정규식(regex)을 이용하여 창 제목을 식별할 수 있습니다. 정규식 조건을 문자열 또는 패턴 으로 선택한 다음 값을 입력합니다. 기본 설정으로 창 제목 필드는 대소문자를 구분합니다.
브라우저 제목을 식별하려면 대소문자 구분 옵션을 활성화하여 대소문자를 일치시키거나 대소문자가 일치하지 않는 창 제목을 식별하는 옵션을 비활성화할 수 있습니다.주: 시스템에 설치된 Bot 에이전트의 최소 버전이 Automation 360 v.26과 함께 릴리스된 버전인지 확인합니다. Automation 360 v.25 이하와 함께 릴리스된 Bot 에이전트 버전의 경우, 창 제목은 기본적으로 대소문자가 일치하는(대소문자 구분) 경우에만 식별됩니다.예를 들어 문자열 값을 ((\w*)-Notepad로 시작하는 모든 창 제목 이름에 대해 ((\w*)-Notepad로 입력하거나, 이 패턴과 일치하는 창 제목에 대해서만 ((\w)\s)*document-Notepad와 같은 패턴 값을 사용할 수 있습니다.주:- 모든 작업에서 창 제목에 대한 입력 값으로 -title이 있는 문자열 유형의 정규식을 사용하면 bot에 런타임 오류가 발생할 수 있습니다. 런타임 오류를 방지하려면 문자열 입력을 *-title로 추가할 때 특정 제목의 애플리케이션이 열려 있는지 확인하십시오. 별표(*)는 와일드 카드 문자가 아니라 일반 문자입니다.
- 모든 작업에서 창 제목에 대한 입력 값으로 -title이 있는 패턴 유형의 정규식을 사용하면 입력 값 *-title이 잘못되었기 때문에 bot에 런타임 오류가 발생할 수 있습니다.
유효한 정규식 패턴을 사용하고 있는지 확인하십시오.
- 옵션:
창 크기 조정 옵션을 선택하여 창 크기를 지정합니다.
이 옵션으로 더욱 안정적인 bot을 제공합니다. 이는 태스크가 기록된 크기에 맞춰서 창의 크기를 조정하여 대상 객체를 식별하는 bot의 기능을 향상시켜줍니다.
- 태스크를 기록할 때 창이 최대화되어 있으면, 이 옵션은 선택이 취소됩니다.
- 태스크를 기록할 때 창이 최대 크기가 아닌 경우, 이 옵션이 기본적으로 선택되며 너비 및 높이 필드는 창 크기에 맞게 자동으로 채워집니다.
주: 이 옵션은 크기를 조정할 수 있는 창에만 사용할 수 있습니다. 데스크톱 또는 작업 표시줄 옵션에는 이용할 수 없습니다. -
영역 캡처를 클릭합니다.
선택한 창이 나타납니다.
-
마우스를 끌어 영역을 선택하고 완료되면 마우스 오른쪽 버튼을 클릭합니다.
캡처된 영역이 미리 보기 섹션에서 아래쪽의 좌표와 함께 표시됩니다.
- 이미지 캡처 전 대기(ms) 필드에서, 이미지를 찾기 전의 지연 시간(밀리초 단위)을 지정합니다.
-
찾을 수 없는 경우 시스템이 대상 이미지를 다시 찾게 하려면 이미지를 찾지 못할 경우 반복 확인란을 선택합니다.
- 횟수 필드에서, 대상 이미지를 찾기 위해 시스템이 해당 프로세스를 반복해야 하는 횟수를 지정합니다.
- 반복 사이에 대기(ms) 필드에서, 대상 이미지를 찾기 위해 해당 프로세스를 반복하기 전에 시스템이 대기해야 하는 시간을 지정합니다.
-
일치율 필드에서, 두 이미지 사이에 허용 가능한 픽셀 일치율을 지정합니다.
예를 들어, 해당 필드에 일치 비율로 20을 지정할 경우, 시스템은 두 이미지 사이에 최대 80%의 픽셀 불일치가 있어도 두 이미지를 일치하는 것으로 간주합니다.
-
선택된 일치 번호 필드에서 값을 입력하여 이 작업을 수행할 대상 이미지의 발생 빈도를 지정합니다.
이미지가 화면에 나타날 수 있는 횟수를 모르는 경우 변수를 삽입할 수 있습니다. 숫자 값을 지원하는 변수를 지정했는지 확인하십시오.
- 애플리케이션 화면에서 검색 중인 기존 대상 이미지에 상대적(오프셋)인 이미지를 선택하거나 대상 이미지가 여러 번 나타나는 경우 특정 발생 빈도를 선택하려면 미리 보기 옵션을 사용합니다.
-
미리 보기를 클릭합니다.
미리 보기 창에서 대상 이미지가 여러 번 나타나는 경우 각 발생이 직사각형 상자에서 강조 표시되고 각 발생 빈도에 대한 숫자가 표시됩니다.
-
강조 표시된 특정 발생 빈도를 선택하고 기존 이미지를 기준으로 클릭 위치를 지정할 수 있습니다.
주: 자동화 중인 애플리케이션 화면에 여러 개의 이미지가 있고 대상 이미지를 쉽게 검색할 수 없는 경우. 이 경우 캡처된 영역에서 쉽게 식별할 수 있는 이미지를 선택하고 해당 이미지를 기준으로 클릭 위치를 지정할 수 있습니다.
-
캡처된 영역에서 대상 이미지가 여러 번 발견되는 경우. 이 경우 특정 대상 이미지의 발생 빈도를 선택하거나 오른쪽 창의 일치 번호(선택 사항) 필드의 드롭다운에서 발생 빈도 숫자를 선택합니다.
오른쪽 창의 일치 번호(선택 사항) 및 목표 오프셋 필드에는 선택한 이미지 발생 빈도와 대상 이미지의 오프셋 좌표가 표시됩니다.
- 제출을 클릭합니다.
-
대상 좌표 선택 필드에는 일치 중심 또는 일치로부터의 오프셋이 미리 보기 창에서 수행한 작업을 기반으로 자동으로 선택됩니다.
- 일치 중심 일치하는 이미지의 중심 좌표를 기준으로 이미지가 선택됩니다.
- 일치로부터의 오프셋: 일치하는 이미지에 상대적인 좌표를 기준으로 이미지가 선택됩니다.
주: 오프셋 좌표는 이미지의 왼쪽 상단 모서리에서부터 픽셀 수를 측정합니다. - 대상 좌표에 취할 조치 목록에서 옵션을 선택하여 애플리케이션 창에서 일치하는 이미지에 대해 수행할 작업을 지정합니다.
- 저장을 클릭합니다.