창에서 이미지 찾기 작업 사용

창에서 이미지 찾기 작업을 사용하여 대상 이미지(바늘)를 사용해 애플리케이션 창(건초 더미)에서 UI 요소를 검색할 수 있습니다. 대상 이미지는 UI 요소를 검색하는 데 이용할 수 있는 기존 이미지입니다.

프로시저

애플리케이션 창에서 이미지를 찾으려면 다음 단계에 따릅니다.

  1. 작업 팔레트의 이미지 인식 패키지에서 창에서 이미지 찾기 작업을 더블 클릭하거나 드래그합니다.
  2. 애플리케이션 창에서 찾고자 하는 대상 이미지(바늘)를 지정합니다.
    • Control Room 파일: Control Room에서 이용 가능한 이미지 파일을 이용합니다.
    • 바탕화면 파일: 자신의 기기에서 이용 가능한 이미지 파일을 이용합니다.
    • 변수: 이용할 이미지 파일의 위치를 지정하는 파일 변수를 이용합니다.
    주: .jpeg, .jpg, .jpe, .jfif, .bmp, png 및 .gif 형식의 이미지를 지원합니다.
  3. 해당 이미지를 찾을 창을 지정합니다.
    애플리케이션, 브라우저 또는 변수 탭에서 선택합니다.
    옵션설명
    애플리케이션 현재 활성 상태인 창 목록에서 선택합니다. 이 옵션은 Bot Creator 기기에서 열려 있는 모든 애플리케이션 및 브라우저 창의 목록을 표시합니다.
    브라우저 지원되는 브라우저 탭 목록에서 선택합니다.
    주: 이 옵션은 Google Chrome, Chromium 기반 Microsoft Edge, Internet Explorer 브라우저를 지원합니다. 다른 모든 브라우저에서는 애플리케이션 옵션을 사용합니다.
    변수 기존 창 변수를 선택하여 애플리케이션 창의 제목을 지정합니다.
    변경될 수 있는 창 제목을 검색하기 위해 창 제목 필드에 와일드카드 문자(*)를 삽입합니다. 값의 시작, 중간 또는 끝에 하나 이상의 와일드카드(*)를 지정할 수 있습니다. 예를 들어, 제목에 Microsoft가 있는 창에서 작업을 수행하려면 와일드카드를 사용하여 값 앞이나 뒤에 추가하여 문자열을 표시합니다. *Microsoft*. Bot이 먼저 정확한 창 제목(Microsoft)을 검색하고 일치하는 항목을 찾지 못하는 경우 제목의 모든 위치에 Microsoft 용어가 포함된 창을 검색합니다.

    정규식(regex)을 이용하여 창 제목을 식별할 수 있습니다. 정규식 조건을 문자열 또는 패턴 으로 선택한 다음 값을 입력합니다. 기본 설정으로 창 제목 필드는 대소문자를 구분합니다.

    브라우저 제목을 식별하려면 대소문자 구분 옵션을 활성화하여 대소문자를 일치시키거나 대소문자가 일치하지 않는 창 제목을 식별하는 옵션을 비활성화할 수 있습니다.
    주: 시스템에 설치된 Bot 에이전트의 최소 버전이 Automation 360 v.26과 함께 릴리스된 버전인지 확인합니다. Automation 360 v.25 이하와 함께 릴리스된 Bot 에이전트 버전의 경우, 창 제목은 기본적으로 대소문자가 일치하는(대소문자 구분) 경우에만 식별됩니다.
    예를 들어 문자열 값을 ((\w*)-Notepad로 시작하는 모든 창 제목 이름에 대해 ((\w*)-Notepad로 입력하거나, 이 패턴과 일치하는 창 제목에 대해서만 ((\w)\s)*document-Notepad와 같은 패턴 값을 사용할 수 있습니다.
    주:
    • 모든 작업에서 창 제목에 대한 입력 값으로 -title이 있는 문자열 유형의 정규식을 사용하면 Bot에 런타임 오류가 발생할 수 있습니다. 런타임 오류를 방지하려면 문자열 입력을 *-title로 추가할 때 특정 제목의 애플리케이션이 열려 있는지 확인하십시오. 별표(*)는 와일드 카드 문자가 아니라 일반 문자입니다.
    • 모든 작업에서 창 제목에 대한 입력 값으로 -title이 있는 패턴 유형의 정규식을 사용하면 입력 값 *-title이 잘못되었기 때문에 Bot에 런타임 오류가 발생할 수 있습니다.

      유효한 정규식 패턴을 사용하고 있는지 확인하십시오.

  4. 옵션: 창 크기 조정 옵션을 선택하여 창 크기를 지정합니다.
    이 옵션으로 더욱 안정적인 Bot을 제공합니다. 이는 태스크가 기록된 크기에 맞춰서 창의 크기를 조정하여 대상 객체를 식별하는 Bot의 기능을 향상시켜줍니다.
    • 태스크를 기록할 때 창이 최대화되어 있으면, 이 옵션은 선택이 취소됩니다.
    • 태스크를 기록할 때 창이 최대 크기가 아닌 경우, 이 옵션이 기본적으로 선택되며 너비 및 높이 필드는 창 크기에 맞게 자동으로 채워집니다.
    주: 이 옵션은 크기를 조정할 수 있는 창에만 사용할 수 있습니다. 데스크톱 또는 작업 표시줄 옵션에는 이용할 수 없습니다.
  5. 영역 캡처를 클릭합니다.
    선택한 창이 나타납니다.
  6. 마우스를 끌어 영역을 선택하고 완료되면 마우스 오른쪽 버튼을 클릭합니다.
    캡처된 영역이 미리 보기 섹션에서 아래쪽의 좌표와 함께 표시됩니다.
  7. 이미지 캡처 전 대기(ms) 필드에서, 이미지를 찾기 전의 지연 시간(밀리초 단위)을 지정합니다.
  8. 찾을 수 없는 경우 시스템이 대상 이미지를 다시 찾게 하려면 이미지를 찾지 못할 경우 반복 확인란을 선택합니다.
    1. 횟수 필드에서, 대상 이미지를 찾기 위해 시스템이 해당 프로세스를 반복해야 하는 횟수를 지정합니다.
    2. 반복 사이에 대기(ms) 필드에서, 대상 이미지를 찾기 위해 해당 프로세스를 반복하기 전에 시스템이 대기해야 하는 시간을 지정합니다.
  9. 일치율 필드에서, 두 이미지 사이에 허용 가능한 픽셀 일치율을 지정합니다.
    예를 들어, 해당 필드에 일치 비율로 20을 지정할 경우, 시스템은 두 이미지 사이에 최대 80%의 픽셀 불일치가 있어도 두 이미지를 일치하는 것으로 간주합니다.
  10. 선택된 일치 번호 필드에서 값을 입력하여 이 작업을 수행할 대상 이미지의 발생 빈도를 지정합니다.
    이미지가 화면에 나타날 수 있는 횟수를 모르는 경우 변수를 삽입할 수 있습니다. 숫자 값을 지원하는 변수를 지정했는지 확인하십시오.
  11. 애플리케이션 화면에서 검색 중인 기존 대상 이미지에 상대적(오프셋)인 이미지를 선택하거나 대상 이미지가 여러 번 나타나는 경우 특정 발생 빈도를 선택하려면 미리 보기 옵션을 사용합니다.
  12. 미리 보기를 클릭합니다.
    미리 보기 창에서 대상 이미지가 여러 번 나타나는 경우 각 발생이 직사각형 상자에서 강조 표시되고 각 발생 빈도에 대한 숫자가 표시됩니다.
  13. 강조 표시된 특정 발생 빈도를 선택하고 기존 이미지를 기준으로 클릭 위치를 지정할 수 있습니다.
    주: 자동화 중인 애플리케이션 화면에 여러 개의 이미지가 있고 대상 이미지를 쉽게 검색할 수 없는 경우. 이 경우 캡처된 영역에서 쉽게 식별할 수 있는 이미지를 선택하고 해당 이미지를 기준으로 클릭 위치를 지정할 수 있습니다.
  14. 캡처된 영역에서 대상 이미지가 여러 번 발견되는 경우. 이 경우 특정 대상 이미지의 발생 빈도를 선택하거나 오른쪽 창의 일치 번호(선택 사항) 필드의 드롭다운에서 발생 빈도 숫자를 선택합니다.
    오른쪽 창의 일치 번호(선택 사항)목표 오프셋 필드에는 선택한 이미지 발생 빈도와 대상 이미지의 오프셋 좌표가 표시됩니다.
  15. 제출을 클릭합니다.
  16. 대상 좌표 선택 필드에는 일치 중심 또는 일치로부터의 오프셋미리 보기 창에서 수행한 작업을 기반으로 자동으로 선택됩니다.
    • 일치 중심 일치하는 이미지의 중심 좌표를 기준으로 이미지가 선택됩니다.
    • 일치로부터의 오프셋: 일치하는 이미지에 상대적인 좌표를 기준으로 이미지가 선택됩니다.
    주: 오프셋 좌표는 이미지의 왼쪽 상단 모서리에서부터 픽셀 수를 측정합니다.
  17. 대상 좌표에 취할 조치 목록에서 옵션을 선택하여 애플리케이션 창에서 일치하는 이미지에 대해 수행할 작업을 지정합니다.
  18. 저장을 클릭합니다.