모델 연결 관리

Amazon Bedrock, Google Vertex AI, Azure OpenAI, OpenAI 등과 같은 하이퍼스케일러 공급업체의 엄선된 기본 모델 목록에 연결하여 생성형 AI의 힘을 자동화에 통합할 수 있습니다.

자동화 관리자는 기본 모델에 연결하여 모델 연결을 만들고 테스트하며, 전문 개발자가 프롬프트 템플릿을 만들 때 연결할 수 있도록 합니다. 모델 연결은 프롬프트 템플릿에서 프롬프트를 보내고 모델로부터 응답을 받는 데 사용됩니다.

또한 자동화 관리자는 사용자 정의 역할을 만들고 이러한 모델 연결을 사용자 정의 역할에 할당합니다. 그런 다음 이러한 사용자 정의 역할이 모델 연결에 액세스할 수 있는 사용자에게 할당됩니다.

모델 연결을 생성하려면 다음 단계를 따르십시오.

전제 조건

자동화 관리자는 비즈니스 조직에 대한 모델 연결을 만들고 관리하는 데 이러한 역할과 권한이 필요합니다.
  • 역할: AAE_Basic, 자동화 관리자 사용자 정의 역할
  • 권한: 유인 Bot Runner

자동화 관리자 사용자 정의 역할 권한은 AI 도구에 대한 역할과 권한 항목을 참조하십시오.

기타 요구 사항:
  • 인증 정보를 자격증명 저장소에 저장하려는 경우 정보를 편리하게 보관할 수 있습니다. Credential Vault를 통한 안전한 자격증명 저장소 항목을 참조하십시오.
  • 모델 연결을 테스트하려면 Bot 에이전트(v22.60.10 이상)에 연결되어 있어야 합니다. 테스트를 위해 데스크톱에서 bot을 실행해야 합니다. 테스트를 통해 Bot 에이전트가 사용자에 맞게 구성되었는지 확인하십시오. 이 태스크를 위해 다른 Control Room으로 연결을 전환해야 하는 경우 다음 항목을 참조하십시오. Control Room 인스턴스 간 기기 등록 전환.
  • 연결을 테스트하려면 레코더 패키지와 생성형 AI 프롬프트 템플릿 패키지에 액세스할 수 있어야 합니다. 테스트 프롬프트를 실행하여 모델 연결을 테스트합니다.

프로시저

  1. Control Room 환경에서 관리 > 모델 연결로 이동하여 모델 연결 만들기를 클릭합니다.
  2. 모델 연결 생성 화면에서 다음 연결 설정를 구성할 수 있습니다.
    모델 연결 생성
    • 연결 설정:
      • 모델 연결 이름: 연결 이름을 제공합니다.
      • 설명(선택 사항): 연결을 정의하는 간략한 설명을 추가합니다.
      • 공급업체 선택: 지원되는 공급업체 목록에서 기본 모델 공급업체를 선택합니다. 현재 당사는 Amazon Bedrock, Google Vertex AI, Azure OpenAI, OpenAI 및 기타 모델을 지원합니다.
      • 드롭다운 메뉴에서 공급업체를 선택하면 모델 선택 필드가 표시됩니다. 사용 가능한 모델 목록에서 선택합니다.
      • 연결 설정 섹션의 모든 매개변수 값을 입력한 후 다음을 클릭하여 인증 세부정보 섹션으로 이동합니다.
    • 인증 세부 정보:
      인증 세부 정보 매개변수는 연결을 정의할 때 선택한 모델에 따라 달라집니다.
      주: 각 모델에 대한 인증 세부 정보는 다음을 참조하십시오. 모델 연결 인증.

      인증 세부 정보를 설정한 후 확인을 클릭하고 다음 을 클릭하여 연결 테스트 섹션으로 이동하여 모델 연결을 테스트합니다.

    • 연결 테스트:
      • 연결 테스트를 클릭하여 모든 연결 세부 정보가 올바르게 정의되었는지 확인하고 제대로 연결되는지 점검합니다.
      • 연결이 예상대로 작동하면 시스템에서 요청을 처리하고 성공 메시지를 생성해 표시합니다.
      • 연결이 예상대로 작동하지 않으면 시스템에서는 연결 실패 이유를 설명하는 메시지를 생성해 표시합니다. 예를 들어 지원되는 기본 모델 패키지를 워크스페이스에 다운로드하지 않은 경우 오류 메시지가 표시됩니다. 해당 패키지를 다운로드한 다음 모델 연결을 다시 테스트합니다.
      • 모델 연결 테스트에 실패하거나 작업을 완료하지 않은 상태로 두면 모델 연결은 저장되지 않으며 모델 연결 생성 프로세스를 다시 시작해야 합니다.
      • 다음을 클릭하여 사용자에게 사용자 정의 역할 추가를 시작합니다.
    • 역할 초대:
      • 이 단계에서는 자동화 관리자가 사용자에게 사용자 정의 역할을 할당합니다.

        사용자에게 사용자 정의 역할 할당

        주: 자동화 관리자는 사용자 정의 역할을 만들고 모델 연결을 해당 역할에 할당한 다음, 사용자에게 할당할 수 있습니다. 이 사용자 정의 역할에 할당된 사용자만 이 모델 연결을 사용할 수 있습니다.
      • 역할을 할당하고 나면 모델 연결 만들기를 클릭하여 모델 연결 생성을 완료합니다.
    모델 연결 성공
  3. 모델 연결이 생성되었다는 시스템에서 생성한 성공 메시지가 표시됩니다. 이제 모델 연결 목록이 표시된 모델 연결 화면으로 이동됩니다.
  4. 각 연결 옆에 있는 타원을 클릭하여 연결 보기, 연결 편집, 상태 변경 또는 각 연결 삭제를 수행할 수 있습니다.
    모델 연결 작업
    작업 기능
    연결 보기

    연결 세부 정보에서 모델에 대한 요약 보기를 확인할 수 있습니다.

    일반 세부 정보에는 연결이 마지막으로 수정된 시점과 수정한 사람이 표시됩니다.

    자동화 관리자는 이 보기에서 모델 연결을 편집할 수 있습니다.
    상태 변경
    모델 연결이 사용 가능 상태로 생성됩니다. 자동화 관리자는 모델 연결의 상태를 다음 중 하나로 변경할 수 있습니다.
    • 사용 가능: 모델 연결을 사용하여 새 프롬프트 템플릿을 만들고 기존 템플릿을 실행할 수 있습니다.
    • 제한된 액세스: 모델 연결은 기존 프롬프트 템플릿을 실행하는 데 사용할 수 있지만 이것을 새 항목에 추가할 수는 없습니다.
    • 비활성화됨: 이러한 모델 연결을 사용하여 새 New 프롬프트 템플릿을 생성할 수 없습니다. 이러한 모델 연결을 사용하는 기존의 모든 자동화 실행은 실패합니다.
    연결 편집 모델 연결 세부 정보를 편집할 수 있습니다.
    편집 버튼은 자동화 관리자만 사용할 수 있습니다.
    주: 모델 연결 > 모델 연결 보기 권한이 있는 전문 개발자 및 시민 개발자와 같은 사용자는 모델 연결에 대한 세부 정보를 볼 수는 있지만 편집할 수는 없습니다.
    삭제

    삭제를 클릭하면 확인을 요청하는 메시지가 표시된 후 모델 연결이 삭제됩니다. 삭제를 확인하는 메시지가 표시됩니다.

    모델 연결을 삭제하면 삭제한 모델 연결을 참조하는 모든 프롬프트 템플릿의 기본 모델에 대한 연결이 실패합니다. 결과적으로 프롬프트 템플릿을 사용하는 모든 자동화의 실행이 실패합니다.

    삭제 버튼은 자동화 관리자만 사용할 수 있습니다.
    주: 모델 연결 > 모델 연결 보기 권한이 있는 전문 개발자 및 시민 개발자와 같은 사용자는 모델 연결에 대한 세부 정보를 볼 수는 있지만 삭제할 수는 없습니다.

다음 단계

모델 연결을 만들고 테스트한 후 전문 개발자에게 할당하면 전문 개발자는 이 연결을 사용해 프롬프트 템플릿을 만들게 됩니다. 프롬프트 템플릿 생성 항목을 참조하십시오.
주:

모델 연결을 생성, 테스트, 편집 또는 삭제하면 작업의 성공 또는 실패 세부 정보가 로그로 캡처되며 관리 > 감사 로그, 및 관리 > AI 거버넌스에서 확인할 수 있습니다.

AI 거버넌스 항목을 참조하십시오.