평가를 실행하는 가장 빠른 방법은 자동으로 수행하는 것입니다. 이는 사람의 수작업이 아닌 LLM을 심판으로 활용하여 데이터를 비교합니다.

중요사항: 이 기능은 특정 고객용으로 제한되어 있어 일반적으로 사용할 수 없습니다. 자세한 내용은 Automation Anywhere 계정 팀에 문의하십시오.

프로시저

  1. 평가를 시작하는 방법은 두 가지입니다.
    • AI 평가 페이지에서 평가 실행을 선택합니다.
    • AI 기술 페이지에서 평가 > 평가 실행을 선택합니다. 그러면 다음 단계가 자동으로 채워집니다.
    새 페이지로 이동하여 평가를 구성합니다.
  2. 평가할 기술을 선택합니다.
  3. 다음을 클릭합니다.
  4. LLM을 심판으로 사용하고 평가에서 NLP 메트릭을 활용하려면 자동 평가 방법을 선택합니다.
  5. 데이터 세트 추가
    • 파일 업로드를 선택하여 평가에 사용할 파일을 선택하고 이름을 입력합니다. 파일은 최대 크기 100kb의 CSV 형식이어야 합니다.
    • 기존 데이터를 사용을 선택하여 이전에 업로드된 데이터 세트를 선택하십시오.
    • 데이터를 수동으로 입력을 선택하여 이름을 지정하고, 입력 변수와 선택 사항인 예상 출력 값을 직접 입력하여 데이터 세트를 수동으로 생성합니다.
  6. 평가 실행을 클릭합니다.
    평가가 데이터를 저장하고 실행을 시작합니다. 평가 데이터의 크기에 따라 처리하는 데 다소 시간이 걸릴 수 있습니다. 완료되면 평가에 대한 링크가 포함된 알림이 전송됩니다.
  7. 평가 탭을 사용하거나 알림의 링크를 클릭하여 결과로 이동합니다.