평가를 실행하는 가장 빠른 방법은 자동으로 수행하는 것입니다. 이는 사람의 수작업이 아닌 LLM을 심판으로 활용하여 데이터를 비교합니다.

프로시저

  1. 평가는 두 가지 진입점에서 시작할 수 있습니다.
    • AI 평가 페이지에서 평가 실행을 선택합니다.
    • AI 기술 페이지에서 평가 > 평가 실행를 선택합니다. 이 작업은 다음 단계를 자동으로 채 웁니다.
    평가를 구성하기 위해 새 페이지로 이동합니다.
  2. 평가할 스킬을 선택합니다.
  3. 다음을 클릭합니다.
  4. LLM을 심판으로 사용하고 평가에서 NLP 메트릭을 활용하려면 자동 평가 방법을 선택합니다.
  5. 데이터 세트 추가
    • 파일 업로드를 선택하여 평가에 사용할 파일을 선택하고 이름을 입력합니다. 파일은 최대 크기 100kb의 CSV 형식이어야 합니다.
    • 기존 데이터를 사용을 선택하여 이전에 업로드된 데이터 세트를 선택하십시오.
    • 데이터를 수동으로 입력을 선택하여 이름을 지정하고, 입력 변수와 선택 사항인 예상 출력 값을 직접 입력하여 데이터 세트를 수동으로 생성합니다.
  6. 평가 실행을 클릭합니다.
    평가가 데이터를 저장하고 실행을 시작합니다. 처리는 평가의 데이터 크기에 따라 다소 시간이 걸릴 수 있습니다. 완료되면 평가에 대한 링크가 포함된 알림이 귀하에게 전송됩니다.
  7. 평가 탭을 사용하거나 알림의 링크를 클릭하여 결과로 이동합니다.