본문으로 건너뛰기

Batch Scheduling​

overview

Batch Scheduling 기능은
현재 시점으로부터 최대 7일 이내의 시간을 지정하여
정해진 시각에 Judgement Evaluation (without Auto-Redteaming) 을 자동으로 시작할 수 있는 기능입니다.

즉시 실행 대신, 팀 리소스나 모델 사용량을 고려해
평가를 사전에 예약(Scheduled Run) 할 때 유용합니다.

Step 1. Batch Scheduling 옵션 선택​

Add Evaluation Set 화면 하단에서 Schedule Option ▼ 을 클릭하면
Evaluation Scheduling 영역이 펼쳐집니다.

① 옵션 펼치기 → Schedule Option ▼ 클릭
② 토글 ON → 예약 실행 기능 활성화
③ 날짜 및 시간 설정 →

  • 현재 시점으로부터 최대 7일 이내 선택 가능
  • Date Picker는 “오늘 + 향후 6일” 기준으로 일주일 날짜 제공
  • Time Picker에서 분 단위 설정 가능 (예: 14:30)

Evaluation Scheduling 영역 – 토글 ON 및 날짜 설정

Step 2. 예약 관리 및 즉시 실행​

예약된 평가 Task는 Evaluation Set 상세 화면 우측 하단에서 관리할 수 있습니다.

  • Run Immediately: 설정된 예약 시간을 무시하고 즉시 평가를 시작합니다.
  • Change Schedule: 기존 예약 일시를 수정하거나 새로운 시간으로 변경합니다.

예약 Task의 실행 및 일정 변경 옵션

참고
  • 예약은 현재 시점 기준 최대 7일 이내까지만 설정할 수 있습니다.
  • 예약된 평가는 지정된 시각에 자동으로 시작되며,
    실행 후에는 Dashboard 및 Table View에서 결과를 동일하게 확인할 수 있습니다.
  • Judgement Evaluation (without Auto-Redteaming) 에서만 Batch Scheduling 기능이 지원됩니다.