LLM 출력 평가 어떻게 하나
LLM 출력 평가 어떻게 하나
답변 1개
정답셋 기반 자동 평가와 LLM-as-judge를 병행한다. 회귀 방지를 위해 케이스를 고정 데이터셋으로 두고, 프롬프트·모델 변경마다 점수 변동을 추적한다. 비용·지연도 함께 측정한다.
LLM 출력 평가 어떻게 하나
정답셋 기반 자동 평가와 LLM-as-judge를 병행한다. 회귀 방지를 위해 케이스를 고정 데이터셋으로 두고, 프롬프트·모델 변경마다 점수 변동을 추적한다. 비용·지연도 함께 측정한다.