AI 평가
LLM 평가 시스템에서 피해야 할 두 가지 노이즈 원천
LLM 평가 시스템은 전통적인 테스트와 달리 예측이며, 평가 점수는 추정값으로, 불확실성과 통계적 사고가 필요하다. 평가 결과의 변동은 대화 자체나 평가자에 기인할 수 있으며, 이를 구분해 해결해야 한다.
AI AgentClaude
태그
LLM 평가 시스템은 전통적인 테스트와 달리 예측이며, 평가 점수는 추정값으로, 불확실성과 통계적 사고가 필요하다. 평가 결과의 변동은 대화 자체나 평가자에 기인할 수 있으며, 이를 구분해 해결해야 한다.