LLM 평가 자동화: 오프라인 벤치 + LLM-as-judge 구성
LLM 기반 기능을 개발하다 보면 “프롬프트를 바꿨는데 좋아진 건지 나빠진 건지 모르겠다”는 순간을 반드시 만납니다. 사람이 매번 눈으로 몇 개 돌려보는 방식은 재현성이 없고 회귀를 잡지…
5 min read
// tag
LLM 기반 기능을 개발하다 보면 “프롬프트를 바꿨는데 좋아진 건지 나빠진 건지 모르겠다”는 순간을 반드시 만납니다. 사람이 매번 눈으로 몇 개 돌려보는 방식은 재현성이 없고 회귀를 잡지…