advanced-evaluation

SKILL.md

LLM-as-a-Judge techniques for evaluating AI outputs. Not a single technique but a family of approaches - choosing the right one and mitigating biases is the core competency.

Direct Scoring: Single LLM rates one response on a defined scale.

Pairwise Comparison: LLM compares two responses and selects better one.

직접 채점, 쌍별 비교, 루브릭 생성 및 편견 완화를 포함한 판사로서의 LLM 평가 기술을 마스터하세요. 평가 시스템을 구축하거나, 모델 출력을 비교하거나, AI 생성 콘텐츠에 대한 품질 표준을 설정할 때 사용하세요. 출처: shipshitdev/library.

원본 보기