advanced-evaluation

SKILL.md

LLM-as-a-Judge techniques for evaluating AI outputs. Not a single technique but a family of approaches - choosing the right one and mitigating biases is the core competency.

Direct Scoring: Single LLM rates one response on a defined scale.

Pairwise Comparison: LLM compares two responses and selects better one.

Beherrschen Sie LLM-Bewertungstechniken als Richter, einschließlich direkter Bewertung, paarweisem Vergleich, Rubrikgenerierung und Verzerrungsminderung. Verwenden Sie es beim Aufbau von Bewertungssystemen, beim Vergleich von Modellausgaben oder beim Festlegen von Qualitätsstandards für KI-generierte Inhalte. Quelle: shipshitdev/library.

Original anzeigen