write-judge-prompt

Design a binary Pass/Fail LLM-as-Judge evaluator for one specific failure mode. Each judge checks exactly one thing.

State what the judge evaluates. One failure mode per judge.

Not: "Evaluate whether the email is good" or "Rate the email quality from 1-5."

Entwerfen Sie LLM-as-Judge-Evaluatoren für subjektive Kriterien, die codebasierte Prüfungen nicht verarbeiten können. Verwenden Sie diese Option, wenn ein Fehlermodus eine Interpretation erfordert (Ton, Treue, Relevanz, Vollständigkeit). NICHT verwenden, wenn der Fehlermodus mit Code überprüft werden kann (Regex, Schemavalidierung, Ausführungstests). NICHT verwenden, wenn Sie den Richter validieren oder kalibrieren müssen – verwenden Sie stattdessen „validate-evaluator“. Quelle: hamelsmu/evals-skills.