judge

Evaluate agent task outputs against a three-dimension rubric and produce structured verdict records. The judge operates as a quality gate at the task completion boundary, scoring outputs on Semantic accuracy, Pragmatic usefulness, and Syntactic consistency.

The rubric reuses three dimensions from the KLS (Krogstie-Lindland-Sindre) quality framework defined in disciplined-quality-evaluation:

| Semantic | Does it accurately represent the domain? | Factual correctness, domain terminology, no contradictions | | Pragmatic | Does it enable the intended decisions/actions? | Actionable, useful, addresses the task goal | | Syntactic | Is it internally consistent and well-structured? | Format compliance, structural completeness, no broken references |

Valutare gli output delle attività dell'agente utilizzando una rubrica tridimensionale (semantica, pragmatica, sintattica) derivata dal quadro di qualità KLS. Da utilizzare quando: (1) un'attività è stata completata e necessita di una valutazione di qualità prima dell'accettazione, (2) sono richiesti controlli di qualità automatizzati post-attività, (3) sono necessari verdetti di consenso multi-modello per gli output dell'agente, (4) la qualità della documentazione, del codice o delle specifiche deve essere valutata con verdetti JSON strutturati o (5) è necessaria una decisione di fallback umana dopo un disaccordo del modello. Produce record di verdetto JSONL compatibili con lo schema di verdetto in automation/judge/. Fonte: terraphim/terraphim-skills.