Comprehensive patterns for building, managing, and validating golden datasets for AI/ML evaluation. Each category has individual rule files in rules/ loaded on-demand.
| Category | Rules | Impact | When to Use |
| Curation | 3 | HIGH | Content collection, annotation pipelines, diversity analysis | | Management | 3 | HIGH | Versioning, backup/restore, CI/CD automation | | Validation | 3 | CRITICAL | Quality scoring, drift detection, regression testing | | Add Workflow | 1 | HIGH | 9-phase curation, quality scoring, bias detection, silver-to-gold |
Modelli del ciclo di vita dei set di dati dorati per la curation, il controllo delle versioni, la convalida della qualità e l'integrazione CI. Da utilizzare durante la creazione di set di dati di valutazione, la gestione delle versioni dei set di dati, la convalida dei punteggi di qualità o l'integrazione dei golden test nelle pipeline. Fonte: yonatangross/orchestkit.