agentic-eval

Patterns for self-improvement through iterative evaluation and refinement.

Evaluation patterns enable agents to assess and improve their own outputs, moving beyond single-shot generation to iterative refinement loops.

Key insight: Use structured JSON output for reliable parsing of critique results.

Шаблоны и методы оценки и улучшения результатов работы агентов ИИ. Используйте этот навык, когда: - Внедрение циклов самокритики и размышлений. - Построение конвейеров оценщика-оптимизатора для генерации критически важных по качеству данных. - Создание рабочих процессов доработки кода на основе тестирования. - Разработка систем оценки на основе рубрик или LLM в качестве судьи. - Добавление итеративного улучшения результатов работы агента (код, отчеты, анализ). - Измерение и улучшение качества ответа агентов Источник: github/awesome-copilot.