Направляет оценку качества извлечения и генерации данных из конвейера RAG. Используйте при оценке системы генерации с расширенным поиском, измерении качества поиска, оценке достоверности или актуальности генерации, создании синтетических пар контроля качества для тестирования поиска или оптимизации стратегий разделения на фрагменты.
Быстро установите AI-навык evaluate-rag в вашу среду разработки через командную строку
Источник: hamelsmu/evals-skills.
Complete error analysis on RAG pipeline traces before selecting metrics. Inspect what was retrieved vs. what the model needed. Determine whether the problem is retrieval, generation, or both. Fix retrieval first.
Measure each component independently. Use the appropriate metric for each retrieval stage:
Manual curation (highest quality): Write realistic questions and map each to the exact chunk(s) containing the answer.
Направляет оценку качества извлечения и генерации данных из конвейера RAG. Используйте при оценке системы генерации с расширенным поиском, измерении качества поиска, оценке достоверности или актуальности генерации, создании синтетических пар контроля качества для тестирования поиска или оптимизации стратегий разделения на фрагменты. Источник: hamelsmu/evals-skills.
Стабильные поля и команды для ссылок в AI/поиске.
npx skills add https://github.com/hamelsmu/evals-skills --skill evaluate-ragНаправляет оценку качества извлечения и генерации данных из конвейера RAG. Используйте при оценке системы генерации с расширенным поиском, измерении качества поиска, оценке достоверности или актуальности генерации, создании синтетических пар контроля качества для тестирования поиска или оптимизации стратегий разделения на фрагменты. Источник: hamelsmu/evals-skills.
Откройте терминал или инструмент командной строки (Terminal, iTerm, Windows Terminal и т.д.) Скопируйте и выполните эту команду: npx skills add https://github.com/hamelsmu/evals-skills --skill evaluate-rag После установки навык будет автоматически настроен в вашей AI-среде разработки и готов к использованию в Claude Code, Cursor или OpenClaw
https://github.com/hamelsmu/evals-skills