Leitet die Bewertung der RAG-Pipeline-Abruf- und Generierungsqualität. Verwenden Sie es, wenn Sie ein abrufgestütztes Generierungssystem evaluieren, die Abrufqualität messen, die Generationstreue oder -relevanz bewerten, synthetische QA-Paare für Abruftests generieren oder Chunking-Strategien optimieren.
Installieren Sie den KI-Skill evaluate-rag schnell in Ihrer Entwicklungsumgebung über die Kommandozeile
Quelle: hamelsmu/evals-skills.
Complete error analysis on RAG pipeline traces before selecting metrics. Inspect what was retrieved vs. what the model needed. Determine whether the problem is retrieval, generation, or both. Fix retrieval first.
Measure each component independently. Use the appropriate metric for each retrieval stage:
Manual curation (highest quality): Write realistic questions and map each to the exact chunk(s) containing the answer.
Leitet die Bewertung der RAG-Pipeline-Abruf- und Generierungsqualität. Verwenden Sie es, wenn Sie ein abrufgestütztes Generierungssystem evaluieren, die Abrufqualität messen, die Generationstreue oder -relevanz bewerten, synthetische QA-Paare für Abruftests generieren oder Chunking-Strategien optimieren. Quelle: hamelsmu/evals-skills.
Stabile Felder und Befehle für KI/Such-Zitate.
npx skills add https://github.com/hamelsmu/evals-skills --skill evaluate-ragLeitet die Bewertung der RAG-Pipeline-Abruf- und Generierungsqualität. Verwenden Sie es, wenn Sie ein abrufgestütztes Generierungssystem evaluieren, die Abrufqualität messen, die Generationstreue oder -relevanz bewerten, synthetische QA-Paare für Abruftests generieren oder Chunking-Strategien optimieren. Quelle: hamelsmu/evals-skills.
Öffnen Sie Ihr Terminal oder Kommandozeilen-Tool (Terminal, iTerm, Windows Terminal, etc.) Kopieren Sie diesen Befehl und führen Sie ihn aus: npx skills add https://github.com/hamelsmu/evals-skills --skill evaluate-rag Nach der Installation wird der Skill automatisch in Ihrer KI-Programmierumgebung konfiguriert und ist bereit zur Verwendung in Claude Code, Cursor oder OpenClaw
https://github.com/hamelsmu/evals-skills