promptfoo-evaluation

SKILL.md

This skill provides guidance for configuring and running LLM evaluations using Promptfoo, an open-source CLI tool for testing and comparing LLM outputs.

Embed examples directly in prompt or use chat format with assistant messages:

Create a Python file for custom assertions (e.g., scripts/metrics.py):

Configura y ejecuta la evaluación LLM utilizando el marco Promptfoo. Úselo al configurar pruebas de avisos, crear configuraciones de evaluación (promptfooconfig.yaml), escribir aserciones personalizadas de Python, implementar llm-rubric para LLM-as-juez o administrar ejemplos breves en avisos. Activadores de palabras clave como "promptfoo", "eval", "evaluación LLM", "pruebas rápidas" o "comparación de modelos". Fuente: daymade/claude-code-skills.

Ver original