·dspy-evaluation-suite
</>

dspy-evaluation-suite

omidzamani/dspy-skills

当用户要求“评估 DSPy 程序”、“测试我的 DSPy 模块”、“测量性能”、“创建评估指标”、“使用answer_exact_match 或 SemanticF1”、提到“评估类别”、“比较程序”、“建立基线”或需要使用自定义或内置指标系统地测试和测量 DSPy 程序质量时,应使用此技能。

8安装·0热度·@omidzamani

安装

$npx skills add https://github.com/omidzamani/dspy-skills --skill dspy-evaluation-suite

SKILL.md

Systematically evaluate DSPy programs using built-in and custom metrics with parallel execution.

| program | dspy.Module | Program to evaluate | | devset | list[dspy.Example] | Evaluation examples | | metric | callable | Scoring function | | numthreads | int | Parallel threads |

| score | float | Average metric score | | results | list | Per-example results |

当用户要求“评估 DSPy 程序”、“测试我的 DSPy 模块”、“测量性能”、“创建评估指标”、“使用answer_exact_match 或 SemanticF1”、提到“评估类别”、“比较程序”、“建立基线”或需要使用自定义或内置指标系统地测试和测量 DSPy 程序质量时,应使用此技能。 来源:omidzamani/dspy-skills。

查看原文

可引用信息

为搜索与 AI 引用准备的稳定字段与命令。

安装命令
npx skills add https://github.com/omidzamani/dspy-skills --skill dspy-evaluation-suite
分类
</>开发工具
认证
收录时间
2026-02-01
更新时间
2026-02-18

快速解答

什么是 dspy-evaluation-suite?

当用户要求“评估 DSPy 程序”、“测试我的 DSPy 模块”、“测量性能”、“创建评估指标”、“使用answer_exact_match 或 SemanticF1”、提到“评估类别”、“比较程序”、“建立基线”或需要使用自定义或内置指标系统地测试和测量 DSPy 程序质量时,应使用此技能。 来源:omidzamani/dspy-skills。

如何安装 dspy-evaluation-suite?

打开你的终端或命令行工具(如 Terminal、iTerm、Windows Terminal 等) 复制并运行以下命令:npx skills add https://github.com/omidzamani/dspy-skills --skill dspy-evaluation-suite 安装完成后,技能将自动配置到你的 AI 编程环境中,可以在 Claude Code 或 Cursor 中使用

这个 Skill 的源码在哪?

https://github.com/omidzamani/dspy-skills