什么是 evaluating-llms-harness?
通过 60 多个学术基准(MMLU、HumanEval、GSM8K、TruthfulQA、HellaSwag)评估法学硕士。在对模型质量进行基准测试、比较模型、报告学术成果或跟踪培训进度时使用。 EleutherAI、HuggingFace 和主要实验室使用的行业标准。支持 HuggingFace、vLLM、API。 来源:ovachiever/droid-tings。
通过 60 多个学术基准(MMLU、HumanEval、GSM8K、TruthfulQA、HellaSwag)评估法学硕士。在对模型质量进行基准测试、比较模型、报告学术成果或跟踪培训进度时使用。 EleutherAI、HuggingFace 和主要实验室使用的行业标准。支持 HuggingFace、vLLM、API。
通过命令行快速安装 evaluating-llms-harness AI 技能到你的开发环境
来源:ovachiever/droid-tings。
lm-evaluation-harness evaluates LLMs across 60+ academic benchmarks using standardized prompts and metrics.
Benchmark descriptions: See references/benchmark-guide.md for detailed description of all 60+ tasks, what they measure, and interpretation.
Custom tasks: See references/custom-tasks.md for creating domain-specific evaluation tasks.
通过 60 多个学术基准(MMLU、HumanEval、GSM8K、TruthfulQA、HellaSwag)评估法学硕士。在对模型质量进行基准测试、比较模型、报告学术成果或跟踪培训进度时使用。 EleutherAI、HuggingFace 和主要实验室使用的行业标准。支持 HuggingFace、vLLM、API。 来源:ovachiever/droid-tings。
为搜索与 AI 引用准备的稳定字段与命令。
npx skills add https://github.com/ovachiever/droid-tings --skill evaluating-llms-harness通过 60 多个学术基准(MMLU、HumanEval、GSM8K、TruthfulQA、HellaSwag)评估法学硕士。在对模型质量进行基准测试、比较模型、报告学术成果或跟踪培训进度时使用。 EleutherAI、HuggingFace 和主要实验室使用的行业标准。支持 HuggingFace、vLLM、API。 来源:ovachiever/droid-tings。
打开你的终端或命令行工具(如 Terminal、iTerm、Windows Terminal 等) 复制并运行以下命令:npx skills add https://github.com/ovachiever/droid-tings --skill evaluating-llms-harness 安装完成后,技能将自动配置到你的 AI 编程环境中,可以在 Claude Code、Cursor 或 OpenClaw 中使用
https://github.com/ovachiever/droid-tings