·evaluating-llms-harness
</>

evaluating-llms-harness

通过 60 多个学术基准(MMLU、HumanEval、GSM8K、TruthfulQA、HellaSwag)评估法学硕士。在对模型质量进行基准测试、比较模型、报告学术成果或跟踪培训进度时使用。 EleutherAI、HuggingFace 和主要实验室使用的行业标准。支援 HuggingFace、vLLM、API。

26安裝·0熱度·@ovachiever

安裝

$npx skills add https://github.com/ovachiever/droid-tings --skill evaluating-llms-harness

如何安裝 evaluating-llms-harness

透過命令列快速安裝 evaluating-llms-harness AI 技能到你的開發環境

  1. 開啟終端機: 開啟你的終端機或命令列工具(如 Terminal、iTerm、Windows Terminal 等)
  2. 執行安裝指令: 複製並執行以下指令:npx skills add https://github.com/ovachiever/droid-tings --skill evaluating-llms-harness
  3. 驗證安裝: 安裝完成後,技能將自動設定到你的 AI 程式設計環境中,可以在 Claude Code、Cursor 或 OpenClaw 中使用

來源:ovachiever/droid-tings。

SKILL.md

查看原文

lm-evaluation-harness evaluates LLMs across 60+ academic benchmarks using standardized prompts and metrics.

Benchmark descriptions: See references/benchmark-guide.md for detailed description of all 60+ tasks, what they measure, and interpretation.

Custom tasks: See references/custom-tasks.md for creating domain-specific evaluation tasks.

通过 60 多个学术基准(MMLU、HumanEval、GSM8K、TruthfulQA、HellaSwag)评估法学硕士。在对模型质量进行基准测试、比较模型、报告学术成果或跟踪培训进度时使用。 EleutherAI、HuggingFace 和主要实验室使用的行业标准。支援 HuggingFace、vLLM、API。 來源:ovachiever/droid-tings。

可引用資訊

為搜尋與 AI 引用準備的穩定欄位與指令。

安裝指令
npx skills add https://github.com/ovachiever/droid-tings --skill evaluating-llms-harness
分類
</>開發工具
認證
收錄時間
2026-03-03
更新時間
2026-03-10

Browse more skills from ovachiever/droid-tings

快速解答

什麼是 evaluating-llms-harness?

通过 60 多个学术基准(MMLU、HumanEval、GSM8K、TruthfulQA、HellaSwag)评估法学硕士。在对模型质量进行基准测试、比较模型、报告学术成果或跟踪培训进度时使用。 EleutherAI、HuggingFace 和主要实验室使用的行业标准。支援 HuggingFace、vLLM、API。 來源:ovachiever/droid-tings。

如何安裝 evaluating-llms-harness?

開啟你的終端機或命令列工具(如 Terminal、iTerm、Windows Terminal 等) 複製並執行以下指令:npx skills add https://github.com/ovachiever/droid-tings --skill evaluating-llms-harness 安裝完成後,技能將自動設定到你的 AI 程式設計環境中,可以在 Claude Code、Cursor 或 OpenClaw 中使用

這個 Skill 的原始碼在哪?

https://github.com/ovachiever/droid-tings