·nemo-evaluator
</>

nemo-evaluator

Используйте при оценке LLM, выполнении тестов, таких как MMLU/HumanEval/GSM8K, настройке конвейеров оценки или вопросах о «NeMo Evaluator», «LLM-тестировании», «оценке модели», «MMLU», «HumanEval», «GSM8K», «системах эталонного тестирования».

30Установки·3Тренд·@eyadsibai

Установка

$npx skills add https://github.com/eyadsibai/ltk --skill nemo-evaluator

Как установить nemo-evaluator

Быстро установите AI-навык nemo-evaluator в вашу среду разработки через командную строку

  1. Откройте терминал: Откройте терминал или инструмент командной строки (Terminal, iTerm, Windows Terminal и т.д.)
  2. Выполните команду установки: Скопируйте и выполните эту команду: npx skills add https://github.com/eyadsibai/ltk --skill nemo-evaluator
  3. Проверьте установку: После установки навык будет автоматически настроен в вашей AI-среде разработки и готов к использованию в Claude Code, Cursor или OpenClaw

Источник: eyadsibai/ltk.

NeMo Evaluator SDK evaluates LLMs across 100+ benchmarks from 18+ harnesses using containerized, reproducible evaluation with multi-backend execution (local Docker, Slurm HPC, Lepton cloud).

| lm-evaluation-harness | 60+ | MMLU, GSM8K, HellaSwag, ARC | | simple-evals | 20+ | GPQA, MATH, AIME | | bigcode-evaluation-harness | 25+ | HumanEval, MBPP, MultiPL-E | | safety-harness | 3 | Aegis, WildGuard | | vlmevalkit | 6+ | OCRBench, ChartQA, MMMU | | bfcl | 6 | Function calling v2/v3 |

| run | Execute evaluation with config | | status | Check job status | | ls tasks | List available benchmarks | | ls runs | List all invocations | | export | Export results (mlflow/wandb/local) | | kill | Terminate running job |

Факты (для цитирования)

Стабильные поля и команды для ссылок в AI/поиске.

Команда установки
npx skills add https://github.com/eyadsibai/ltk --skill nemo-evaluator
Источник
eyadsibai/ltk
Категория
</>Разработка
Проверено
Впервые замечено
2026-02-17
Обновлено
2026-03-10

Browse more skills from eyadsibai/ltk

Короткие ответы

Что такое nemo-evaluator?

Используйте при оценке LLM, выполнении тестов, таких как MMLU/HumanEval/GSM8K, настройке конвейеров оценки или вопросах о «NeMo Evaluator», «LLM-тестировании», «оценке модели», «MMLU», «HumanEval», «GSM8K», «системах эталонного тестирования». Источник: eyadsibai/ltk.

Как установить nemo-evaluator?

Откройте терминал или инструмент командной строки (Terminal, iTerm, Windows Terminal и т.д.) Скопируйте и выполните эту команду: npx skills add https://github.com/eyadsibai/ltk --skill nemo-evaluator После установки навык будет автоматически настроен в вашей AI-среде разработки и готов к использованию в Claude Code, Cursor или OpenClaw

Где находится исходный репозиторий?

https://github.com/eyadsibai/ltk

Детали

Категория
</>Разработка
Источник
skills.sh
Впервые замечено
2026-02-17