Обнаруживайте скрытые сбои в агентах LLM — пропуск инструментов, бессмыслицу, бесконечные циклы и ухудшение качества. Используйте, когда кажется, что агенты работают, но дают неправильные результаты.
Быстро установите AI-навык silent-failure-detection в вашу среду разработки через командную строку
Источник: yonatangross/orchestkit.
Detect when LLM agents fail silently - appearing to work while producing incorrect results.
| Detection priority | Tool skipping > Gibberish > Loops > Anomalies | | Quality check | LLM-as-judge with heuristic pre-filter | | Loop threshold | 10 iterations or 3x baseline tokens | | Anomaly threshold | Z-score > 3.0 (99.7% confidence) | | Alert strategy | Alert on silent failure, not just errors |
| Tool Skipping | Expected vs actual tool calls | Critical | | Gibberish Output | LLM-as-judge + heuristics | High | | Infinite Loop | Iteration count + token spike | Critical | | Quality Degradation | Score < baseline | Medium | | Latency Spike | p99 > threshold | Medium |
Стабильные поля и команды для ссылок в AI/поиске.
npx skills add https://github.com/yonatangross/orchestkit --skill silent-failure-detectionОбнаруживайте скрытые сбои в агентах LLM — пропуск инструментов, бессмыслицу, бесконечные циклы и ухудшение качества. Используйте, когда кажется, что агенты работают, но дают неправильные результаты. Источник: yonatangross/orchestkit.
Откройте терминал или инструмент командной строки (Terminal, iTerm, Windows Terminal и т.д.) Скопируйте и выполните эту команду: npx skills add https://github.com/yonatangross/orchestkit --skill silent-failure-detection После установки навык будет автоматически настроен в вашей AI-среде разработки и готов к использованию в Claude Code, Cursor или OpenClaw
https://github.com/yonatangross/orchestkit