llm-testing

SKILL.md

Test AI applications with deterministic patterns using DeepEval and RAGAS.

| Answer Relevancy | ≥ 0.7 | Response addresses question | | Faithfulness | ≥ 0.8 | Output matches context | | Hallucination | ≤ 0.3 | No fabricated facts | | Context Precision | ≥ 0.7 | Retrieved contexts relevant |

| Mock vs VCR | VCR for integration, mock for unit | | Timeout | Always test with < 1s timeout | | Schema validation | Test both valid and invalid | | Edge cases | Test all null/empty paths | | Quality metrics | Use multiple dimensions (3-5) |

LLM 기반 응용 프로그램의 테스트 패턴입니다. AI/ML 통합 테스트, LLM 응답 모의, 비동기 시간 초과 테스트 또는 LLM의 구조화된 출력 검증 시 사용합니다. 출처: yonatangross/orchestkit.

원본 보기