data-science-model-evaluation

Use this skill for rigorously assessing model performance, comparing alternatives, and diagnosing issues.

| Cross-validation | sklearn.modelselection | Standard CV, stratified, time series | | Metrics | sklearn.metrics | Comprehensive metric suite | | Hyperparameter tuning | Optuna or Ray Tune | Efficient search algorithms | | Model comparison | scikit-learn + statistical tests | Paired comparisons |

| Experiment tracking | MLflow or Weights & Biases | Track runs, metrics, artifacts |

モデルの評価と検証: 相互検証、メトリクス、ハイパーパラメーター調整、モデルの比較。モデルのパフォーマンスの評価、モデルの選択、またはモデリングの問題の診断時に使用します。 ソース: legout/data-platform-agent-skills。