Use this skill for production architecture and standards decisions: storage layout, lifecycle, incremental semantics, schema evolution, quality checks, and cost/performance tradeoffs.
Do not skip Silver validation for convenience; silent quality drift is costly.
| Append | strictly new immutable events | simplest, cheapest | | Partition overwrite | deterministic reprocessing for date/key slice | safe for backfills | | Merge/Upsert | corrections/late updates/deletes | needs key + conflict semantics |
데이터 엔지니어링 모범 사례: Polars, PyArrow, DuckDB, Delta Lake 및 Iceberg 전반에 걸친 메달리온 아키텍처, 데이터 세트 수명 주기, 파티셔닝, 파일 크기 조정, 스키마 진화 및 추가/덮어쓰기/병합 패턴. 프로덕션 데이터 파이프라인을 설계하거나 데이터 플랫폼 결정을 검토할 때 사용합니다. 출처: legout/data-platform-agent-skills.