Use this skill for production architecture and standards decisions: storage layout, lifecycle, incremental semantics, schema evolution, quality checks, and cost/performance tradeoffs.
Do not skip Silver validation for convenience; silent quality drift is costly.
| Append | strictly new immutable events | simplest, cheapest | | Partition overwrite | deterministic reprocessing for date/key slice | safe for backfills | | Merge/Upsert | corrections/late updates/deletes | needs key + conflict semantics |
Mejores prácticas de ingeniería de datos: arquitectura medallón, ciclo de vida del conjunto de datos, partición, tamaño de archivos, evolución de esquemas y patrones de adición/sobrescritura/fusión en Polars, PyArrow, DuckDB, Delta Lake e Iceberg. Úselo al diseñar canales de datos de producción o revisar decisiones de plataformas de datos. Fuente: legout/data-platform-agent-skills.