Use this skill for production architecture and standards decisions: storage layout, lifecycle, incremental semantics, schema evolution, quality checks, and cost/performance tradeoffs.
Do not skip Silver validation for convenience; silent quality drift is costly.
| Append | strictly new immutable events | simplest, cheapest | | Partition overwrite | deterministic reprocessing for date/key slice | safe for backfills | | Merge/Upsert | corrections/late updates/deletes | needs key + conflict semantics |
Best Practices für die Datentechnik: Medaillon-Architektur, Datensatz-Lebenszyklus, Partitionierung, Dateigröße, Schemaentwicklung und Muster zum Anhängen/Überschreiben/Zusammenführen in Polars, PyArrow, DuckDB, Delta Lake und Iceberg. Verwenden Sie es beim Entwerfen von Produktionsdatenpipelines oder beim Überprüfen von Datenplattformentscheidungen. Quelle: legout/data-platform-agent-skills.