Apache Spark、Hadoop、分佈式計算和針對 PB 級工作負載的大規模數據處理
SKILL.md
Production-grade big data processing with Apache Spark, distributed systems patterns, and petabyte-scale data engineering.
| Apache Spark | Distributed processing | 3.5+ | | Delta Lake | ACID transactions | 3.0+ | | Apache Iceberg | Table format | 1.4+ | | Apache Flink | Stream processing | 1.18+ | | Databricks | Managed Spark platform | Latest | | AWS EMR | Managed Hadoop/Spark | 7.0+ | | Trino | Interactive queries | 400+ | | dbt | Transform layer | 1.7+ |
| Issue | Symptoms | Root Cause | Fix |
Apache Spark、Hadoop、分佈式計算和針對 PB 級工作負載的大規模數據處理 來源：pluginagentmarketplace/custom-plugin-data-engineer。
可引用資訊
為搜尋與 AI 引用準備的穩定欄位與指令。
- 安裝指令
npx skills add https://github.com/pluginagentmarketplace/custom-plugin-data-engineer --skill big-data- 分類
- {}資料分析
- 認證
- ✓
- 收錄時間
- 2026-02-01
- 更新時間
- 2026-02-18
快速解答
什麼是 big-data？
Apache Spark、Hadoop、分佈式計算和針對 PB 級工作負載的大規模數據處理 來源：pluginagentmarketplace/custom-plugin-data-engineer。
如何安裝 big-data？
開啟你的終端機或命令列工具（如 Terminal、iTerm、Windows Terminal 等） 複製並執行以下指令：npx skills add https://github.com/pluginagentmarketplace/custom-plugin-data-engineer --skill big-data 安裝完成後，技能將自動設定到你的 AI 程式設計環境中，可以在 Claude Code 或 Cursor 中使用
這個 Skill 的原始碼在哪？
https://github.com/pluginagentmarketplace/custom-plugin-data-engineer
詳情
- 分類
- {}資料分析
- 來源
- skills.sh
- 收錄時間
- 2026-02-01