Apache Spark、Hadoop、分布式计算和针对 PB 级工作负载的大规模数据处理
SKILL.md
Production-grade big data processing with Apache Spark, distributed systems patterns, and petabyte-scale data engineering.
| Apache Spark | Distributed processing | 3.5+ | | Delta Lake | ACID transactions | 3.0+ | | Apache Iceberg | Table format | 1.4+ | | Apache Flink | Stream processing | 1.18+ | | Databricks | Managed Spark platform | Latest | | AWS EMR | Managed Hadoop/Spark | 7.0+ | | Trino | Interactive queries | 400+ | | dbt | Transform layer | 1.7+ |
| Issue | Symptoms | Root Cause | Fix |
Apache Spark、Hadoop、分布式计算和针对 PB 级工作负载的大规模数据处理 来源：pluginagentmarketplace/custom-plugin-data-engineer。
可引用信息
为搜索与 AI 引用准备的稳定字段与命令。
- 安装命令
npx skills add https://github.com/pluginagentmarketplace/custom-plugin-data-engineer --skill big-data- 分类
- {}数据分析
- 认证
- ✓
- 收录时间
- 2026-02-01
- 更新时间
- 2026-02-18
快速解答
什么是 big-data？
Apache Spark、Hadoop、分布式计算和针对 PB 级工作负载的大规模数据处理 来源：pluginagentmarketplace/custom-plugin-data-engineer。
如何安装 big-data？
打开你的终端或命令行工具（如 Terminal、iTerm、Windows Terminal 等） 复制并运行以下命令：npx skills add https://github.com/pluginagentmarketplace/custom-plugin-data-engineer --skill big-data 安装完成后，技能将自动配置到你的 AI 编程环境中，可以在 Claude Code 或 Cursor 中使用
这个 Skill 的源码在哪？
https://github.com/pluginagentmarketplace/custom-plugin-data-engineer
详情
- 分类
- {}数据分析
- 来源
- skills.sh
- 收录时间
- 2026-02-01