World-class senior data engineer skill for production-grade AI/ML/Data systems.
Languages: Python, SQL, R, Scala, Go ML Frameworks: PyTorch, TensorFlow, Scikit-learn, XGBoost Data Tools: Spark, Airflow, dbt, Kafka, Databricks LLM Frameworks: LangChain, LlamaIndex, DSPy Deployment: Docker, Kubernetes, AWS/GCP/Azure Monitoring: MLflow, Weights & Biases, Prometheus Databases: PostgreSQL, BigQuery, Snowflake, Pinecone
Comprehensive guide available in references/datapipelinearchitecture.md covering:
مهارة هندسة البيانات ذات المستوى العالمي لبناء خطوط أنابيب بيانات قابلة للتطوير وأنظمة ETL/ELT والبنية التحتية للبيانات. خبرة في Python وSQL وSpark وAirflow وdbt وKafka ومكدس البيانات الحديث. يتضمن نمذجة البيانات وتنسيق خطوط الأنابيب وجودة البيانات وDataOps. يُستخدم عند تصميم بنيات البيانات، أو إنشاء خطوط أنابيب البيانات، أو تحسين سير عمل البيانات، أو تنفيذ إدارة البيانات. المصدر: questnova502/claude-skills-sync.