satan9394/dsh-skills-bundle--plugins-dsh-data-engineering0

dsh-data-engineering

数据工程插件,涵盖 Airflow DAG 设计、dbt 分层建模与测试文档、Spark 性能优化及数据管线排障。

AI 分析

核心用于构建和优化大数据管线。适合需要设计幂等 DAG、进行 dbt 数据建模、解决 Spark 数据倾斜的数据工程师。

包名
dsh-data-engineering
版本
0.1.0
最近更新
2026年8月26日

安装

$npx -p @deepseek-ai/dsh dsh plugin --profile web add github:satan9394/dsh-skills-bundle#453fc2cf12e007b72e48f568e0ffe1fe4e13c616&path:plugins/dsh-data-engineering

dsh-data-engineering

DSH(DeepSeek Harness)技能插件:数据工程

Airflow DAG 设计(幂等/原子/增量/可观测)、dbt 分层建模(staging/intermediate/marts)与测试文档、Spark 优化(分区/广播/倾斜)、数据管线排障。受 wshobson/agents(38k★ MIT)启发的中文原创精简版。

安装

dsh plugin add dsh-data-engineering

触发方式

描述中包含"数据工程 / Airflow / DAG / dbt / 数据管线 / Spark / ETL / 批任务"等关键词时自动触发。

能力

  • Airflow DAG 四原则与依赖模式
  • dbt Medallion 分层与命名规范
  • Spark 优化要点(广播 join/倾斜/分区)
  • 管线排障流程

许可

MIT