-
airflow-boilerplate: 一套完整的开发环境配置,旨在支持使用Airflow
资源介绍
气流样板
根据,一个完整的开发环境设置可以与Airflow一起使用。 如果您有兴趣了解此设置背后的想法和过程,请阅读本文。 否则,如果您想立即动手操作,则可以跳过它,而只需按照以下说明进行操作即可。
该样板工具比本文中讨论的工具更多。 特别是,它具有以下文章中未讨论的内容:
DAG示例
一个示例插件
插件的示例测试
示例帮助程序方法dags/common/stringcase.py ,可以在dags/common/stringcase.py dags/和plugins/
辅助方法的样本测试
Docker构建步骤中包含的spark-conf/ ,您可以自己探索
.pre-commit-config.yaml
入门
在以下位置安装docker和docker-compose :
克隆这种回购和cd进去:
git clone https://github.com/ninja-van/a