Day 2633:学习
2024-04-11 本文已影响0人
kafkaliu
Airflow结合Jupyter Notebook。
数据工程师可以在本地开发环境中,借助Jupyter Notebook用交互方式快速验证取数逻辑
数据分析师也可以用Jupyter Notebook生成数据报告
如果不想或不必要将Jupyter Notebook中的逻辑代码移入工程项目时,可以将上述Jupyter Notebook接入Airflow的调度中,定期运行
借助papermill和Airflow可以实现上述