#气流

Airflow 2.0(airflow.apache.org)
2020-12-18 15:56
完整的变更日志大约有3,000行(已经排除了向后移植到1.10的所有内容),所以到目前为止,我将简单地分享2.0.0和1.10.14相比的一些主要功能: DAG现在要好得多,尤其是在使用PythonOperator时。依赖关系处理更加清晰,XCom更易于使用 从airflow.decorators导入d......
2020-8-18 7:54
近两年来,气流一直是Curoology数据堆栈中不可或缺的一部分。在此过程中,我们采用了气流开发模式,极大地加快了我们的工作流程。在这篇文章中,我们想与大家分享一下我们在Curoology发展和操作气流的旅程中的一些经验教训。 我们将假设您熟悉ETL和气流及其核心概念-本文不会深入讨论这些概念,但有许多其他资源可以做......
2020-7-21 16:38
风塔(捕风器)(波斯语:بادگیر‎bâdgir:Bâd";Wind";+Gir";Catcher";)是伊朗的一种传统建筑元素,用来在建筑物中创造自然通风。[1]捕风器有各种设计:单向、双向和多向。这些装置被用于伊朗古代建筑。捕风者仍然存在于伊朗,在整个西亚地区,包括波斯湾、巴基斯坦和阿富......
2020-5-29 21:22
Airflow是一个由社区创建的平台,用于以编程方式编写、计划和监控工作流。 机器学习是业界的热门话题。如果不是涉及到数据处理,它就不会这么酷。 假设您有一个执行Twitter情感分析的ML模型。现在,您想要在Twitter上为您最喜欢的人每天的tweet运行该模型。这样的工作流应该是这样的。 如您所见,数据从管道的......