满面春风-41云(41云是
我满世界打听幸福的下落终于知道幸福不是传说。
ApacheAirflow是一个能够开发、调度和监控工作流的编排平台。在Shopify,我们已经在生产中运行了两年多的Airflow,用于各种工作流,包括数据提取、机器学习模型训练、ApacheIceberg表维护和DBT驱动的数据建模。在撰写本文时,我们正通过Celery执行器和MySQL8在Kubernetes上来运行Airflow2.2。Shopify在Airflow上的应用规模在过去两年中...
我满世界打听幸福的下落终于知道幸福不是传说。
ApacheAirflow是一个能够开发、调度和监控工作流的编排平台。在Shopify,我们已经在生产中运行了两年多的Airflow,用于各种工作流,包括数据提取、机器学习模型训练、ApacheIceberg表维护和DBT驱动的数据建模。在撰写本文时,我们正通过Celery执行器和MySQL8在Kubernetes上来运行Airflow2.2。Shopify在Airflow上的应用规模在过去两年中...