逍遥法外-离开舒适区,才能
先努力让自己发光,对的人才能迎着光而来。”
ApacheAirflow是一个能够开发、调度和监控工作流的编排平台。在Shopify,我们已经在生产中运行了两年多的Airflow,用于各种工作流,包括数据提取、机器学习模型训练、ApacheIceberg表维护和DBT驱动的数据建模。在撰写本文时,我们正通过Celery执行器和MySQL8在Kubernetes上来运行Airflow2.2。Shopify在Airflow上的应用规模在过去两年中...
先努力让自己发光,对的人才能迎着光而来。”
ApacheAirflow是一个能够开发、调度和监控工作流的编排平台。在Shopify,我们已经在生产中运行了两年多的Airflow,用于各种工作流,包括数据提取、机器学习模型训练、ApacheIceberg表维护和DBT驱动的数据建模。在撰写本文时,我们正通过Celery执行器和MySQL8在Kubernetes上来运行Airflow2.2。Shopify在Airflow上的应用规模在过去两年中...