• Airflow 可能是过去十年中 Top 5 突破性数据技术之一。作者通过比较 Airflow 的一些优缺点来描述当今编排引擎的竞争格局。 Apache Airflow 从根本上没有错，它是一流的数据工程工具，长期以来一直在推动数据管道向前发展。而
  • 最初，Airflow 有点像“超级 cron”，因此运行作业的方式与框架本身高度耦合。今天，您必须克服的最大挑战是消除调度和作业之间的耦合。 1）Airflow是一个编排框架，而不是一个执行框架：对于您的工
  • 如果您在 Kubernetes 集群上部署 Airflow，并且正在寻找将 DBT 集成到 Airflow 中的方法，那么本文可能会给您一些启发。需要对 Airflow、DBT（数据构建工具）和 Kubernetes 有一些基本的了解。 icon
  • 处于数字化转型前沿的组织采用尖端技术和现代敏捷实践来优化所有可以优化的东西，数字化所有可以数字化的东西，以及自动化所有可以自动化的东西。  这个组织虽然能够： 拥有最先进的人力资源软件，可确保有效部署和利用人力资源 使用 RPA 自动化所有重复性任务和流程 < icon
  • 这个代码库包含了一个用于在Apache Airflow中操作大语言模型（LLMs）的软件开发工具包（SDK），它基于Pydantic AI构建。 这个工具让用户可以直接在Airflow工作流中调用大语言模型，并通过装饰器任务来协调智能代理的调用。< icon