通过Airflow UI,您可以轻松监控数据管道并对其进行故障排除。 以下是您可以在Airflow UI中找到的一些功能和可视化的快速概述。

DAGs查看

您环境中的DAG列表,以及一组有用页面的快捷方式。 您可以一目了然地查看成功,失败或当前正在运行的任务数量。



树视图

跨越时间的DAG的树表示。 如果管道延迟,您可以快速查看不同步骤的位置并识别阻塞步骤。


阅读全文/改进本文

Airflow 中文文档:UI /截图相关推荐

  1. Airflow 中文文档:数据分析

    使用数据生产效率的一部分是拥有正确的武器来分析您正在使用的数据. Airflow提供了一个简单的查询界面来编写SQL并快速获得结果,以及一个图表应用程序,可以让您可视化数据. 临时查询 adhoc查询 ...

  2. Airflow 中文文档:概念

    Airflow Platform是用于描述,执行和监控工作流的工具. 核心理念 DAG的 在Airflow中, DAG (或定向非循环图)是您要运行的所有任务的集合,以反映其关系和依赖关系的方式进行组 ...

  3. Airflow 中文文档:常见问题

    为什么我的任务没有安排好? 您的任务可能无法安排的原因有很多. 以下是一些常见原因: 您的脚本是否"编译",Airflow引擎是否可以解析它并找到您的DAG对象. 要对此进行测试, ...

  4. Airflow 中文文档:时区

    默认情况下启用对时区的支持. Airflow在内部和数据库中以UTC格式存储日期时间信息. 它允许您使用时区相关的计划运行DAG. 目前,Airflow不会将其转换为用户界面中的最终用户时区. 它始终 ...

  5. Airflow 中文文档:管理连接

    Airflow需要知道如何连接到您的环境. 其他系统和服务的主机名,端口,登录名和密码等信息在UI的Admin->Connection部分中处理. 您将创作的管道代码将引用Connection对 ...

  6. Airflow 中文文档:API 参考

    运营商 运算符允许生成某些类型的任务,这些任务在实例化时成为DAG中的节点. 所有运算符都派生自BaseOperator ,并以这种方式继承许多属性和方法. 有关更多详细信息,请参阅BaseOpera ...

  7. Airflow 中文文档:用Dask扩展

    DaskExecutor允许您在Dask分布式群集中运行Airflow任务. Dask集群可以在单个机器上运行,也可以在远程网络上运行. 有关完整详细信息,请参阅分布式文档 . 要创建集群,首先启动调 ...

  8. Airflow 中文文档:用Celery扩大规模

    CeleryExecutor是您扩展工人数量的方法之一. 为此,您需要设置Celery后端( RabbitMQ , Redis ,-)并更改airflow.cfg以将执行程序参数指向CeleryExe ...

  9. Airflow 中文文档:写日志

    在本地编写日志 用户可以使用base_log_folder设置在airflow.cfg指定日志文件夹. 默认情况下,它位于AIRFLOW_HOME目录中. 此外,用户可以提供远程位置,以便在云存储中存 ...

最新文章

  1. 机器学习数学基础系列|凸优化——开启新世界的大门(上)
  2. mysql字符集和表字符集_设置数据库的字符集和设置表字段字符集的区别是什么?...
  3. 天线的近场区和远场区
  4. springboot mysql 事务_springBoot(14):使用SQL关系型数据库-事务处理
  5. curl 使用 ~/.netrc
  6. ggplot2设置坐标轴范围_Matplotlib入门-2-坐标轴axis/axes设置
  7. 今年你参与开源了吗?
  8. Hibernate的懒加载session丢失解决方法
  9. Android 仿微信朋友圈发表图片拖拽和删除功能
  10. Linux 命令(3)—— sed 命令
  11. Exp4恶意软件分析 20154326杨茜
  12. ORA-28002 Oracle口令过期
  13. Java实现SQL格式化
  14. 批处理——详解%~dp0 %~nx0
  15. CSS(七)元素过渡、变化、动画
  16. 杂谈:倘若flash支持JPEG XR格式?
  17. glut 配置,解决“gl/glut.h”: No such file or directory
  18. 机械革命s3和机械革命s3pro的区别 哪个好
  19. 致读者的一封信——付费专栏《数据科学技术与应用_中国大学MOOC_持续更新》用户调查【2021/1/22】
  20. 详解软件项目管理流程的每一步

热门文章

  1. 移动端安全测试主要涉及_Android APP安全测试基础
  2. stm32 ISP串口下载
  3. 数据结构之遍历二叉树
  4. Linux C语言连接MySQL 增删改查操作
  5. HTTP协议 (二) 基本认证
  6. Linux输入子系统:输入设备编程指南 -- input-programming.txt
  7. 内核并发控制---顺序锁 (来自网易)
  8. 查看mysql某人执行了什么语句_详解MySQL如何监控系统全部执行过的sql语句
  9. 菜鸟学习笔记:Java基础篇5(抽象类与接口、回调函数、内部类)
  10. 红帽linux安装显卡驱动,RedHat Enterprise Linux 6 安装ATI显卡驱动