第一次运行Airflow时,它会在$AIRFLOW_HOME目录中创建一个名为airflow.cfg的文件(默认情况下为~/airflow $AIRFLOW_HOME )。 此文件包含Airflow的配置,您可以对其进行编辑以更改任何设置。 您还可以使用以下格式设置带有环境变量的选项: $AIRFLOW__{SECTION}__{KEY} (注意双下划线)。

例如,元数据库连接字符串可以在airflow.cfg设置,如下所示:

 [ core ]
sql_alchemy_conn = my_conn_string

或者通过创建相应的环境变量:

 AIRFLOW__CORE__SQL_ALCHEMY_CONN = my_conn_string

您还可以通过将_cmd附加到键来在运行时派生连接字符串,如下所示:

阅读全文/改进本文

Airflow 中文文档:设置配置选项相关推荐

  1. Mitmproxy/mitmdump中文文档以及配置教程

    目录 目录 Introduction Features Installation Run Scripts Events 本文是一个较为完整的mitmproxy教程,侧重于介绍如何开发拦截脚本,帮助读者 ...

  2. Airflow 中文文档:使用测试模式配置

    Airflow具有一组固定的"测试模式"配置选项. 您可以随时通过调用airflow.configuration.load_test_config()来加载它们(注意此操作不可逆! ...

  3. Gauge中文文档(9)—配置

    最新翻译(2020/12/1)已更新在个人博客:https://www.nothinghere.cn/gauge/overview/ 所有gauge内部的特定配置都存储在gauge.propertie ...

  4. Airflow 中文文档:数据分析

    使用数据生产效率的一部分是拥有正确的武器来分析您正在使用的数据. Airflow提供了一个简单的查询界面来编写SQL并快速获得结果,以及一个图表应用程序,可以让您可视化数据. 临时查询 adhoc查询 ...

  5. Airflow 中文文档:初始化数据库后端

    如果您想对Airflow进行真正的试驾,您应该考虑设置一个真正的数据库后端并切换到LocalExecutor. 由于Airflow是使用优秀的SqlAlchemy库与其元数据进行交互而构建的,因此您应 ...

  6. Airflow 中文文档:概念

    Airflow Platform是用于描述,执行和监控工作流的工具. 核心理念 DAG的 在Airflow中, DAG (或定向非循环图)是您要运行的所有任务的集合,以反映其关系和依赖关系的方式进行组 ...

  7. Airflow 中文文档:常见问题

    为什么我的任务没有安排好? 您的任务可能无法安排的原因有很多. 以下是一些常见原因: 您的脚本是否"编译",Airflow引擎是否可以解析它并找到您的DAG对象. 要对此进行测试, ...

  8. Airflow 中文文档:用Celery扩大规模

    CeleryExecutor是您扩展工人数量的方法之一. 为此,您需要设置Celery后端( RabbitMQ , Redis ,-)并更改airflow.cfg以将执行程序参数指向CeleryExe ...

  9. Airflow 中文文档:集成

    反向代理 Azure:Microsoft Azure AWS:亚马逊网络服务 Databricks GCP:Google云端平台 反向代理 可以在反向代理后面设置气流,并能够灵活地设置其端点. 例如, ...

最新文章

  1. php中查询结果展示
  2. mysql 创建和删除库_Mysql创建和删除数据库
  3. matlab通信物理层仿真,通信小精灵(物理层仿真工具) 可计算仿真误码率、理论误...
  4. MyBatis基于注解的使用
  5. xcode 本地git代码管理
  6. Java黑皮书课后题第7章:*7.28(数学:组合)编写一个程序,提示用户输入10个整数,然后显示从这10个数中选出两个数的所有组合
  7. Oracle中创建、修改、删除序列
  8. C和指针之字符串strspn、strcspn函数源代码的实现
  9. java搭建tcp客户端_【Java学习笔记】TCP客户端/服务器端
  10. Python之快速排序算法实现(二)
  11. set和map去重调用什么方法_Es6中Map对象和Set对象的介绍及应用
  12. numpy - np.append
  13. 常用模块(collections模块,时间模块,random模块,os模块,sys模块,序列化模块,re模块,hashlib模块,configparser模块,logging模块)...
  14. vscode中终端字体设置
  15. 06-maven的profile和Spring boot 的profile整合
  16. ISSCC 2017论文导读 Session 14: A 28nm SoC with a 1.2GHz Prediction Sparse Deep-Neural-Network Engine
  17. springcloud以及四大神兽面试涉及知识总结(持续更新)
  18. 2021年美容师(初级)考试资料及美容师(初级)
  19. 电脑生成永久二维码怎么弄的?二维码图案不变怎么改内容?
  20. 展讯平台lcd频率计算

热门文章

  1. mysql多张表join_mysql 连接查询(多表查询)+子查询-初学教程 3【重点】
  2. 1017.UML类图笔记
  3. 计算机网络|UDP用户数据报服务
  4. STM32 DMA详解
  5. php util.js,javascript中一些util方法汇总_javascript技巧
  6. 网络性能优化(NAPI)
  7. 加载osgb数据转换不能用_在ArcGIS Pro中OSGB数据转换及发布服务流程
  8. 微信小程序|开发实战篇之四
  9. ES6高级技巧(五)
  10. MySQL数据类型之BLOB与TEXT及其最大存储限制