需要在Airflow中的DockerOperator中访问计划时间

编程入门 行业动态 更新时间:2024-10-24 04:33:24
本文介绍了需要在Airflow中的DockerOperator中访问计划时间的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧! 问题描述

需要在airflow的docker操作员中访问计划时间。例如

Need to access schedule time in airflow's docker operator. For example

t1 = DockerOperator( task_id="task", dag=dag, image="test-runner:1.0", docker_url="xxx.xxx.xxx.xxx:2376", environment={"FROM": "{{(execution_date + macros.timedelta(hours=6,minutes=(30))).isoformat()}}"})

基本上,我需要在docker环境中填充调度时间。

Basically, I need to populate schedule time as docker environment.

推荐答案

仅当宏是template_fields时才起作用。其次,您需要检查使用的是哪个版本的气流,如果您使用的是1.9或更低版本,则它可能不适用于DockerOperator,注释中提到了@ tobi6,因为template_fields仅包含命令( github/apache/ incubator-airflow / blob / v1-9-stable / airflow / operators / docker_operator.py#L91 ) 但是,那里有1.10稳定的DockerOperator添加环境。 github。 com / apache / incubator-airflow / blob / v1-10-stable / airflow / operators / docker_operator.py#L103

First macros only works if it is a template_fields. Second, you need to check which version of airflow you are using, if you are using 1.9 or below, it is likely it won't work for DockerOperator which @tobi6 mentioned in the comment, since template_fields only included command (github/apache/incubator-airflow/blob/v1-9-stable/airflow/operators/docker_operator.py#L91) However, 1.10 stable add environment there for DockerOperator. github/apache/incubator-airflow/blob/v1-10-stable/airflow/operators/docker_operator.py#L103

更多推荐

需要在Airflow中的DockerOperator中访问计划时间

本文发布于:2023-11-23 18:48:47,感谢您对本站的认可!
本文链接:https://www.elefans.com/category/jswz/34/1622506.html
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。
本文标签:时间   计划   Airflow   DockerOperator

发布评论

评论列表 (有 0 条评论)
草根站长

>www.elefans.com

编程频道|电子爱好者 - 技术资讯及电子产品介绍!