问题描述
我正在Google Composer上运行Airflow。我的任务是KubernetesPodoperators,默认情况下,对于Composer,它们与Celery Executor一起运行。
我刚刚更新了KubernetesPodoperator之一使用的Docker映像,但是我的更改没有得到体现。我认为原因是它使用了图像的缓存版本。
如何清除KubernetesPodoperator的缓存?我知道我可以在DAG中设置image_pull_policy=Always
,但是我希望它将来使用缓存的图像,我只需要它现在刷新缓存即可。
这是我的KubernetesPodoperator(注释行除外)的方式:
processor = kubernetes_pod_operator.KubernetesPodoperator(
task_id='processor',name='processor',arguments=[filename],namespace='default',pool='default_pool',image='gcr.io/proj/processor',# image_pull_policy='Always' # I want to avoid this so I don't have to update the DAG
)
解决方法
暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!
如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。
小编邮箱:dio#foxmail.com (将#修改为@)