問題タブ [airflow-scheduler]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
python-2.7 - 気流のバックフィルが現在まで完全に満たされていない
私は理解できないような奇妙な問題に苦しんでいます。派手なことは何もしない基本的な DAG があります。bash 演算子を使用して Python スクリプトを開始するだけです。
この DAG を毎週月曜日に実行するようにスケジュールしています。Web サーバーで DAG をオンにすると、9 月 25 日までバックフィルが開始されます。ただし、10 月 2 日のバックフィルは行われません。スケジュールを毎週から毎日に変更すると、うまくいきます。
これが私の DAG セットアップです。
この写真からわかるように、25日までは埋め戻しは順調です。その後、キューに入れられた新しいタスクはありません。
ここで何が間違っていますか?他の DAG は何週間も正常に動作しています。スケジューラと Web サーバーも再起動しましたが、これは役に立ちませんでした。
編集:
以下のトピックは、同じ問題をカバーしているようです。しかし、これは私の質問を変更します。その期間全体が終了するのを待つのではなく、特定の日付に毎週エアフローを実行するにはどうすればよいですか?
airflow - DAG が Airflow での実行を終了したら、XCOM オブジェクトを削除する方法
XCOM に巨大な json ファイルがありますが、後で DAG の実行が終了したら必要ありませんが、UI に Xcom オブジェクトとすべてのデータが表示されます。DAG の実行後にプログラムで XCOM を削除する方法はありますか?終了しました。
ありがとうございました