ポッドでコマンドを実行し、エラーを取得したいpapermill(存在する場合)。bash operatorこれは、 i Airflowを使用して Airflow ワーカーから実行する必要があります。
必要に応じてコマンドを実行してみました。自分のワーカーから複数の bash コマンドを実行してみました。これらのコマンドは、ワーカー内で実行することを意図していました。しかし、これは、このようなことが可能であるという考えを私に与えてくれます. ただし、これを解決するより良いアプローチがあれば、私はすべて耳を傾けています。
実行する bash コマンドは次のとおりです。
papermill check1.ipynb check1_output.ipynb -p params '{"aviral":"srivastava", "apoorv":"srivastava"}'
手動でexec、ポッドでこのコマンドを実行します。これを気流のdagでbashコマンドにしたい。