問題タブ [google-cloud-composer]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
2 に答える
1061 参照

google-bigquery - Airflow の bigqueryoperator が udf で機能しない

ユーザー定義関数 (UDF) を使用する Airflow (Google の Composer を使用) タスクで基本的な bigquery 演算子を実行しようとしています。

この例はhttps://cloud.google.com/bigquery/docs/reference/standard-sql/user-defined-functionsからのもので、BigQuery で完全に実行されます。

ただし、コンポーザーにアップロードすると、「関数が見つかりません:multiplyInputs...」というメッセージが表示されます。以下の python スクリプトを参照してください。

BigQueryOperator の udf_config フィールドにはリストが必要なので、UDF を 1 つの文字列を含むリストとして定義しました - 明らかに UDF として登録されていないため、これが正しいかどうかはわかりません

どんな助けでも大歓迎です。

0 投票する
3 に答える
2900 参照

airflow - Google Composer で DAG を削除する - Airflow UI

フォルダで使用できなくなった DAG を Airflow UI から削除したいと考えていGCS/dagsます。https://stackoverflow.com/a/49683543/5318634airflow delete_dag my_dag_idに見られるように、Airflow にはコマンドを使用して DB からダグを削除する「新しい」方法があることを知ってい ます

composer airflow バージョンでは、delete_dagコマンドはまだサポートされていないようです。

これを試さないでください: 私も使用airflow resetdbしてみましたが、気流 UI が停止しました

gs://BUCKET/dags/現在フォルダにない dags を削除する方法はありますか?