問題タブ [google-cloud-composer]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
google-bigquery - Airflow の bigqueryoperator が udf で機能しない
ユーザー定義関数 (UDF) を使用する Airflow (Google の Composer を使用) タスクで基本的な bigquery 演算子を実行しようとしています。
この例はhttps://cloud.google.com/bigquery/docs/reference/standard-sql/user-defined-functionsからのもので、BigQuery で完全に実行されます。
ただし、コンポーザーにアップロードすると、「関数が見つかりません:multiplyInputs...」というメッセージが表示されます。以下の python スクリプトを参照してください。
BigQueryOperator の udf_config フィールドにはリストが必要なので、UDF を 1 つの文字列を含むリストとして定義しました - 明らかに UDF として登録されていないため、これが正しいかどうかはわかりません
どんな助けでも大歓迎です。
airflow - Google Composer で DAG を削除する - Airflow UI
フォルダで使用できなくなった DAG を Airflow UI から削除したいと考えていGCS/dags
ます。https://stackoverflow.com/a/49683543/5318634airflow delete_dag my_dag_id
に見られるように、Airflow にはコマンドを使用して DB からダグを削除する「新しい」方法があることを知ってい
ます
composer airflow バージョンでは、delete_dag
コマンドはまだサポートされていないようです。
これを試さないでください: 私も使用airflow resetdb
してみましたが、気流 UI が停止しました
gs://BUCKET/dags/
現在フォルダにない dags を削除する方法はありますか?