問題タブ [google-cloud-composer]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
1 に答える
2950 参照

google-cloud-platform - Google Cloud Composer で airflow cli を実行する

Google Cloud Composer 環境で airflow test cli を実行しようとしましたが、うまくいきません。

airflow test基本的には、気流環境でタスクをテストするために実行したいと考えています。ここの指示に従っています: https://cloud.google.com/composer/docs/how-to/accessing/airflow-cli

これは私が実行するコマンドです:

出力:

ERROR: (gcloud.beta.composer.environments.run) unrecognized arguments:

0 投票する
2 に答える
5825 参照

google-cloud-platform - Cloud Composer を使用してファイルをダウンロードしてアクセスするにはどうすればよいですか?

ファイル関連のユース ケースがいくつかありますが、Cloud Composer を使用して最も効果的に達成する方法がわかりません。これらをどのように達成するのが最善ですか?

1) SFTP サーバーにアクセスするには、秘密鍵 (.pem) ファイルを使用する必要があります。このファイルをどこに保存し、どのようにアクセスする必要がありますか? オンプレミスの Airflow では、/dags/ と同じディレクトリにあるフォルダー /keys/ にファイルを配置するだけです。

2) SFTP サーバーから Cloud Storage にファイルを移動する必要があります。オンプレミスの Airflow を使用して、これらを SFTP サーバーから Airflow ワーカー インスタンスの特定の場所にダウンロードし、そこからアップロードします。Composer で同様のことを行うことはできますか? ファイル システムにアクセスできない場合の回避策はありますか?