google-cloud-dataflow - Dataflow ワーカー ログを Cloud Pubsub にエクスポートするにはどうすればよいですか?

Question

Cloud Dataflow のワーカー ログに対して二次処理を実行したいと考えています。それを行う簡単な方法はありますか？

Answer 1

これは、Cloud Logging からのログ エクスポートを構成することで実行できます。

まず、Cloud Logging UIのエクスポートテーブルに移動します。

[エクスポート] ページで、次の手順に従います。

1. Dataflowサービスを選択します。
2. [すべてのソース] の選択を解除します。
3. [アイテムを追加] をクリックし、 dataflow.googleapis.com/workerを選択します。
4. パブリッシュ先の Pubsub トピックを選択します。