Elasticsearch for Hadoop ライブラリを使用して Kubernetes クラスターを構成した経験のある人がいるかどうか疑問に思っています。spark から elasticsearch に書き込もうとすると、ノード検出がタイムアウトするという問題が発生しています。検出を処理する ES 用の elasticsearch-cloud-kubernetesプラグインのおかげで、Elasticsearch を稼働させていますが、kubernetes クラスター内のノード (ポッド) を認識するように elasticsearch-hadoop を構成する最善の方法がわかりません。es-client サービスに設定しようとしましspark.es.nodesたが、うまくいかないようです。を有効にできることも認識していes.nodes.wan.onlyますが、ドキュメントに記載されているように、これは深刻な問題になりますパフォーマンスに影響を与え、同じクラスターで実行するという目的を無効にします。どんな助けでも大歓迎です。
質問する
344 次