python - 「py4j.java_gateway:オブジェクトID p0で受信したコマンドc」を非表示にする方法は?

Question

ログが INFO レベルで開始されると、ログに大量のpy4j.java_gateway:Received command c on object id p0ログが記録されます。どうすれば非表示にできますか?

Answer 1

loggingモジュール実行を使用して：

logging.getLogger("py4j").setLevel(logging.ERROR)

Answer 2

これらの答えはどれも私にとってはうまくいきませんでした。上記の解決策を使用した後でも、まだログ エラーが発生していました。

長い検索の後、私は私の問題を解決した以下に出くわしました。

import logging
logger = spark._jvm.org.apache.log4j
logging.getLogger("py4j.java_gateway").setLevel(logging.ERROR)

このソリューションは、Databricks のナレッジ ベース記事で見つけました。