問題タブ [spark-thriftserver]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
apache-spark - Hive - テーブル パーティションに挿入するとエラーが発生する
Spark で Hive にパーティション分割されたテーブルを作成し、Hive の他のテーブルで利用可能なデータをロードしようとしています。データのロード中に次のエラーが発生します。
エラー: org.apache.spark.sql.AnalysisException: org.apache.hadoop.hive.ql.metadata.Table.ValidationFailureSemanticException: パーティション仕様 {cardsuit=, cardcolor=, cardSuit=SPA, cardColor=BLA} に非パーティション列が含まれています;
以下は、タスクを実行するために使用されるコマンドです:-
データのサンプル:-
黒|スペード|2
黒|スペード|3
黒|スペード|4
黒|スペード|5
黒|スペード|6
黒|スペード|7
黒|スペード|8
黒|スペード|9
Spark 2.2.0 と Java バージョン 1.8.0_31 を使用しています。
同様のスレッドで提供された回答を確認して試しましたが、問題を解決できませんでした:- SemanticException パーティション仕様 {col=null} に非パーティション列が含まれています
ここで何か不足していますか？
apache-spark - JMeter 3.3 connect Spark 2.2.1 エラー:「PoolableConnectionFactory を作成できません (メソッドがサポートされていません)」
この jar のリストを使用すると、SQuirrel SQL を Spark 2.2.1 に正常に接続できます。
上記の瓶は必要以上だと思います。しかし、JMeter 3.3 を同じ Spark 2.2.1 ThriftServer に接続しようとすると、以下のエラー メッセージが表示されました。
enter code here Cannot create PoolableConnectionFactory (Method not supported)
JDBC 構成は次のとおりです。
Jmeter での完全な応答は次のとおりです。
私も新しい Hive を使用しようとしてJDBC driver 2.3.0いますが、明らかに、beelineJmeter を含むその他の Spark 2.2.1 では動作しません。
Hive JDBC ドライバー 2.3.0 で beeline を使用する場合のエラー メッセージは次のとおりです。
JMeter を Spark に接続するために他に何ができますか?