1.2 の代わりに現在の (ハイブ 2.1) バインディングでスパークをビルドするにはどうすればよいですか? http://spark.apache.org/docs/latest/building-spark.html#building-with-hive-and-jdbc-support これがどのように機能するかについては言及していません。Spark は Hive 2.x でうまく動作しますか?
質問する
112 次
1 に答える
2
同じ質問がありましたが、これがこれまでに見つけたものです。新しいバージョンのハイブでスパークを構築することができます:
mvn -Dhive.group=org.apache.hive -Dhive.version=2.1.0 clean package
これは長時間実行され、単体テストで失敗します。テストをスキップすると、少し先に進みますが、コンパイル エラーが発生します。要約すると、spark は Hive 2.x ではうまく機能しません!
また、ASF Jira で Spark と Hive を検索しましたが、アップグレードに関する言及は見つかりませんでした。これは私が見つけることができた最も近いチケットです: https://issues.apache.org/jira/browse/SPARK-15691
于 2016-12-07T22:36:52.673 に答える