問題タブ [shark-sql]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
scala - スタンドアローンモードでApache Sharkをインストールすると、scalaエラーが発生します
私は基本的にhttps://github.com/amplab/shark/wiki/Running-Shark-Locallyのガイドに従っています。scala をダウンロードしました ec2 amazon linux を使用しています
私のshark/shark-0.8.0/conf/shark-env.sh構成ファイルは次のようになります
JAVA_HOME も /usr/lib/jvm/jre に設定しています
java -version と入力すると、次のように返されます。
以下でサメを実行しようとするたびに：
なぜこのようなエラーが発生するのかわかりません。誰か知ってる??
hadoop - Shark を使用して Cassandra にクエリを実行すると時間がかかりすぎる
2 ノードの Cassandra クラスターをセットアップし、shark を使用してクエリを実行しようとしています。ただし、クエリには約 10 分かかります。しかし、クエリは正常に機能します。(Cloudera を使用してソフトウェアをインストールしました)
/opt/shark/shark/conf/shark-env.sh のいくつかのパラメーターを変更して (SPARK_MEM とSHARK_MASTER_MEMを増やして) サメを調整しようとしました。しかし運が悪かった。
誰かがこの遅さについて何か手がかりを教えていただければ幸いです。
関連するさまざまなソフトウェアにインストールしたバージョンのリストを次に示します。
Cassandra : 2.0.8
Shark :shark-0.9.1-bin-cdh4.6.0-fe75a886
Spark :SPARK-0.9.0-1.cdh4.6.0.p0.98
Hadoop :2.0.0-cdh4.7.0
ハードウェア仕様:
RAM : 256GB
CPU : 2x Intel(R) Xeon(R) CPU E5-2680 v2 @ 2.80GHz ( HTで合計 20 コア)
cassandra - Datastax Enterprise 4.0.3 cassandra と Shark の統合
Shark 0.9.1 (hadoop 1 用) を datastax enterprise 4.0.3 Hadoop ノードのハイブと統合しようとしています。Scala 2.10.3 と Spark 1.0.0 のインストールと構成に成功しました。Scala と sparks シェルも正常に動作しています。SHARK_HOME/bin/shark で Shark シェルを開こうとすると、エラーが発生します
誰でもこの種の問題に直面できますか。提案してください 。ありがとう
hadoop - Shark Server への JDBC 接続がハングする
サメクラスターに次の構成を使用しています
- スカラ 2.10.3
- スパーク 0.9.0
- ハイブ 0.12.0-chd5.0.2
- サメ 0.9.0
Spark と Hive は Cloudera Manager (CDH 5.0.2) を介して構成されます。
サメサーバーに接続するには、このチュートリアルに従っています: https://cwiki.apache.org/confluence/display/Hive/HiveClient
次のようにサメサーバーを起動します。./shark --service sharkserver 9956
上記のチュートリアルのコードを使用してハイブ サーバーに接続できます。しかし、サメのサーバーに接続しようとすると、この行でハングしました
Connection con = DriverManager.getConnection("jdbc:hive://localhost:9956/default", "", "");
エラーや例外は発生しません。プログラムがその行でスタックするだけです。