問題タブ [presto]

presto を単一ノードにデプロイしようとしています。検出サーバーが組み込まれた Presto コーディネーター サーバーを実行すると、次のエラーが発生しました。

私のnode.idは「uuidgen」によって生成されました

私のconfig.properties::

node.properties:

CDH4 クラスターで Presto を使用して、圧縮されたテーブルを読み込もうとしています。Hive はテーブルを読み取ることができますが、Presto はネイティブ ライブラリが見つからないと文句を言います。

CDH から java.library.path を追加しても効果がないようです。(jvm.config に追加)

ここにスタックトレースがあります

ライブラリ ディレクトリ

Impala で CDH4 クラスターを実行して、寄木細工のテーブルを作成し、寄木細工の jar ファイルをハイブに追加した後、ハイブを使用してテーブルをクエリできます。

同じ一連の jar を /opt/presto/lib に追加し、コーディネーターとワーカーを再起動しました。

Presto から parquet select クエリを実行すると、まだこのエラーが発生します。

presto を単一ノードにデプロイします。Presto-cli を実行すると、次のエラーが発生しました。

ハイブは正常に動作しています。prestodb が失敗したのはなぜですか? 私のプロフィール：

わかりました、正規表現でハイブのテーブルを作成したところ、presto-cliの実行に失敗しました。私は今まで知らなかった。誰か助けてください！

Presto のクラスターをセットアップし、いくつかのパフォーマンス チューニングを試みているので、Presto のより包括的な構成ガイドがあるのではないかと考えています。たとえば、Presto ワーカーが使用できる CPU コアの数を制御する方法などです。また、1 つのサーバーで複数の presto ワーカーを起動するのは良い方法ですか (この場合、コーディネーターを実行するための専用サーバーは必要ありません)。

その上、私は task.max-memory 引数をよく理解していません。presto ワーカーは、1 つのクエリに対して複数のタスクを開始しますか? はいの場合、並列処理のレベルを制御するために -Xmx JVM 引数と一緒に task.max-memory を使用できますか?

前もって感謝します。

Presto をインストールしたところ、CDH4 で問題なく動作しました。問題は、ROW FORMAT SERDE で定義された Hive テーブルがあることです。そして、プレストはそれを使用できないようです。エラーメッセージは次のとおりです。

SerDe は Presto でサポートされていますか?

どうもありがとう。

親愛なる友人 Hive で Presto を構成できます。

「SHOW TABLES」の結果を見ることができます。結果に「books」テーブルが表示されます。

また、すべての列の詳細を示す DESCRIBE ブック。

ハイブを介してクエリを実行し、結果を表示できる「本」テーブルがあります。

例: hive>select * from books;

しかし、プレストを試してみると。次のエラーが表示されます

私を導いてください

エラー

サーバー上の例外

クエリ「SELECT * from TABLE」を実行すると、prestoserver で次の例外が発生します。

助けていただけますか？

サーバーの例外:

05_00000_yzbvk.1 java.lang.RuntimeException: java.io.IOException: ローカル例外で失敗しました: java.io.IOException: 応答が null です。; ホストの詳細: ローカル ホスト: "ubuntu/192.168.56.101"; 宛先ホスト: "examples.net":54310; com.google.common.base.Throwables.propagate(Throwables.java:160) で ~[guava-15.0.jar:na] com.facebook.presto.hive.HiveSplitIterable$HiveSplitQueue.computeNext(HiveSplitIterable.java:433) で~[na:na] com.facebook.presto.hive.HiveSplitIterable$HiveSplitQueue.computeNext(HiveSplitIterable.java:392) で ~[na:na] com.google.common.collect.AbstractIterator.tryToComputeNext(AbstractIterator.java: 143) ~[グアバ-15.0.jar:na] at com.google.common.collect.AbstractIterator.hasNext(AbstractIterator.java:138) ~[グアバ-15.0.jar:na] at com.facebook.presto.execution. IOException: 応答が null です。; ホストの詳細: ローカル ホストは次のとおりです: "ubuntu/192.168.56.101"; 宛先ホスト: "examples.net":54310; org.apache.hadoop.net.NetUtils.wrapException(NetUtils.java:763) で ~[na:na] org.apache.hadoop.ipc.Client.call(Client.java:1229) で ~[na:na] org.apache.hadoop.ipc.ProtobufRpcEngine$Invoker.invoke(ProtobufRpcEngine.java:202) ~[na:na] at com.sun.proxy.$Proxy155.getListing(Unknown Source) ~[na:na] at sun .reflect.NativeMethodAccessorImpl.invoke0(ネイティブ メソッド) ~[na:1.7.0_45] at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57) ~[na:1.7.0_45] at sun.reflect.DelegatingMethodAccessorImpl.invoke( DelegatingMethodAccessorImpl.java:43) ~[na:1.7.0_45] java.lang.reflect.Method.invoke(Method.java:606) ~[na:1.7.