SnappyData SQL シェル (snappy-sql) を使用し、SQL ステートメント (PUT INTO) を実行していたところ、エラーが発生しました。
ERROR 38000: (SQLState=38000 Severity=20000) (Server=localhost/127.0.0.1[1528] Thread=pool-3-thread-3) The exception 'com.pivotal.gemfirexd.internal.engine.jdbc.GemFireXDRuntimeException: myID: s4-03(19442)<v1>:43452, caused by java.lang.IllegalArgumentException: spark.sql.execution.id is already set' was thrown while evaluating an expression.
Caused by: ServerException: Server STACK: java.sql.SQLException(38000): The exception 'com.pivotal.gemfirexd.internal.engine.jdbc.GemFireXDRuntimeException: myID: s4-03(19442)<v1>:43452, caused by java.lang.IllegalArgumentException: spark.sql.execution.id is already set' was thrown while evaluating an expression.
at com.pivotal.gemfirexd.internal.iapi.error.StandardException.newException(StandardException.java:473)
at com.pivotal.gemfirexd.internal.engine.Misc.processFunctionException(Misc.java:808)
at com.pivotal.gemfirexd.internal.engine.Misc.processFunctionException(Misc.java:753)
at com.pivotal.gemfirexd.internal.engine.sql.execute.SnappySelectResultSet.setup(SnappySelectResultSet.java:282)
at com.pivotal.gemfirexd.internal.engine.distributed.message.GfxdFunctionMessage.e
xecuteFunction(GfxdFunctionMessage.java:332)
at com.pivotal.gemfirexd.internal.engine.distributed.message.GfxdFunctionMessage.executeFunction(GfxdFunctionMessage.
(truncated for brevity.)
これが私がやったことです: https://www.snappydata.io/download (v0.8) から SnappyData バイナリをダウンロードします。それを解凍し、実行しました
sbin/snappy-start-all.sh
bin/snappy-sql
snappy> connect client 'localhost:1527';
snappy> create table table_a(key1 INT primary key, val INT);
snappy> create table table_b(key1 INT primary key, val INT);
snappy> insert into table_a values (1, 1);
snappy> insert into table_b values (1, 2);
snappy> insert into table_b values (2, 3);
snappy> select * from table_a;
KEY1 |VAL
-----------------------
1 |1
1 row selected
snappy> select * from table_b;
KEY1 |VAL
-----------------------
2 |3
1 |2
2 rows selected
snappy> put into table_a select * from table_b;
(then the above error.)
エラーを検索すると (spark.sql.execution.id は既に設定されています)、 https ://issues.apache.org/jira/browse/SPARK-13747 (SQL での同時実行は Scala ForkJoinPool では機能しません) につながります。 Spark 2.2.0 で修正されたバグのようです。
これは、SnappyData がまだ spark 2.0 を使用していることが原因である可能性があります (少なくとも現在、github では、spark 2.0 に移動したと表示されています)。しかし、よくわかりません。
PUT INTO
可能であればSnappyDataのステートメントを使用しようとしていますが、誰かがこの問題を手伝ってくれれば大歓迎です。前もって感謝します :)