StorageHandlerを使用して Hive からローカルの Oracle NoSQL DB にアクセスするためのこの (かなり古い) チュートリアルに従っています。
私は成功しました:
- Hadoop 2.7.2 を抽出
/home/hadoop/hadoop
- 抽出された Hive 1.2.1 の下
/home/hadoop/hive
次の環境変数を設定します。
export HADOOP_HOME=/home/hadoop/hadoop export HADOOP_COMMON_HOME=$HADOOP_HOME export HADOOP_HDFS_HOME=$HADOOP_HOME export HADOOP_MAPRED_HOME=$HADOOP_HOME export HADOOP_YARN_HOME=$HADOOP_HOME export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib/native" export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native export KVHOME=/home/hadoop/kv export KVROOT=/tmp/kv-metadata export HIVE_HOME=/home/hadoop/hive/ export HIVE_AUX_JARS_PATH=$KVHOME/lib/kvclient.jar export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin:$HIVE_HOME/bin
Oracle NoSQL DB を実行します。
java -jar $KVHOME/lib/kvstore.jar kvlite -root $KVROOT -host localhost &
MOVIE
Oracle DB にテーブルを作成しました
ただし、実行hive
して入力すると
hive> CREATE EXTERNAL TABLE IF NOT EXISTS MOVIE( id INT, original_title
STRING, overview STRING, poster_path STRING, release_date STRING,
vote_count INT, runtime INT, popularity DOUBLE, genres STRING)
STORED BY 'oracle.kv.hadoop.hive.table.TableStorageHandler'
TBLPROPERTIES ( "oracle.kv.kvstore"="kvstore",
"oracle.kv.hosts"="localhost:5000",
"oracle.kv.hadoop.hosts"="localhost",
"oracle.kv.tableName"="MOVIE");
次のエラーが表示されます。
FAILED: Execution Error, return code 1 from
org.apache.hadoop.hive.ql.exec.DDLTask.
org.apache.hadoop.hive.serde2.lazy.LazySimpleSerDe.initSerdeParams
(Lorg/apache/hadoop/conf/Configuration;Ljava/util/Properties;Ljava
/lang/String;)Lorg/apache/hadoop/hive/serde2
/lazy/LazySimpleSerDe$SerDeParameters;
どうやら、SerDe コンポーネントに関連するエラーのようです。
Hive 2.0 でも試してみましたが、どちらも機能しません。
何が起こっているかの手がかりはありますか?