0

Windowsにハイブをインストールしようとしています。HADOOP と SPARK が実行されている 64 ビット Windows 8 を使用しています。私は持っている

1.HADOOP_HOME
2.HIVE_HOME
3.SPARK_HOME
4.Platform
5.PATH

これらすべての変数がシステムに設定されています。また、以前にこれらのエラーが発生していました

Missing Hive Execution Jar: C:\hadoop1\hadoop-2.7.2\apache-hive-1.2.1-bin/lib/hive-exec-*.jar

HIVEのbinフォルダー内のHiveファイルを編集することで、これらのエラーを解決しました。これらのエラーは、HIVE ファイルの環境変数のスラッシュ「/」が原因です。それらを「\」に置き換えると、それらのエラーはなくなりました。しかし今、私は別の問題に直面しています。これらのエラーが発生しています

SLF4J: Class path contains multiple SLF4J bindings.
SLF4J: Found binding in [jar:file:/C:/spark/spark-1.6.1-bin-hadoop2.6/lib/spark-assembly-1.6.1-hadoop2.6.0.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: Found binding in [jar:file:/C:/hadoop2.7/hadoop-2.7.1/share/hadoop/common/lib/slf4j-log4j12-1.7.10.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: See http://www.slf4j.org/codes.html#multiple_bindings for an explanation.
SLF4J: Actual binding is of type [org.slf4j.impl.Log4jLoggerFactory]
Beeline version 1.6.1 by Apache Hive
Exception in thread "main" java.lang.NoSuchMethodError: org.fusesource.jansi.internal.Kernel32.GetConsoleOutputCP()I
    at jline.WindowsTerminal.getConsoleOutputCodepage(WindowsTerminal.java:293)
    at jline.WindowsTerminal.getOutputEncoding(WindowsTerminal.java:186)
    at jline.console.ConsoleReader.<init>(ConsoleReader.java:230)
    at jline.console.ConsoleReader.<init>(ConsoleReader.java:221)
    at jline.console.ConsoleReader.<init>(ConsoleReader.java:209)
    at org.apache.hive.beeline.BeeLine.getConsoleReader(BeeLine.java:834)
    at org.apache.hive.beeline.BeeLine.begin(BeeLine.java:770)
    at org.apache.hive.beeline.BeeLine.mainWithInputRedirection(BeeLine.java:484)
    at org.apache.hive.beeline.BeeLine.main(BeeLine.java:467)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
    at java.lang.reflect.Method.invoke(Method.java:606)
    at org.apache.hadoop.util.RunJar.run(RunJar.java:221)
    at org.apache.hadoop.util.RunJar.main(RunJar.java:136)

私はこれらについてたくさん検索しました。また、これらの質問を HIVE ユーザー メーリング リストに投稿しましたが、応答がありませんでした。これで私を助けてください。

4

1 に答える 1

0

Here are the steps I executed to solve this:

  1. Install the Microsoft Visual C++ 2008 Redistribuable add-on (not the latest, not the SP1...)
  2. Download the jline-2.12.jar (from any maven repository site) and put it into your %SPARK_HOME%\lib directory
  3. I assume you already have a hadoop client correctly configured with HADOOP_HOME, HADOOP_CONF_DIR y YARN_CONF_DIR defined. You need SPARK_HOME to be defined, too
  4. In case you're using a Cloudera 5.5+ cluster, download the Cloudera JDBC Driver for Hive (last version available) and unzip the Cloudera_Hive41* archive into %HADOOP_HOME$\share\hadoop\hive (this directory doesn't exist, you need to create it). If you're not using Cloudera, you can forget this point.
  5. Create a new beeline batch script :
@echo off
setLocal EnableDelayedExpansion

Rem Hive Classpath Settings ONLY IF YOU'RE USING CLOUDERA
set HIVE_CLOUDERA_DRIVER_DIR=%HADOOP_HOME%\share\hadoop\hive
set HIVE_CLASSPATH=
for /R %HIVE_CLOUDERA_DRIVER_DIR% %%a in (*.jar) do (
  set HIVE_CLASSPATH=!HIVE_CLASSPATH!;%%a
)
set HIVE_CLASSPATH=!HIVE_CLASSPATH!
Rem IF YOU'RE NOT USING CLOUDERA YOU CAN SKIP THE HIVE_CLASSPATH_STUFF

Rem Spark Classpath Settings
set SPARK_CLASSPATH=
for /R %SPARK_HOME%/lib %%a in (*.jar) do (
  set SPARK_CLASSPATH=!SPARK_CLASSPATH!;%%a
)
set SPARK_CLASSPATH=!SPARK_CLASSPATH!

Rem Hadoop classpath
set HADOOP_CLASSPATH=%HADOOP_CONF_DIR%\;%YARN_CONF_DIR%\\

Rem Java Virtual Machine Options
set JAVA_OPTIONS=-Xms1g -Xmx1g 

Rem Execute Beeline
java -cp "%HIVE_CLASSPATH%;%SPARK_CLASSPATH%;%HADOOP_CLASSPATH%" %JAVA_OPTIONS% org.apache.hive.beeline.BeeLine %*

You can execute beeline throw this new script without any issue.

于 2016-10-27T12:19:40.073 に答える