問題タブ [deeplearning4j]

http://deeplearning4j.org/word2vecから word2vec モデルを 正常にトレーニングしましたが、wordsNearest を適用しようとすると、次の例外が発生します。

これは私のコードです:

Spark を組み込んだ DeepLearning4j Word2Vec が必要です。ベクトル表現を取得したい約 80000 語のデータがあります。後で、そのベクトル表現を使用して同義語を見つけたいと思います。すべての vCPU に提供できるように、Word2Vec コード部分をどこに書くべきか悩んでいますか?

私の場合 - 入力時にList<List<Float>>(単語表現ベクトルのリスト) を持っています。そして - Double1つのシーケンスからの出力に1つ持っています。

だから私は次の構造を構築します（最初のインデックス - 例番号、2番目 - 文項目番号、3番目 - 単語ベクトル要素番号）：http://pastebin.com/KGdjwnki

出力: http://pastebin.com/fY8zrxEL

しかし、次の 1 つ ( http://pastebin.com/wvFFC4Hw ) を model.output にマストすると[0.25, 0.24, 0.25, 0.25]、1 つの値ではなく vector が取得されます。

何が間違っている可能性がありますか？添付コード (Kotlin)。classCount1であります。

更新。次の例には「近い」タスクがあるように見えるので、後で確認して解決策を投稿します。 /org/deeplearning4j/examples/recurrent/word2vecsentiment/Word2VecSentimentRNN.java

spark-submit を使用する場合、依存関係を --packages で送信する必要があります。どのパッケージを使用すればよいですか?

依存関係を含む uber jar を作成しようとしましたが、次のエラーが発生します。

エラーは、次のコードの結果です。

私は Spark を初めて使用し、現在、deeplearning4j API を使用してニューラル ネットワークを構築しようとしています。トレーニングは問題なく機能しますが、評価で問題が発生しています。次のエラー メッセージが表示されます

この問題の理由が見つからないようで、spark と deeplearning4j に関する情報はまばらです。私は本質的にこの例からこの構造を取りましたhttps://github.com/deeplearning4j/dl4j-spark-cdh5-examples/blob/2de0324076fb422e2bdb926a095adb97c6d0e0ca/src/main/java/org/deeplearning4j/examples/mlp/IrisLocal.java .

これは私のコードです

JavaRDD の処理方法について誰かアドバイスがありますか? 問題はそこにあると思います。

どうもありがとう！

編集1

私は deeplearning4j バージョン0.4-rc.10と spark 1.5.0を使用しています。スタック トレースは次のとおりです。