Sparkling water 関係者によるこのブログによると、Spark ML パイプライン コンポーネントを使用して、最新バージョンで DL モデルを構築できるようになりました。私は自分の最新バージョンを追加しようとしましたbuild.sbt
"org.apache.spark" % "spark-mllib_2.10" % "2.0.0" % "provided",
"ai.h2o" % "sparkling-water-core_2.10" % "1.6.5" % "provided"
しかし、うまくいきません。インポートしようとしてもうまくいきorg.apache.spark.ml.h2o.H2OPipeline
ません。h2o
内部のパッケージspark.ml
は、spark jar には存在しないようです。ブログに示されているように、 h2oを使用して DL モデルを作成するために、spark-mllib 機能トランスフォーマーを再利用したいと思っています。
どんな助けでも大歓迎です!
ありがとう。