問題タブ [graphframes]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
1 に答える
1401 参照

apache-spark - オフライン Spark クラスターへのグラフフレーム パッケージのインストール

Graphframesライブラリをインストールする必要があるオフラインの pyspark クラスター (インターネット アクセスなし) があります。

ここから $SPARK_HOME/jars/ に追加された jar を手動でダウンロードしました。使用しようとすると、次のエラーが表示されます。

すべての依存関係をオフラインでインストールする正しい方法はどれですか?

0 投票する
1 に答える
175 参照

apache-spark - カスタム アルゴリズムを Graphframes に実装する

pyspark 2.3 で実行されている GraphFrames を使用して、グラフで biconnected グラフ アルゴリズムを実行したいと考えています。

組み込みアルゴリズムはすべて、GraphX in Scala の内部で実行されていることに気付きました。

biconnected アルゴリズムを scala - GraphX で実装し、それを GraphFrames オブジェクトで呼び出す方法はありますか?

そのような解決策に精通している人はいますか?