python-3.x - モジュール「graphframes」が見つかりません

Question

コマンドラインに入力すると：

pyspark --packages グラフフレーム:グラフフレーム:0.2.0-spark2.0-s_2.11

それはうまくいくでしょう。しかし、ipython を使用して pyspark を起動し、graphframes パッケージを使用したい場合、機能しません。

コマンドラインに入力すると：

PYSPARK_DRIVER_PYTHON=ipython pyspark --パッケージ グラフフレーム:グラフフレーム:0.2.0-spark2.0-s_2.11

エラーは次のとおりです。モジュール 'graphframes' が見つかりません

Answer 1

Spark パッケージの Python 3 互換性の欠如は、0.2.0の既知のバグであり、 graphframes0.3.0 で解決されました。

--packages graphframes:graphframes:0.3.0-spark2.0-s_2.11