0

次の形式の JavaPairRDD があります。

JavaPairRDD< String, Tuple2< String, List< String>>> myData;

Key-Value 形式で保存したい(String, Tuple2< String, List< String>>)

myData.saveAsXXXFile("output-path");

したがって、次のジョブはデータを my に直接読み込むことができますJavaPairRDD:

JavaPairRDD< String, Tuple2< String, List< String>>> newData = context.XXXFile("output-path");

Java 7、Spark 1.2、Java API を使用しています。試しsaveAsTextFileてみましたがsaveAsObjectFile、どちらも機能しません。saveAsSequenceFileそして、私の日食にはオプションがありません。

この問題について何か提案はありますか?どうもありがとうございました!

4

1 に答える 1