次の形式の JavaPairRDD があります。
JavaPairRDD< String, Tuple2< String, List< String>>> myData;
Key-Value 形式で保存したい(String, Tuple2< String, List< String>>)。
myData.saveAsXXXFile("output-path");
したがって、次のジョブはデータを my に直接読み込むことができますJavaPairRDD:
JavaPairRDD< String, Tuple2< String, List< String>>> newData = context.XXXFile("output-path");
Java 7、Spark 1.2、Java API を使用しています。試しsaveAsTextFileてみましたがsaveAsObjectFile、どちらも機能しません。saveAsSequenceFileそして、私の日食にはオプションがありません。
この問題について何か提案はありますか?どうもありがとうございました!