hadoop - SparseVectorsFromSequenceFiles、RowIdJob、および RowSimilarityJob ジョブのメモリ実装はありますか

Question

SparseVectorsFromSequenceFilesMap/Reduce ジョブを実行する Mahout が提供する、RowIdJobおよびRowSimilarityJobHadoop ジョブを使用して、潜在的セマンティック分析の実行に取り組んできました。私は、単一のスレッドまたはできれば複数のスレッドで、メモリ内で実行されるこれらの機能の同等の実装を見つけようとしています。

そのようなことはありますか？

Answer 1

わかりませんが、そうは思いませんが、書くのは簡単です。SequenceFile.Readerレコードごとに and を開きVector、値からを取得してWritable、必要なことを行うだけです。おそらく 10 行のコードであり、ツールの価値はありません。