java - Clojure-消費された遅延シーケンス要素はメモリに残りますか？

Question

私のアプリケーションは、潜在的に大きなテキストファイルを1行ずつ処理します。現在、私のコードは次のとおりです。

(with-open [r (clojure.java.io/reader "large_text_file")]
  (doall
    (map #(process %) (line-seq r)))

私のコードでは、すでに処理された行はメモリに残りますか？もしそうなら、どうすればそれを避けることができますか？

そして、一般的に、消費された怠惰なシーケンス要素はメモリに残りますか？

ありがとうございました！

score 3 · Accepted Answer

StackOverflowの他の場所で詳細に説明されているように、通常のGCルールが適用されます。

したがって、シーケンスの先頭を保持するのではなく、要素が流れるときにのみ参照するようにしてください。

score 2 · Accepted Answer

doallを使用すると、seq の先頭が保持され、それが返されます。seq全体がメモリに常駐します。

副作用を行うために seq をトラバースすると仮定します。それが doseq の目的です:

(with-open [r (clojure.java.io/reader "your_large_file.txt")]
  (doseq [l (line-seq r)]
    (println l)))

score 1 · Accepted Answer

遅延シーケンスの評価を強制する必要があるが、それを保持する必要がない場合は、dorun を使用できます。doall と同じですが、nil を返し、シーケンス全体をメモリに保持しません。

フアン・マヌエル

score 0 · Accepted Answer

関数の戻り値は何をprocessもたらしますか？この方法で何かの大規模なコレクションを構築することになりますか？doseqマップとは異なり、価値のないもので処理できると思います。

4 に答える 4