HashMap<String,Double>を使用する代わりに、エントリを反復してそれぞれをシリアル化することにより、 a をシリアル化するコードをいくつか書きましObjectOutputStream.readObject()た。その理由は単に効率です。結果として得られるファイルははるかに小さく、書き込みと読み取りがはるかに高速です (たとえば、0.6 秒で 23 MB、9.9 秒で 29 MB)。
これは私がシリアル化するためにしたことです：
ObjectOutputStream oos = new ObjectOutputStream(new FileOutputStream("test.bin"));
oos.writeInt(map.size()); // write size of the map
for (Map.Entry<String, Double> entry : map.entrySet()) { // iterate entries
System.out.println("writing ("+ entry.getKey() +","+ entry.getValue() +")");
byte[] bytes = entry.getKey().getBytes();
oos.writeInt(bytes.length); // length of key string
oos.write(bytes); // key string bytes
oos.writeDouble(entry.getValue()); // value
}
oos.close();
ご覧のとおりbyte、各 key の配列を取得し、Stringその長さをシリアル化し、次に配列自体をシリアル化します。これは私がデシリアライズするためにしたことです：
ObjectInputStream ois = new ObjectInputStream(new FileInputStream("test.bin"));
int size = ois.readInt(); // read size of the map
HashMap<String, Double> newMap = new HashMap<>(size);
for (int i = 0; i < size; i++) { // iterate entries
int length = ois.readInt(); // length of key string
byte[] bytes = new byte[length];
ois.read(bytes); // key string bytes
String key = new String(bytes);
double value = ois.readDouble(); // value
newMap.put(key, value);
System.out.println("read ("+ key +","+ value +")");
}
問題は、ある時点でキーが正しくシリアル化されないことです。本来の 16 バイトではなく 8 バイトを読み取ることができるようになるまでデバッグを行ったois.read(bytes)ため、キーStringが適切に形成されてdoubleおらず、まだ読み取られていないキーの最後の 8 バイトを使用して値が読み取られました。 . 結局、例外はどこにでもあります。
以下のサンプル データを使用すると、出力はある時点で次のようになります。
read (2010-00-056.html,12154.250518054876)
read (2010-00- ,1.4007397428546247E-76)
Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
at ti.Test.main(Test.java:82)
この問題は、シリアル化されたファイルで確認できます (次のように表示されます2010-00-008.html)。
キーの間に 2 バイトが追加されStringます。詳細については、 MxyL の回答を参照してください。要するに、なぜこれらの 2 バイトが追加され、なぜ正常にreadFully動作するのかということです。
String適切に (デ) シリアライズされないのはなぜですか? 固定ブロックサイズへのある種のパディングか、そのようなものでしょうか? 効率を求めるときに手動でシリアル化するより良い方法はありますか? Stringある種のwriteStringandを期待していreadStringましたが、Java の にはそのようなものはないようですObjectStream。
何か問題が発生した場合に備えて、バッファリングされたストリームを使用してみました。さまざまなエンコーディングを使用して、書き込みと読み取りのバイト数を明示的に示していますが、うまくいきません。
これは、問題を再現するためのサンプル データです。
HashMap<String, Double> map = new HashMap<String, Double>();
map.put("2010-00-027.html",21732.994621513037); map.put("2010-00-020.html",3466.5169348296736); map.put("2010-00-051.html",12528.648992702407); map.put("2010-00-062.html",3354.8950010256385);
map.put("2010-00-024.html",10295.095511718278); map.put("2010-00-052.html",5381.513344679818); map.put("2010-00-007.html",16466.33813960735); map.put("2010-00-017.html",9484.969198176652);
map.put("2010-00-054.html",15423.873112634772); map.put("2010-00-022.html",8123.842752870753); map.put("2010-00-033.html",21238.496665104063); map.put("2010-00-028.html",7578.792651786424);
map.put("2010-00-048.html",3566.4118233046393); map.put("2010-00-040.html",2681.0799941861724); map.put("2010-00-049.html",14308.090890746222); map.put("2010-00-058.html",5911.342406606804);
map.put("2010-00-045.html",2284.118716145881); map.put("2010-00-031.html",2859.565771680721); map.put("2010-00-046.html",4555.187022907964); map.put("2010-00-036.html",8479.709295569426);
map.put("2010-00-061.html",846.8292195815125); map.put("2010-00-023.html",14108.644025417952); map.put("2010-00-041.html",22686.232732684934); map.put("2010-00-025.html",9513.539663409734);
map.put("2010-00-012.html",459.6427911376829); map.put("2010-00-005.html",0.0); map.put("2010-00-013.html",2646.403220496738); map.put("2010-00-065.html",5808.86423609936);
map.put("2010-00-056.html",12154.250518054876); map.put("2010-00-008.html",10811.15198506469); map.put("2010-00-042.html",9271.006516004005); map.put("2010-00-000.html",4387.4162586468965);
map.put("2010-00-059.html",4456.211623469774); map.put("2010-00-055.html",3534.7511584735325); map.put("2010-00-057.html",8745.640098512009); map.put("2010-00-032.html",4993.295735075575);
map.put("2010-00-021.html",3852.5805998017922); map.put("2010-00-043.html",4108.020033536286); map.put("2010-00-053.html",2.2446400279239946); map.put("2010-00-030.html",17853.541210836203);
