C ++で使用Apache Arrow
して、時系列のコレクションを寄木細工のファイルとして保存し、pythonを使用して寄木細工のファイルをPandas
Dataframe
. このプロセスは、Date64Type
. C++ でエポック時間を保存していますが、パンダにロードすると時間情報が失われます。
たとえば、boost posix time :2018-04-01T20:11:17.112Z
の場合、エポック時間 (in int64_t
) は ですが1522613477112000
、parquet ファイルに ( Date64Type
) として保存し、pandas にロードすると、結果は2018-04-01
になり、時間情報が失われます。寄木細工のファイルにタイムスタンプを保存する正しいものは何ですか?