問題タブ [tensorflow-xla]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
71 問題
0
投票する
1
に答える
1720
参照
tensorflow - TFRecord の読み込みが遅くなる
データセットを 10 個の tfrecords ファイルに分割しました。それぞれから 100 個のデータ ポイントを読み取って、100 個のデータ ポイントの 10 シーケンスのバッチを作成したいと考えています。そのために次の関数を使用します。tfrecords からのデータの読み込み時間は遅く始まり、約 0.65 秒に達し、100 ～ 200 回の sess.run 呼び出しの後、約 10 秒に増加します。読書時間を短縮するのに役立つかもしれない間違いや提案を指摘していただけますか? また、私が言及した動作がより不安定になることがあります。
次のように単一のファイルからプルしている場合でも、同じ動作を観察しています。さらに、num_threads を増やしても効果はありません。