新しいデータ ファイルをデータベースにロードするプロセスを自動化する必要があります。私の質問は、自動化された方法でどのファイルが「新しい」かを判断する最良の方法についてです。
ファイルは毎晩同期されるディレクトリから取得されるため、ファイルのリストは増え続けます。既に取得したファイルを消去するオプションはありません。
新しいレコードは、各レコードが作成されたファイル名を示すフィールドを持つ生データ テーブルに保存されるため、現在ディレクトリにあるすべてのファイル名を生データ テーブルに既にあるファイル名と比較し、含まれていないファイル名のみを処理できます。一般。
または、ファイル名に含まれるタイムスタンプを使用して、最後にインポート プロセスを実行した後に作成されたファイルのみを処理することもできます。
エラーが発生しにくいと思われるため、最初のアプローチを使用することに傾いていますが、これが実際に真実であるかどうかを見つけるのはあまり運がありませんでした. すべてのファイル名をデータベースに既に存在するファイル名と比較して、この方法で新しいファイルを決定することの落とし穴は何ですか?
