php - CSVファイルから読み取り、データベースに追加し、重複を除外します

Question

mysqlデータベースにロードしようとしているCSVファイルがあります。ファイルは>10MBで、100,000行を超えています。行がすでにデータベースにあるかどうかを確認し、新しいエントリを追加するための効率的な方法が必要です。これは、別のサードパーティデータベースからの最新データでデータベースを更新するためのものです。

行ごとにチェックして行ごとに追加するのは本当に非効率的なようです。また、役立つ場合は、CSVファイルに日付フィールドがあります。