オブジェクトのリストを 1 列 (主キー) のデータベースに一括ロードしようとしています。唯一の理由は、重複を削除することです。ファイル サイズがメモリ サイズよりもはるかに大きいため、リストをメモリにロードできません (約 10^14 の挿入が必要です!)。
monetdb のCOPY-INTOコマンドを使っていますが、重複があっても失敗したくありません。重複していないものをすべて追加し、重複をスキップしたい。
monetdbでそれを行う方法はありますか? その他の方法で?
オブジェクトのリストを 1 列 (主キー) のデータベースに一括ロードしようとしています。唯一の理由は、重複を削除することです。ファイル サイズがメモリ サイズよりもはるかに大きいため、リストをメモリにロードできません (約 10^14 の挿入が必要です!)。
monetdb のCOPY-INTOコマンドを使っていますが、重複があっても失敗したくありません。重複していないものをすべて追加し、重複をスキップしたい。
monetdbでそれを行う方法はありますか? その他の方法で?