r - R でのビッグデータの読み取りとロジスティック回帰

Question

状況: 1GB の CSV ファイル、100000 行、4000 個の独立数値変数、1 個の従属変数。16GB メモリを搭載した Windows Citrix サーバー上の R。

問題: 2 時間かかりました。すること:

read.table("full_data.csv", header=T, sep",")

glm プロセスがクラッシュし、プログラムが応答しなくなり、タスク マネージャーでシャットダウンする必要があります。

Answer 1

私はよくパッケージに頼ってsqldf大きな.csvをメモリにロードします。良いポインタはここにあります。