Postgres データベースを CSV ファイルにエクスポートしたいと考えています。これは可能ですか?
可能であれば、どうすればこれを行うことができますか? 特定のテーブルを CSV ファイルに変換できることは確認しましたが、データベース全体についてはわかりません。
Postgres データベースを CSV ファイルにエクスポートしたいと考えています。これは可能ですか?
可能であれば、どうすればこれを行うことができますか? 特定のテーブルを CSV ファイルに変換できることは確認しましたが、データベース全体についてはわかりません。
この pl/pgsql 関数を作成して、テーブルごとに 1 つの .csv ファイルを作成しました (ビューを除く、@tarikki のおかげです)。
CREATE OR REPLACE FUNCTION db_to_csv(path TEXT) RETURNS void AS $$
declare
tables RECORD;
statement TEXT;
begin
FOR tables IN
SELECT (table_schema || '.' || table_name) AS schema_table
FROM information_schema.tables t INNER JOIN information_schema.schemata s
ON s.schema_name = t.table_schema
WHERE t.table_schema NOT IN ('pg_catalog', 'information_schema')
AND t.table_type NOT IN ('VIEW')
ORDER BY schema_table
LOOP
statement := 'COPY ' || tables.schema_table || ' TO ''' || path || '/' || tables.schema_table || '.csv' ||''' DELIMITER '';'' CSV HEADER';
EXECUTE statement;
END LOOP;
return;
end;
$$ LANGUAGE plpgsql;
そして、私はそれを次のように使用します:
SELECT db_to_csv('/home/user/dir');
-- this will create one csv file per table, in /home/user/dir/
これは psql コンソールで使用できます。
\copy (SELECT foo,bar FROM whatever) TO '/tmp/file.csv' DELIMITER ',' CSV HEADER
またはbashコンソールで:
psql -P format=unaligned -P tuples_only -P fieldsep=\, -c "SELECT foo,bar FROM whatever" > output_file
スクリプトがビューをコピーしようとするのを防ぐために 1 行を追加して、jlldoras の素晴らしい回答を変更しました。
CREATE OR REPLACE FUNCTION db_to_csv(path TEXT) RETURNS void AS $$
declare
tables RECORD;
statement TEXT;
begin
FOR tables IN
SELECT (table_schema || '.' || table_name) AS schema_table
FROM information_schema.tables t INNER JOIN information_schema.schemata s
ON s.schema_name = t.table_schema
WHERE t.table_schema NOT IN ('pg_catalog', 'information_schema', 'configuration')
AND t.table_type NOT IN ('VIEW')
ORDER BY schema_table
LOOP
statement := 'COPY ' || tables.schema_table || ' TO ''' || path || '/' || tables.schema_table || '.csv' ||''' DELIMITER '';'' CSV HEADER';
EXECUTE statement;
END LOOP;
return;
end;
$$ LANGUAGE plpgsql;
COPY tablename TO '/tmp/products_199.csv' DELIMITER ',' CSV HEADER;
これをチェックしてください
エクスポート中にデータベースとユーザーを指定する場合は、次のように Piotr からの回答を変更するだけです。
psql -P format=unaligned -P tuples_only -P fieldsep=\, -c "select * from tableName" > tableName_exp.csv -U <USER> -d <DB_NAME>
すべてのテーブルのデータを含む 1 つの大きな CSV ファイルが必要ですか?
おそらくそうではありません。テーブルごとに個別のファイルが必要な場合や、CSV ファイル ヘッダーで表現できる詳細情報を含む 1 つの大きなファイルが必要な場合があります。
別ファイル
他の回答は、テーブルごとに個別のファイルを作成する方法を示しています。データベースにクエリを実行して、そのようなクエリを使用してすべてのテーブルを表示できます。
SELECT DISTINCT table_name
FROM information_schema.columns
WHERE table_schema='public'
AND position('_' in table_name) <> 1
ORDER BY 1
1 つの大きなファイル
PostgreSQL コマンドで使用される CSV 形式のすべてのテーブルを含む 1 つの大きなファイルは、コマンドCOPY
で作成できますpg_dump
。出力には all なども含まれますがCREATE TABLE
、CREATE FUNCTION
Python や Perl などの言語を使用すると、CSV データのみを簡単に抽出できます。