web-dev-qa-db-ja.com

Postgres:bashスクリプトから再作成/再作成する前にデータベース全体をクリアします

私はシェルスクリプトを書いています(cronジョブになります):

1:実稼働データベースをダンプする

2:ダンプを開発データベースにインポートします

ステップ1と2の間で、開発データベースをクリアする必要があります(すべてのテーブルをドロップしますか?)。これは、シェルスクリプトからどのように最適に達成されますか?これまでのところ、次のようになっています。

#!/bin/bash
time=`date '+%Y'-'%m'-'%d'`
# 1. export(dump) the current production database
pg_dump -U production_db_name > /backup/dir/backup-${time}.sql

# missing step: drop all tables from development database so it can be re-populated

# 2. load the backup into the development database
psql -U development_db_name < backup/dir/backup-${time}.sql
108
Hoff

データベースを削除してから再作成するだけです。 UNIXまたはLinuxシステムでは、次のようにする必要があります。

$ dropdb development_db_name
$ createdb developmnent_db_name

それが実際のやり方です。

161
Haes

プレーンテキストの.sqlスクリプトファイル形式でディスクにダンプされたデータベースのバックアップを実際に必要としない場合は、pg_dumppg_restoreをパイプで直接接続できます。

テーブルを削除して再作成するには、--cleanpg_dumpコマンドラインオプションを使用して、SQLコマンドを発行して、データベースオブジェクトを(作成する前に)データベースオブジェクトを削除(削除)します。 (これにより、データベース全体が削除されるのではなく、各テーブル/シーケンス/インデックスなどが再作成される前に削除されます。)

上記の2つは次のようになります。

pg_dump -U username --clean | pg_restore -U username
84
Bandi-T

次の行はWindowsバッチスクリプトから取られていますが、コマンドは非常に似ている必要があります。

psql -U username -h localhost -d postgres -c "DROP DATABASE \"$DATABASE\";"

このコマンドは、データベースを実際に削除して、データベース全体をクリアするために使用されます。コマンド内の$DATABASE(Windowsでは%DATABASE%である必要があります)は、データベース名に評価されるWindowsスタイルの環境変数です。 development_db_nameで置き換える必要があります。

13
Frank Bollack

を投げ捨てます:

pg_dump -Fc mydb > db.dump

復元するには:

pg_restore --verbose --clean --no-acl --no-owner -h localhost -U myuser -d my_db db/latest.dump
7
Carlos Júlio

私が使用した:

pg_restore -c -d database_name filename.dump
6
Troy

DROP SCHEMA public CASCADE;DROP OWNED BY current_user;または何かだけができない場合のために、私が書いたスタンドアロンのSQLスクリプトはトランザクションセーフです(つまり、BEGIN;ROLLBACK;の間に置いてテストするか、COMMIT;を実際に実行できます) 「すべて」のデータベースオブジェクトをクリーンアップします...さて、アプリケーションで使用するデータベースで使用されるすべてのオブジェクトまたは私が賢明に追加できるものは次のとおりです。

  • テーブルのトリガー
  • テーブルの制約(FK、PK、CHECKUNIQUE
  • 指標
  • VIEWs(通常または具体化)
  • テーブル
  • シーケンス
  • 関数/手順( pg_proc.proisagg おそらく 名誉あるべきです けれども)
  • すべてのn-n-default(つまり、publicまたはDB内部ではない)スキーマ「私たち」:このスクリプトは、「データベーススーパーユーザーではない」として実行する場合に役立ちます。スーパーユーザーはスキーマを削除できますallスキーマ(本当に重要なスキーマはまだ明示的に除外されています)

ドロップされない(意図的なものもあります; DBに例がなかったためだけのものもあります):

  • publicスキーマ(たとえば、拡張機能で提供されるもの用)
  • 拡張機能
  • 集約関数
  • 照合およびその他のロケールのもの
  • イベントトリガー
  • テキスト検索のもの、…( here を参照してください)
  • ロールまたはその他のセキュリティ設定
  • 複合型
  • トーストテーブル
  • FDWおよび外部テーブル

また、誰かが興味がある場合に備えて、「2つのテーブルとそれらに属するものを除くすべて」を削除するバージョンもあります。差分は小さいです。必要に応じて私に連絡してください。

これはreally復元したいダンプが異なるデータベーススキーマバージョンのものである場合に役立ちます(たとえば、Debian dbconfig-common、FlywayまたはLiquibase/DBを使用) -Manul)復元したいデータベースより。

SQL

-- Copyright © 2019
--      mirabilos <[email protected]>
--
-- Provided that these terms and disclaimer and all copyright notices
-- are retained or reproduced in an accompanying document, permission
-- is granted to deal in this work without restriction, including un‐
-- limited rights to use, publicly perform, distribute, sell, modify,
-- merge, give away, or sublicence.
--
-- This work is provided “AS IS” and WITHOUT WARRANTY of any kind, to
-- the utmost extent permitted by applicable law, neither express nor
-- implied; without malicious intent or gross negligence. In no event
-- may a licensor, author or contributor be held liable for indirect,
-- direct, other damage, loss, or other issues arising in any way out
-- of dealing in the work, even if advised of the possibility of such
-- damage or existence of a defect, except proven that it results out
-- of said person’s immediate fault when using the work as intended.
-- -
-- Drop everything from the PostgreSQL database.

DO $$
DECLARE
        r RECORD;
BEGIN
        -- triggers
        FOR r IN (SELECT pns.nspname, pc.relname, pt.tgname
                FROM pg_trigger pt, pg_class pc, pg_namespace pns
                WHERE pns.oid=pc.relnamespace AND pc.oid=pt.tgrelid
                    AND pns.nspname NOT IN ('information_schema', 'pg_catalog', 'pg_toast')
                    AND pt.tgisinternal=false
            ) LOOP
                EXECUTE format('DROP TRIGGER %I ON %I.%I;',
                    r.tgname, r.nspname, r.relname);
        END LOOP;
        -- constraints #1: foreign key
        FOR r IN (SELECT pns.nspname, pc.relname, pcon.conname
                FROM pg_constraint pcon, pg_class pc, pg_namespace pns
                WHERE pns.oid=pc.relnamespace AND pc.oid=pcon.conrelid
                    AND pns.nspname NOT IN ('information_schema', 'pg_catalog', 'pg_toast')
                    AND pcon.contype='f'
            ) LOOP
                EXECUTE format('ALTER TABLE ONLY %I.%I DROP CONSTRAINT %I;',
                    r.nspname, r.relname, r.conname);
        END LOOP;
        -- constraints #2: the rest
        FOR r IN (SELECT pns.nspname, pc.relname, pcon.conname
                FROM pg_constraint pcon, pg_class pc, pg_namespace pns
                WHERE pns.oid=pc.relnamespace AND pc.oid=pcon.conrelid
                    AND pns.nspname NOT IN ('information_schema', 'pg_catalog', 'pg_toast')
                    AND pcon.contype<>'f'
            ) LOOP
                EXECUTE format('ALTER TABLE ONLY %I.%I DROP CONSTRAINT %I;',
                    r.nspname, r.relname, r.conname);
        END LOOP;
        -- indicēs
        FOR r IN (SELECT pns.nspname, pc.relname
                FROM pg_class pc, pg_namespace pns
                WHERE pns.oid=pc.relnamespace
                    AND pns.nspname NOT IN ('information_schema', 'pg_catalog', 'pg_toast')
                    AND pc.relkind='i'
            ) LOOP
                EXECUTE format('DROP INDEX %I.%I;',
                    r.nspname, r.relname);
        END LOOP;
        -- normal and materialised views
        FOR r IN (SELECT pns.nspname, pc.relname
                FROM pg_class pc, pg_namespace pns
                WHERE pns.oid=pc.relnamespace
                    AND pns.nspname NOT IN ('information_schema', 'pg_catalog', 'pg_toast')
                    AND pc.relkind IN ('v', 'm')
            ) LOOP
                EXECUTE format('DROP VIEW %I.%I;',
                    r.nspname, r.relname);
        END LOOP;
        -- tables
        FOR r IN (SELECT pns.nspname, pc.relname
                FROM pg_class pc, pg_namespace pns
                WHERE pns.oid=pc.relnamespace
                    AND pns.nspname NOT IN ('information_schema', 'pg_catalog', 'pg_toast')
                    AND pc.relkind='r'
            ) LOOP
                EXECUTE format('DROP TABLE %I.%I;',
                    r.nspname, r.relname);
        END LOOP;
        -- sequences
        FOR r IN (SELECT pns.nspname, pc.relname
                FROM pg_class pc, pg_namespace pns
                WHERE pns.oid=pc.relnamespace
                    AND pns.nspname NOT IN ('information_schema', 'pg_catalog', 'pg_toast')
                    AND pc.relkind='S'
            ) LOOP
                EXECUTE format('DROP SEQUENCE %I.%I;',
                    r.nspname, r.relname);
        END LOOP;
        -- functions / procedures
        FOR r IN (SELECT pns.nspname, pp.proname, pp.oid
                FROM pg_proc pp, pg_namespace pns
                WHERE pns.oid=pp.pronamespace
                    AND pns.nspname NOT IN ('information_schema', 'pg_catalog', 'pg_toast')
            ) LOOP
                EXECUTE format('DROP FUNCTION %I.%I(%s);',
                    r.nspname, r.proname,
                    pg_get_function_identity_arguments(r.oid));
        END LOOP;
        -- nōn-default schemata we own; assume to be run by a not-superuser
        FOR r IN (SELECT pns.nspname
                FROM pg_namespace pns, pg_roles pr
                WHERE pr.oid=pns.nspowner
                    AND pns.nspname NOT IN ('information_schema', 'pg_catalog', 'pg_toast', 'public')
                    AND pr.rolname=current_user
            ) LOOP
                EXECUTE format('DROP SCHEMA %I;', r.nspname);
        END LOOP;
        -- voilà
        RAISE NOTICE 'Database cleared!';
END; $$;

PostgreSQL 9.6(jessie-backports)でテスト済み。バグ修正とさらなる改善を歓迎します!

2
mirabilos

「example_db」という名前のデータベースを消去する場合:

1)別のデータベースにログインします(例: 'postgres'):

psql postgres

2)データベースを削除します。

DROP DATABASE example_db;

3)データベースを再作成します。

CREATE DATABASE example_db;
1
Kamil Siwek