Docker化されたPostgreSQLデータベースのバックアップ/復元

Docker Webサイトで説明されているように、PostgreSQLデータベースをバックアップ/復元しようとしていますが、データが復元されません。

データベースイメージで使用されるボリュームは次のとおりです。

VOLUME  ["/etc/postgresql", "/var/log/postgresql", "/var/lib/postgresql"]

そしてCMDは：

CMD ["/usr/lib/postgresql/9.3/bin/postgres", "-D", "/var/lib/postgresql/9.3/main", "-c", "config_file=/etc/postgresql/9.3/main/postgresql.conf"]

次のコマンドでDBコンテナーを作成します。

docker run -it --name "$DB_CONTAINER_NAME" -d "$DB_IMAGE_NAME"

次に、別のコンテナーを接続して、データを手動で挿入します。

docker run -it --rm --link "$DB_CONTAINER_NAME":db "$DB_IMAGE_NAME" sh -c 'exec bash'
psql -d test -h $DB_PORT_5432_TCP_ADDR
# insert some data in the db
<CTRL-D>
<CTRL-D>

次に、tarアーカイブが作成されます。

$ sudo docker run --volumes-from "$DB_CONTAINER_NAME" --rm -v $(pwd):/backup ubuntu tar cvf /backup/backup.tar /etc/postgresql /var/log/postgresql /var/lib/postgresql

次に、dbに使用されているコンテナーを削除し、同じ名前で別のコンテナーを作成し、前に挿入したデータを復元しようとします。

$ sudo docker run --volumes-from "$DB_CONTAINER_NAME" --rm -v $(pwd):/backup ubuntu tar xvf /backup/backup.tar 

しかし、テーブルは空です。なぜデータが適切に復元されないのですか？

データベースをバックアップする

docker exec -t your-db-container pg_dumpall -c -U postgres > dump_`date +%d-%m-%Y"_"%H_%M_%S`.sql

データベースを復元する

cat your_dump.sql | docker exec -i your-db-container psql -U postgres

特定の期間内にデータベースをバックアップするpotgresバックアップコンテナーを使用することもできると思います。

  pgbackups:
    container_name: Backup
    image: prodrigestivill/postgres-backup-local
    restart: always
    volumes:
      - ./backup:/backups
    links:
      - db:db
    depends_on:
      - db
    environment:
      - POSTGRES_HOST=db
      - POSTGRES_DB=${DB_NAME} 
      - POSTGRES_USER=${DB_USER}
      - POSTGRES_PASSWORD=${DB_PASSWORD}
      - POSTGRES_EXTRA_OPTS=-Z9 --schema=public --blobs
      - SCHEDULE=@every 0h30m00s
      - BACKUP_KEEP_DAYS=7
      - BACKUP_KEEP_WEEKS=4
      - BACKUP_KEEP_MONTHS=6
      - HEALTHCHECK_PORT=81

わかりました、私はこれを理解しました。いったん起動すると、Postgresqlはフォルダ/ var / lib / postgresqlへの変更を検出しません。少なくとも、検出したい種類の変更は検出しません。

最初の解決策は、postgresサーバーを直接起動する代わりにbashでコンテナーを起動し、データを復元してから、サーバーを手動で起動することです。

2番目のソリューションは、データコンテナーを使用することです。私は前にそれの要点を理解していませんでした、今私はそうします。このデータコンテナーでは、postgresコンテナーを開始する前にデータを復元できます。したがって、postgresサーバーが起動すると、データはすでにそこにあります。

別のアプローチ（docker-postgresql-workflowに基づく）

エクスポートするローカル実行データベース（Dockerにはありませんが、同じアプローチが機能します）：

pg_dump -F c -h localhost mydb -U postgres export.dmp

インポートするコンテナデータベース：

docker run -d -v /local/path/to/postgres:/var/lib/postgresql/data postgres #ex runs container as `CONTAINERNAME` #find via `docker ps`
docker run -it --link CONTAINERNAME:postgres  --volume $PWD/:/tmp/  postgres  bash -c 'exec pg_restore -h postgres -U postgres -d mydb -F c /tmp/sonar.dmp'

db_dumpを使用してdbを復元しようとしたときに、この問題が発生しました。私は通常dbeaverを使用して復元しますが、psqlダンプを受け取ったため、Dockerコンテナーを使用して復元する方法を理解する必要がありました。

Forthによって推奨され、Soviutによって編集された方法論は私にとってはうまくいきました：

cat your_dump.sql | docker exec -i your-db-container psql -U postgres -d dbname

（これは単一のdbダンプであり、複数のdbではないため、名前を含めました）

ただし、これを機能させるために、Dockerコンテナーとプロジェクトが含まれているvirtualenvにも移動する必要がありました。次のdockerエラーを受け取っていたため、それを理解する前に少し気が付きました。

read unix @->/var/run/docker.sock: read: connection reset by peer

これは、ファイル/var/lib/docker/network/files/local-kv.dbが原因である可能性があります。このステートメントの正確さはわかりません。ただし、ローカルでdockerを使用していないため、これが表示されていたと思います。そのため、Forthの回答を使用して探していたこのファイルはありませんでした。

次に、（プロジェクトを使用して）正しいディレクトリに移動し、virtualenvをアクティブにして、受け入れられた回答を実行しました。ブーム、トップのように働いた。これが他の誰かを助けることを願っています！

これは私のために働いたコマンドです。

cat your_dump.sql | sudo docker exec -i {docker-postgres-container} psql -U {user} -d {database_name}

例えば

cat table_backup.sql | docker exec -i 03b366004090 psql -U postgres -d postgres

参照：この議論でGMartinez-Sistiによって与えられたソリューション。 https://gist.github.com/gilyes/525cc0f471aafae18c3857c27519fc4b

cat db.dump | docker exec ...私のダンプでは方法が機能しませんでした（〜2Gb）。数時間かかり、メモリ不足エラーが発生しました。

代わりに、ダンプをコンテナーにcpし、pg_restoreを使用して内部からダンプしました。

コンテナーIDがCONTAINER_ID、DB名がDB_NAME：

# copy dump into container
docker cp local/path/to/db.dump CONTAINER_ID:/db.dump

# shell into container
docker exec -it CONTAINER_ID bash

# restore it from within
pg_restore -U postgres -d DB_NAME --no-owner -1 /db.dump

dksnap（https://github.com/kelda/dksnap）pg_dumpallは、を介してダンプを実行およびロードするプロセスを自動化します/docker-entrypoint-initdb.d。

実行中のコンテナのリストが表示され、バックアップするコンテナを選択できます。結果のアーティファクトは通常のDockerイメージであるためdocker run、Dockerレジストリにプッシュすることで共有したり、共有したりできます。

（免責事項：私はプロジェクトのメンテナーです）

以下のコマンドを使用して、Docker Postgressコンテナーからダンプを取得できます

docker exec -t <postgres-container-name> pg_dump --no-owner -U <db-username> <db-name> > file-name-to-backup-to.sql