Перейти до основного вмісту

Дамп бази даних Postgresql локально

Що потрібно встановити локально (Ubuntu)

Встанови клієнтські утиліти PostgreSQL: pg_dump, psql, pg_restore.


sudo apt update 
sudo apt install postgresql-client

Кроки міграції

Ідея: не зберігати дамп на серверах. Зробити дамп з віддаленого сервера на свій локальний ПК, потім передати його на новий сервер і там відновити.

1) Створення дампу з віддаленого сервера локально

pg_dump -h OLD_SERVER_IP -U OLD_USER -Fc -d OLD_DB -f dump_file.dump

Пояснення ключів: -h (хост), -U (користувач), -Fc (custom format), -d (БД), -f (вихідний файл локально).

1.1) Варіант з розбиттям на частини (якщо треба)

pg_dump -h OLD_SERVER_IP -U OLD_USER -Fc -d OLD_DB | split -b 10G - dump_file.dump.part_

Це створить локально файли типу dump_file.dump.part_aa, dump_file.dump.part_ab тощо.

2) Передача дампу на новий сервер

Один файл:

scp dump_file.dump NEW_USER@NEW_SERVER_IP:/tmp/

Або частинами:

scp dump_file.dump.part_* NEW_USER@NEW_SERVER_IP:/tmp/

3) Збирання файлу на новому сервері (якщо передавали частинами)

cat /tmp/dump_file.dump.part_* > /tmp/dump_file.dump

4) Відновлення на новому сервері

Створити базу (за потреби):

createdb -h localhost -U NEW_USER NEW_DB

Відновити з дампу:

pg_restore -h localhost -U NEW_USER -d NEW_DB -v /tmp/dump_file.dump

Без попередньої передачі на сервер

pg_restore -h SERVER_IP -U USERNAME -d DBNAME -v dump_file.dump
або 
cat dump_file.dump.part_* | pg_restore -h NEW_SERVER -U NEW_USER -d NEW_DB -v

Альтернатива: стрімінг без проміжного файлу (навіть локально)

Якщо місця мало на локальному ПК, можна “прокачати” дані напряму зі старого на новий сервер (через локальний комп’ютер):

pg_dump -h OLD_SERVER_IP -U OLD_USER -Fc -d OLD_DB | ssh NEW_USER@NEW_SERVER_IP "pg_restore -U NEW_USER -d NEW_DB -h localhost"

Хоча в такому випадку може мати сенс пряма передача з сервера на сервер.

Примітка: якщо з'єднання обірветься, процес доведеться повторити.

Додаткові поради

  • Для великих файлів зручно перевіряти цілісність: на локальному ПК зроби md5sum, на сервері порівняй.
  • За потреби додай компресію (зменшить обсяг): 
    
    pg_dump -h OLD_SERVER_IP -U OLD_USER -Fc -d OLD_DB | gzip | split -b 10G - dump_file.dump.gz.part_ 
    # збірка та відновлення на новому сервері 
    cat /tmp/dump_file.dump.gz.part_* | gunzip | pg_restore -h localhost -U NEW_USER -d NEW_DB -v
  • Переконайся, що версії PostgreSQL сумісні (ідеально — однакові або новіша на стороні відновлення).
Labels:

Коментарі

Дописати коментар

Популярні публікації

Створення нового Elixir-проєкту

Для створення новго Elixir-проєкту можна використати команду mix new first_project --sup Зрозуміло, що Elixir має бути встановлений раніше. Пояснення команди: mix — це вбудований інструмент для управління проєктами в Elixir (аналог maven у Java чи npm у JavaScript ). new — підкоманда mix, яка створює новий проєкт. first_project — назва твого нового проєкту. Папка з цією назвою буде створена у поточному каталозі. --sup — опціональний прапорець, який додає шаблон структури з Supervision Tree. Це означає, що створений проєкт одразу буде мати структуру, яка підтримує супервізор (супервізор керує життєвим циклом процесів у системі, перезапускаючи їх при падінні). Щоб створити файл з тестом, можна запустити команду із директорії проєкту mix test Приблизний вигляд структури проєкту:
Дописати коментар
Читати далі »

Шпаргалка по базових командах PostgreSQL

1. Підключення до PostgreSQL через командний рядок: psql -h <host> -p <port> -U <username> -d <database> 2. Підключення до бази без параметрів (якщо користувач і база мають однакове ім’я): psql 3. Показати список усіх баз даних: \l 4. Підключитися до іншої бази даних: \c <database_name> 5. Показати список таблиць у поточній базі: \dt 6. Показати всі об'єкти (таблиці, індекси, секвенції): \d 7. Показати таблиці з усіх схем: \dt *.* 8. Переглянути структуру конкретної таблиці: \d <table_name> 9. Виконати SQL-запит (приклад): SELECT * FROM users; 10. Вийти з psql: \q 11. Створити нову базу даних: CREATE DATABASE mydb; 12. Створити нову таблицю: CREATE TABLE users ( id SERIAL PRIMARY KEY, name TEXT NOT NULL, email TEXT UNIQUE ); 13. Додати новий запис: INSERT INTO users (name, email) VALUES ('Іван', 'ivan@example.com'); 14. Оновити дані в таблиці: UPDATE users SET name = 'Петро' WH...
Дописати коментар
Читати далі »

Агрегати в DDD

Domain-Driven Design (DDD, предметно-орієнтоване проєктування) — це підхід до розробки програмного забезпечення, який зосереджується на моделюванні бізнес-логіки на основі реального домену (предметної області). Його запропонував Ерік Еванс у своїй книзі "Domain-Driven Design: Tackling Complexity in the Heart of Software". Основні принципи DDD Фокус на домені – головна увага приділяється предметній області, а не технічним деталям. Єдина мова (Ubiquitous Language) – розробники, бізнес-аналітики та інші учасники проєкту використовують спільну термінологію, щоб уникнути непорозумінь. Бізнес-логіка відокремлена від технічної реалізації – код моделюється так, щоб він чітко відображав реальний бізнес-процес. Основні концепції DDD Entity (Сутність) – об’єкт з унікальним ідентифікатором, що зберігається в системі (наприклад, Користувач, Замовлення). Value Object (Об’єкт-значення) – об’єкт, який не має унікального ідентифікатора та є незмінним (наприклад, Адреса або Гроші)...
Дописати коментар
Читати далі »

Docker-compose для створення Postgresql бази даних

Docker Compose — це інструмент, який дозволяє визначати та запускати багатоконтейнерні Docker-застосунки. Замість того, щоб вручну запускати кожен контейнер із довгими командами docker run, docker-compose.yml надає простий спосіб описати всю архітектуру додатка у вигляді YAML-файлу. Це дозволяє легко створювати, запускати, зупиняти та масштабувати сервіси за допомогою однієї команди, що значно спрощує розробку, тестування та розгортання застосунків. Основні можливості Docker Compose включають: запуск кількох контейнерів одночасно, визначення мережі та спільних томів між контейнерами, налаштування змінних середовища та автоматичне підключення сервісів один до одного через імена сервісів. Він особливо корисний для локального середовища розробки, CI/CD-процесів і навіть невеликих продакшен-рішень, де потрібно швидко відтворити середовище для тестування або демонстрації. Мінімальний docker-compose.yml для локального використання PostgreSQL без збереження даних після видалення контейне...
Дописати коментар
Читати далі »

Шпаргалка по запуску та збірці Spring Boot-проєктів

Maven + Spring Boot 1. Збірка проєкту (із завантаженням залежностей, компіляцією, запуском тестів та створенням артефакту) mvn clean install 2. Збірка артефакту без встановлення у локальний репозиторій mvn package 3. Збірка без тестів mvn clean package -DskipTests 4. Запуск Spring Boot-проєкту mvn spring-boot:run 5. Запуск із активним профілем Spring Boot mvn spring-boot:run -Dspring-boot.run.profiles=dev 6. Запуск із параметрами mvn spring-boot:run -Dspring-boot.run.arguments="--server.port=8081 --spring.profiles.active=prod" 7. Запуск з jar-файлу java -jar target/your-app-name.jar 8. Запуск тестів mvn test 9. Запуск, якщо pom.xml у підкаталозі mvn -f шлях/до/pom.xml spring-boot:run 10. Запуск із Maven-профілем (не плутати з Spring Boot профілем) mvn clean install -P dev Gradle + Spring Boot 1. Збірка проєкту (з компіляцією, тестами та створенням jar) ...
Дописати коментар
Читати далі »