https://simply.name/ru/video-pg-meetup-yandex2015.html

2. Как спать спокойно?
Владимир Бородин
Системный администратор

3. Логическое повреждение данных:
〉 DELETE FROM important_table
〉 DROP SCHEMA data CASCADE
Физическое повреждение данных:
〉 Железные проблемы
〉 Баги ядра
〉 Баги PostgreSQL
3
Что плохого может случиться?

4. Эдвард Мёрфи
Anything that can go
wrong will go wrong

5. https://clck.ru/9bESm
ARIES

6. 6
Немного про PostgreSQL

7. postgresql.org/docs/9.5/static/storage-page-layout.html
momjian.us/main/writings/pgsql/inside_shmem.pdf
src/backend/access/transam/README
7
Немного про PostgreSQL

8. 8
Немного про PostgreSQL

9. 〉 pg_start_backup(), rsync, pg_stop_backup()
〉 pg_basebackup
〉 pg_dump
9
Резервные копии

10. Только с мастера
〉 pg_start_backup(‘foo’)
〉 rsync/что угодно
〉 pg_stop_backup()
10
Exclusive backup

11. 〉 full_page_writes
〉 CHECKPOINT
〉 Флаг в shared memory
〉 backup_label
〉 tablespace_map (с 9.5)
11
pg_start_backup(‘foo’)

12. $ cat backup_dir/backup_label
START WAL LOCATION: 6/48000028 (file 0000000D0000000600000048)
CHECKPOINT LOCATION: 6/48001EE0
BACKUP METHOD: pg_start_backup
BACKUP FROM: master
START TIME: 2015-10-14 14:06:09 MSK
LABEL: foo
$
12
backup_label

13. 〉 Удаляет backup_label и tablespace_map
〉 Запись backup-end в WAL
〉 Пишет backup history file в pg_xlog/
〉 pg_switch_xlog()
〉 Дождётся archiver’а
13
pg_stop_backup(‘foo’)

14. $ cat $PGDATA/pg_xlog/0000000D0000000600000048.00000028.backup
START WAL LOCATION: 6/48000028 (file 0000000D0000000600000048)
STOP WAL LOCATION: 6/48033E80 (file 0000000D0000000600000048)
CHECKPOINT LOCATION: 6/48001EE0
BACKUP METHOD: pg_start_backup
BACKUP FROM: master
START TIME: 2015-10-14 14:06:09 MSK
LABEL: foo
STOP TIME: 2015-10-14 14:11:46 MSK
$
14
Backup history file

15. 〉 Можно с реплик
〉 Использует streaming-протокол
〉 pg_basebackup
15
Non-exclusive backup

16. 〉 Инкрементальные бэкапы на файловом уровне
〉 Нет готового решения с параллелизмом
16
Недостатки обоих решений

17. Бэкап Шрёдингера
Состояние бэкапа неизвестно до попытки восстановления

18. simply.name/barman-backups-check.html

19. 〉 File-level бэкап не залезает в сами данные
〉 Возможно тихое повреждение
〉 Checksums
〉 pg_dump
19
Проверка самих данных

20. wiki.postgresql.org/wiki/Corruption

21. 〉 Бэкап
〉 WAL’ы
〉 Правильный recovery.conf
postgresql.org/docs/current/static/recovery-target-settings.html
21
Point-in-Time Recovery

22. clck.ru/9bFGS

23. 〉 Инкрементальные бэкапы
〉 Бэкапы с реплик
〉 Retention policy
〉 Сжатие WAL’ов
〉 Ограничение сетевого трафика
〉 barman recover
23
Barman

24. Владимир Бородин
Системный администратор
Контакты
@man_brain
https://simply.name
+7 (495) 739 70 00, доб. 7255
d0uble@yandex-team.ru