�ݺ�ߣ

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM & pglogical
Живко Ангелов
jivko@siteground.com

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM
●
Защо имаме нужда от VACUUM ?

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM
●
Dead rows (tuples)
– Таблици с повече UPDATE/DELETE заявки
– Bloating
– По-бавен sequential scan
– По-бавен index scan

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM
●
Какво е VACUUM ?
Почиства dead rows като ги маркира като
свободни

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM
●
Изпълнение на VACUUM
– VACUUM
– VACUUM ANALYZE
– VACUUM FULL
– VACUUM FREEZE
– VACUUM VERBOSE

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM
●
VACUUM
– Маркира dead rows като свободни
– No exclusive lock
– Не освобождава място
– Бързо е

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM
●
VACUUM FULL
– Тотално пренаписва таблицата
– Премахва dead rows
– Изисква допълнително място
– Освобождава място
– Exclusive lock
– Бавно е, причинява down
– pg_repack

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM
●
VACUUM ANALYZE
– Изпълнява VACUUM
– Подновява статистиките, които се използват от
query planner
– След драстичен UPDATE

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM
●
VACUUM FREEZE
– Предотвратява проблеми при превъртането на
transaction ID (XID) – 2,1b
– autovacuum_freeze_max_age. Default 200m,
Добра практика 50% (1b)
– Генерира I/O

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM
●
Да обърнем внимание
– VACUUM вдига операциите към диска
– DELETE FROM vs. TRUNCATE
– SELECT * from pg_stat_all_tables WHERE
relname='scans';
●
n_tup_upd, n_tup_ins
●
last_vacuum
●
seq_scan, idx_scan

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM
●
AUTOVACUUM
– autovacuum daemon проверява всяка таблица и
VACUUM
– VACUUM ANALYZE, VACUUM FREEZE
– Грижи се за дисковото пространство
– autovacuum works natively - не е добра идея да
се спира.
– Генерира I/O – върши работа. CPU strace→

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM
●
AUTOVACUUM
– explicit locking спира autovacuum
– Увеличете броя на workers при повече таблици
– Намалете autovacuume_naptimе
– pg_stat_progress_vacuum (pg 9.6)
– pg_terminate_backend, never kill

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM
●
Практически пример

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM
Въпроси ?

25.06.2017 BGPUG Conf 2017
www.bgpug.org
pglogical
●
Какво е това ?
– Логическа репликация (row level), developed by
2ndQuadrant
– Master->slave (еднопосочна)
– Напълно замества trigger based репликациите
(slony)
– Native след psql 10

25.06.2017 BGPUG Conf 2017
www.bgpug.org
pglogical
●
Конфигурация
wal_level = 'logical'
max_worker_processes = 10 # one per database needed on provider node
# one per node needed on subscriber node
max_replication_slots = 10 # one per node needed on provider node
max_wal_senders = 10 # one per node needed on provider node
shared_preload_libraries = 'pglogical'

25.06.2017 BGPUG Conf 2017
www.bgpug.org
pglogical
●
Терминология
– Node – psql instances
– Provider – master роля
– Subscriber – slave роля
– Replication set – набор от таблици

25.06.2017 BGPUG Conf 2017
www.bgpug.org
pglogical
●
Provider
CREATE EXTENSION pglogical;
SELECT pglogical.create_node(
node_name := 'nachalnik1',
dsn := 'host=pgconf1 port=5432 dbname=test'
);
SELECT pglogical.replication_set_add_all_tables('default', ARRAY['public']);

25.06.2017 BGPUG Conf 2017
www.bgpug.org
pglogical
●
Subscriber
CREATE EXTENSION pglogical;
SELECT pglogical.create_node(
node_name := 'subscriber1',
dsn := 'host=thishost port=5432 dbname=db'
);
SELECT pglogical.create_subscription(
subscription_name := 'abonament1',
provider_dsn := 'host=pgconf1 port=5432 dbname=test'
);

25.06.2017 BGPUG Conf 2017
www.bgpug.org
pglogical
●
Интересни възможности
– pglogical.create_subscription(synchronize_structure := true)
– pglogical.alter_subscription_resynchronize_table()
– pglogical.replicate_ddl_command()
– apply_delay на абонамента
– row_filter (от 2.0):
●
On provider - row_filter := 'id > 0'

25.06.2017 BGPUG Conf 2017
www.bgpug.org
pglogical
●
Конфликти:
– Един абонат може да се върже към няколко
доставчика
– Абонатите могат да пишат по таблицата
– pglogical.conflict_resolution
●
error
●
apply_remote
●
keep_local
●
last_update_wins
●
first_update_wins

25.06.2017 BGPUG Conf 2017
www.bgpug.org
pglogical
●
Абоната е долу. Пример

25.06.2017 BGPUG Conf 2017
www.bgpug.org
pglogical
●
Предимства:
– Цялата конфигурация е в базата
– Възможност за репликиране на subset от базата
(схеми, таблици и т.н.)
– Възможност за филтриране на редове (от 2.0)
– Инсталира се като extension
– Репликация м/у major versions

25.06.2017 BGPUG Conf 2017
www.bgpug.org
pglogical
●
Недостатъци
– Работи per database. За репликиране на целия
сървър е необходимо да се правят отделни
конфигурации.
– UNLOGGED и TEMPORARY таблици не се
репликират
– DDL replication не се поддържа

25.06.2017 BGPUG Conf 2017
www.bgpug.org
pglogical
Въпроси ?

25.06.2017 BGPUG Conf 2017
www.bgpug.org
VACUUM & pglogical
Благодаря!

�ݺ�ߣ

VACUUM & pglogical

Recommended

More Related Content

Featured (20)

VACUUM & pglogical