Да, скорее всего да, почитай в issues на githab там подробно разжевано

Ещё вопросик по опциям Есть опция: use_slots: true max_replication_slots: 5 В доке указано: Слоты репликации автоматически обеспечивают механизм сохранения сегментов WAL, пока они не будут получены всеми резервными и главный сервер не будет удалять строки, находящиеся в статусе recovery conflict даже при отключении резервного. Вместо использования слотов репликации для предотвращения удаления старых сегментов WAL можно применять wal_keep_segments, или сохранять сегменты в архиве с помощью команды archive_command. Тем не менее, эти методы часто приводят к тому, что хранится больше сегментов WAL, чем необходимо, в то время как слоты репликации оставляют только то количество сегментов, которое необходимо. Т.е. эта опция юзается вместо wal_keep_segments. Но если даже не указывать в конфиге patroni wal_keep_segments, то эта опция всё равно используется, что видно в dcs, и в конфиге postgresql.conf. Что приводит к тому, например если реплика не работала, то при запуске patroni она не может войти в кластер, ибо wal_segments уже не существуют, которые ей нужны, и приходится делать pagroni reinit для этой ноды. Можно в контексте patroni обойтись одними слотами?

Ещё вопросик по опциям Есть опция: use_slots: true max_replication_slots: 5 В доке указано: Слоты репликации автоматически обеспечивают механизм сохранения сегментов WAL, пока они не будут получены всеми резервными и главный сервер не будет удалять строки, находящиеся в статусе recovery conflict даже при отключении резервного. Вместо использования слотов репликации для предотвращения удаления старых сегментов WAL можно применять wal_keep_segments, или сохранять сегменты в архиве с помощью команды archive_command. Тем не менее, эти методы часто приводят к тому, что хранится больше сегментов WAL, чем необходимо, в то время как слоты репликации оставляют только то количество сегментов, которое необходимо. Т.е. эта опция юзается вместо wal_keep_segments. Но если даже не указывать в конфиге patroni wal_keep_segments, то эта опция всё равно используется, что видно в dcs, и в конфиге postgresql.conf. Что приводит к тому, например если реплика не работала, то при запуске patroni она не может войти в кластер, ибо wal_segments уже не существуют, которые ей нужны, и приходится делать pagroni reinit для этой ноды. Можно в контексте patroni обойтись одними слотами?

Она используется совместно с wal_keep_segments. Если реплика не работала вместе с patroni, то слот удаляется и сегменты для слота не хранятся. Поэтому разумно использовать wal_keep_segments.

Она используется совместно с wal_keep_segments. Если реплика не работала вместе с patroni, то слот удаляется и сегменты для слота не хранятся. Поэтому разумно использовать wal_keep_segments.

Ага, значит для краткосрочных выключений реплики имеет смысл делать wal_keep_segments побольше, спс.

Она используется совместно с wal_keep_segments. Если реплика не работала вместе с patroni, то слот удаляется и сегменты для слота не хранятся. Поэтому разумно использовать wal_keep_segments.

И последний вопросик: В patroni можно уменьшить уровень логирования? Т.е. отключить INFO: no action. i am a secondary and i am following a leader каждые 10 сек

Вроде нет, да и не рекомендую

Вроде нет, да и не рекомендую

Не рекомендуете, чтобы в случае чего можно было оперативно выяснить что с нодами и т.п.?

Конечно

а все помнят про SELECT ST_AsX3D('LINESTRING EMPTY'); ? :)

а все помнят про SELECT ST_AsX3D('LINESTRING EMPTY'); ? :)

я так понимаю этот пост раз в пару недель тут будет появляться дабы проверить кто сильно любопытный? :)

ну, нам вот тут пригодилось постгрес рестартануть :)

Конечно

спс)

хай всем. подскажите с элементарщиной.

есть слейв. хочу сделать его мастером.

в настройках postgresql.conf делаю хотстендбай, в рековери указываю где должен быть триггер файл.

создаю триггер файл и ресстарчу пг так*

?

создаешь триггер и он сам повышается, рестратить не надо

а настройки конфига?

в настройках postgresql.conf

wal_level = hot_standby

вот про это

нет, но если хотите меньше информации в wal, можете понизить wal_level

тоесть только я создаю файл сразу же он мастером станет?

как проверить что он мастер?

должен появится postmaster.pid?

в логи посмотрите, там все написано или в pg_controldata или pg_is_in_recovery()

при работе двух апсертов параллельно иногда получаю дедлок. данные в инсерт идут из временных таблиц, в ON CONFLICT написано DO NOTHING. смущает в логе строчка while inserting index tuple (15,20) in relation кусок лога https://gist.github.com/nikitka/09ffaf433a81915fc60b72fad18b3172 не понимаю, где я что не так делаю, подскажите :)

то что в on conflict указано это primary key, может в этом дело

при работе двух апсертов параллельно иногда получаю дедлок. данные в инсерт идут из временных таблиц, в ON CONFLICT написано DO NOTHING. смущает в логе строчка while inserting index tuple (15,20) in relation кусок лога https://gist.github.com/nikitka/09ffaf433a81915fc60b72fad18b3172 не понимаю, где я что не так делаю, подскажите :)

Если еще актуально. Вы словили классический дедлок, и on conflict do nothing не панацея в данном случае. могу показать, как было дело:

1 транзакция: insert into uniq_camp_content values (15,20) on conflict (camp_id, content_id) do nothing; 2 транзакция: insert into uniq_camp_content values (15,21) on conflict (camp_id, content_id) do nothing; 1 транзакция: insert into uniq_camp_content values (15,21) on conflict (camp_id, content_id) do nothing; 2 транзакция: insert into uniq_camp_content values (15,20) on conflict (camp_id, content_id) do nothing;

все, вы в дедлоке.

Кто-то пользуется okmeter.io? Или какие графические тулзы посоветуете?

пользуюсь

много чего не хватает и давно ничего не добавляли :(

и как впечатления?

И чего не хватает?

По пг все отлично

Не хватает монитроинга php-fpm, exim и всякого такого

Да и по пг если бы умело из логов инфу получать как из nginx было бы неплохо

Но дело даже не в том, просто давно не видно обновлений какихто

Может все по пг уже есть?

Ну вот мне хотелось бы там видеть запросы порождающие временные таблицы, но их там нет

Приходится за таким в логи ходить

А запросы на доработки в окметер отправляли, или они дорабатывают то, что считают нужным только?

Писал им раньше. Сейчас не пишу. Обычно такие вещи сразу нужны когда проблема возникает, а потом уже не нужны особо.

Новости они не пишут

Да, это увидел...на сайте застой:)

Есть еще подозрение, что окметер агент отправляет инфу на сайт okmeter.io или я ошибаюсь?

Ээ а как ему еще работать?

Это ж саас

Локально:)

Интранет

Локально - это вам mamonsu для zabbix. https://github.com/postgrespro/mamonsu

Графану можно к заббиксу прикрутить еще

Она с пг дружит?

Плагинов к пг в графане не видел

Ага, в ней можно в качестве источника данных указать заббикс

Плагинов к пг в графане не видел

https://grafana.com/dashboards/355 https://grafana.com/dashboards/455

Ага, но тут Datasourse=influxdb

https://grafana.com/plugins/alexanderzobnin-zabbix-app

https://grafana.com/dashboards/355 https://grafana.com/dashboards/455

А в инфлюкс чем данный из пг выгребаете?

телеграф

метрики/запросы смотрю в мамонсу

ERROR: S client not available

=)

А мамонсу вроде только заббикс пока умеет. Или нет?

А мамонсу вроде только заббикс пока умеет. Или нет?

вроде только заббикс. Там просто набор запросов к постгресу хороший, чтоб самому не придумывать

Я у Лисовского в шаблоне изначально брал.

Ктонибудь порльзуется ,бэкапером BARMAN ? на БД малого объема нормально отрабатывает если даю ему 200ГБ базу не завершает бэкап , валится с таким сообщением Asking PostgreSQL server to finalize the backup. ERROR: Backup failed issuing stop backup command. DETAILS: Cannot terminate exclusive backup. You might have to manually execute pg_stop_backup on your PostgreSQL server

всем привет, как в psql консоли работать, она не реагирует на createuser —interactive 'name'

createuser - это утилита из баша вызывается

В psql - create role ...

И далее по доке :)

спасибо =)

Если еще актуально. Вы словили классический дедлок, и on conflict do nothing не панацея в данном случае. могу показать, как было дело:

спасибо. сортировка, как я понимаю, мне поможет :))

как получить доступ к файлу в pg?

к изображению в файловой системе

как получить доступ к файлу в pg?

https://www.postgresql.org/docs/9.6/static/functions-admin.html pg_read_file

спасибо =)

всегда было интересно, нахрена в СУБД такой функционал

спасибо. сортировка, как я понимаю, мне поможет :))

Я бы посмотрел в сторону блокировки строк и skip locked

всегда было интересно, нахрена в СУБД такой функционал

Я очень не знаю, но использую для мониторинга. Например: "SELECT count(*) FROM pg_ls_dir('pg_xlog')"

Я бы посмотрел в сторону блокировки строк и skip locked

а как с skip locked? это же временные таблицы из которых я выбираю

Я очень не знаю, но использую для мониторинга. Например: "SELECT count(*) FROM pg_ls_dir('pg_xlog')"

но ведь такое обычно смотрят чем угодно прямо на хосте, не залезая в базу

но ведь такое обычно смотрят чем угодно прямо на хосте, не залезая в базу

Да, но если используется мониторинг прямо в базу запросы, то тут никак уже. У меня Prometheus и postgres_exporter со своими queries. Если агент стоит можно и напрямую в файловой системе шарится. Но если без агента, то удаленно очень удобно

а как с skip locked? это же временные таблицы из которых я выбираю

Согласен, глупость сказал)) Попробуйте сортировку.

кстати, postgres_exporter как-то зависит от версии базы? я бы пачку 9.0 с удовольствием замониторил бы

https://github.com/wrouesnel/postgres_exporter Supported PostgreSQL versions: 9.1 and up.

https://github.com/wrouesnel/postgres_exporter Supported PostgreSQL versions: 9.1 and up.

отстой, спасибо

Хм, а есть такое select поля_содержащие_в_названии_start from something... ?

https://www.postgresql.org/docs/9.6/static/functions-admin.html pg_read_file

а как например из диска C прочитать пикчу

Распечатываешь через WinHEX, ищешь смещение, потом сигнатуру, читаешь.

а то pg_read_file берет картинку там где бд крутится