Речь идет о keeper и sentinel или же о Postgres? Если о Postgres то как это stolon мог выбрать неактуальный standby? У stolon есть возможность указать максимальное и минимальное количество синхронных реплик. Выбор нового мастера будет сделан из этих нод. Каким образом выберется нода без последнего коммита при условии "remote_apply"?

Речь идет о keeper и sentinel или же о Postgres? Если о Postgres то как это stolon мог выбрать неактуальный standby? У stolon есть возможность указать максимальное и минимальное количество синхронных реплик. Выбор нового мастера будет сделан из этих нод. Каким образом выберется нода без последнего коммита при условии "remote_apply"?

Ну вот так, двое закоммитились и упали. Столон через пять секунд смотрит: мастер упал, надо кого-то выбирать. Данные о том, кто может претендовать на актуальность, у него также пятисекундной давности.

если осталась одна нода она не промоутится в мастер

А если их осталось три?

если их осталось три то выбор будет сделан в пользу ноды с минимальным лагом. Да, есть возможность потерять последние транзакции в случае если диф устарел. Но это уже скорее зависит от проектирования архитектуры. то есть где будут располагаться эти ноды

Ну или предположим, что успешная запись = три ноды, в кластере пять. Три ноды коммитятся, еще две - нет, потому что произошел разрыв сети. На стороне двух нод находится кворум etcd.

должен быть не только кворум etcd а еще и кворум keeper + sentinel. sentinel принимает решение кто будет новым мастером а не etcd

etcd это лишь транспорт

сильно сомневаюсь

можете проверить)

но даже пусть кворум киперов оказывается на стороне этих двух нод

там не нужен был бы etcd, если бы был свой протокол консенсуса

там не может быть кворума просто потому что их осталось 2 из 5)

etcd это лишь транспорт который "размазывает" данные по кластеру. Если интересно могу дать контакты автора, он ответит более подробно на все вопросы)

их осталось сколько угодно

партишен - это не обязательно физическое перерезание кабеля

это просто потеря, дупликация или задержка пакетов, которая может быть разной у разных приложений

да, никто не говорит что мы режем кабель. Сеть может просто моргать. И кстати при этом не происходит переключения на новый мастер)

и, к тому же, если постгрес просто упал - ну хоть ООМ прибил, хоть редкий и случайный баг, который Дорофей постоянно вспоминает - это тоже никак не влияет на количество сентинелов

Сентинел это распределённый мозг, ему для кворума нужно неменее 2х нод. При этом всегда есть мастер)

и, к тому же, если постгрес просто упал - ну хоть ООМ прибил, хоть редкий и случайный баг, который Дорофей постоянно вспоминает - это тоже никак не влияет на количество сентинелов

постгрес роняется очень легко, если творить ужасы в постгисе

Его поднимет keeper если он упал

Это не проблема

Если конечно не разнесло все)

и, к тому же, если постгрес просто упал - ну хоть ООМ прибил, хоть редкий и случайный баг, который Дорофей постоянно вспоминает - это тоже никак не влияет на количество сентинелов

всё, что заходит в geos, аллоцирует свою память, а сделать какой-нибудь ST_Collect(ST_MakePoint(0,0)) from generate_series(1, 100000000) несложно

и инфраструктура слежения за work_mem идёт лесом

Может кто то поделится более надёжным решением для HA?)) Интересно послушать))

Мой гундеж выше - он про формальные несоответствия, а не про вероятность потери данных, если что. Ни одно хранилище на свете не переживет потерю вообще всех нод, так что это вся история скорее про допустимые рамки, чем про идеальную защиту. Вообще cockroachdb предлагает как минимум нормальный фейловер на уровне БД и работает по протоколу постгреса, но я до сих пор не добрался почитать про внутрянку, только краем уха слышал, что там тот же рафт и что вся магия присутствует только пока часы идеально синхронизированы.

привет, в пятницу 19:00 мск — онлайн-митап! https://www.meetup.com/preview/postgresqlrussia/events/243471965

Если уж про таракандб, то формально он CP

Коллеги, а кто нибудь использует prometheus-postgres-exporter?

Коллеги, а кто нибудь использует prometheus-postgres-exporter?

Добрый день, какой конкретно вопрос?

Добрый день, какой конкретно вопрос?

При запуске инит.скрипта получаю сообщение об ошибке missing $DATA_SOURCE_NAME, не ясно для какого конкретно пользователя экспортировать переменную, и в каком формате это правильно сделать, например будет ли правильным такой формат DATA_SOURCE_NAME="postgresql://localhost:5432/postgres ?

А вы вот это делали https://github.com/wrouesnel/postgres_exporter#running-as-non-superuser ?

я использовал вот этот пакет https://packages.debian.org/sid/prometheus-postgres-exporter + daemon как зависимый и боюсь, что настройка оного может отличатся. хотелось бы обойтись без докерзации, если возможно.

Я думаю это он и есть

А вы вот это делали https://github.com/wrouesnel/postgres_exporter#running-as-non-superuser ?

еще нет.

При запуске инит.скрипта получаю сообщение об ошибке missing $DATA_SOURCE_NAME, не ясно для какого конкретно пользователя экспортировать переменную, и в каком формате это правильно сделать, например будет ли правильным такой формат DATA_SOURCE_NAME="postgresql://localhost:5432/postgres ?

[Service] Type=simple User=postgres Group=postgres EnvironmentFile=/etc/postgres_exporter_%i.env ExecStart=/usr/local/libexec/postgres_exporter -extend.query-path /etc/postgres_exporter_queries.yaml -web.listen-address :${PORT}

То есть вы добавляет эти view и DATA_SOURCE_NAME=postgresql://postgres_exporter:password@localhost:5432/postgres?sslmode=disable

Или вот так https://github.com/wrouesnel/postgres_exporter#setting-the-postgres-servers-data-source-name

Огнище, добавил переменную в /etc/default/prometheus-postgres-exporter и он запустился.

Отлично!

Отлично!

спасибо.

Добрый день! А кто-нибудь знает как сделать PR в pgpooladmin?

Подскажите, пожалуйста, как лучше всего получить при выборке из таблицы дополнительный столбец, который основывается на двух других. Есть колонки start_date, end_date , нужно сделать динамически колонку status, которая равна 1, если end_date < текущая_дата; 2, если start_date > текущая_дата. Подскажите инструмент, про который прочитать, так сказать каноничный способ сделать это. Спасибо

обычный case вам не подходит?

хм, наверное, он как раз подойдет, спасибо. А назвать эту колонку можно алиасом своим, а не case, как в примере документации?

можно

мы разрешаем

понял, спасибо

а если текущая дата меньше end_date и больше start_date то что нужно вернуть?

Не могу удалить подвисший COPY

пытаюсь через pg_cancel_beckend

и через pg_terminate_backend

все равно висит

никто не встречался с таким?

что с ним сделать?

а если текущая дата меньше end_date и больше start_date то что нужно вернуть?

конкретная логика не важна, вопрос не по ней. Суть в торм, что текущую дату нужно разными способами сравнить с интервалом дат из колонок, которые есть в БД и на основе этого создать 3 колонку

а если точнее, то start_date и end_date - это дата начала и конца соревнования. Нужно определить статус соревнования на момент выборки (прошло, проходит, будет проходить в будущем)

( start_date < now() )::int + ( end_date < now() )::int as status значения 0 - не началось, 1 идёт, 2 - закончилось

( start_date < now() )::int + ( end_date < now() )::int as status значения 0 - не началось, 1 идёт, 2 - закончилось

это сразу после SELECT col1, col2, можно добавлять, так? Без всякий CASE. Я просто пока знаю совсем элементарные вещи в постгресе, а более сложные кейсы по мере возникновения задач разбираю, поэтому извиняюсь за простые вопросы

так

Не могу удалить подвисший COPY

какая версия постгрес?

возможен баг: https://www.postgresql.org/message-id/CAJrrPGczmfBp0yHn-Tsq9pBCRZKNNDUabABt6k%3D52t43pB5W1w%40mail.gmail.com

9.4.1

да похоже это наш баг

спасибо за наводку

поделитесь опытом, кто как решал задачу slowly changing dimensions? с вариантами из вики я ознакомился, хотелось бы услышать еще от людей имеющих практический опыт

Привет. Есть запрос вида: select * from company co join countries geo on co.address like geo.filter where geo.in_uppercase = false; Фильтры типа %Armenia%, % BK%, % UA %, %PL% и т.д. Подскажите, как мне сделать так (что погуглить, почитать), чтобы я мог быть уверен, что при like по одному фильтру у меня выберется нужная страна. То есть, что у меня не будет так, что по фильтру %PL%, выбирается не Польша (как это задумано), а, например, другая страна, где в адресе присутствует слово 'PLACE' или 'PL'. Этого можно добиться, исключив все другие фильтры (проверив, что в строке их нет). Вот в этом и состоит вопрос: как это можно сделать?

Как я понимаю, мне нужно расположить мои фильтры по приоритету, чтобы джойн был максимально правдоподобным. Но как быть с тем, что у меня в конце таблицы остаётся фильтры с двумя большими буквами? Там могут быть ошибки и приоритет не поможет. Мб, кто-то уже решал такую задачу?

Используй word similarity

https://www.postgresql.org/docs/9.1/static/pgtrgm.html

Спасибо за подсказку, сейчас посмотрю, что это.

Я могу описать

разбивает слово на триграммы и ищет совпадения триграмм.

Функция возвращает число в диапазоне от 0 до 1, где 0 - это абсолютное несовпадение и 1 - полное совпадение

Гм, спасибо за информацию. А если в строке будет несколько совпадений? Я так понимаю, мне всё равно нужно выбрать какой-то один фильтр?

Например твоя входная строка Превет, В базе есть две записи Привет и Пока. В случае с Превет совпадение будет большое, в случае с пока - маленькое

Функция возвращает числовое значение с плавающей точкой от 0 до 1. Чем больше это число, тем большее совпадение

Тебе в запросе надо будет просто отсортировать результаты выбора по убыванию значения функции (order by ... desc) и выбрать первый из них

А, понятно. Значит, мне нужно будет составить такой запрос, который мне вернёт все мои фильтры и засунуть их в эту проверку.

сейчас попробую накидать запрос что бы ты понял)

твои таблицы company и country никак не связаны?

нет foreign key?

Эм, нет, нкиак.