А также некий proxy на лету транслирует запросы из приложения в PG.

Последний разрабатывается для тех кто не может изменить код самого приложения.

С чего начать данный вопрос

Ora2pg

03 - Игнатов pgconf2016_ora_to_pg.pdf

Clickhouse?

Лол

мне показалось что написано "постгрес"

Блин тоже сначало так прочитал ))

постгресе

Смотри не опостгрись!

а кто-нибудь из местных писал патчи на heap io в постгресе?

Привет, а кто нибудь может подсказать про шардинг для Postgresql?

думаю, стоит конкретизировать вопрос

думаю, стоит конкретизировать вопрос

это по моему вопросу?

да

да

правильно я понимаю, что для 9,6 нет встроенного решения для шардинга?

я вообще не особо понимаю как может быть встроенный шардинг

а есть такие решения Postgres-XC, Postgres-XL и Citus?

https://wiki.postgresql.org/wiki/Built-in_Sharding

"из коробки" не сторонний продукт)

fdw и шардинг в одном предложении, как-то грустно

fdw и шардинг в одном предложении, как-то грустно

не могли бы мне объяснить, в какую сторону следует смотреть по шардингу, ну и еще есть пара вопросов, придётся ли переписывать приложение при переходе на шардинг, или там все "автоматом" cумеет?)

я бы смотрел на шардинг на уровне приложения

вот хотелось бы минимально переписывать приложение

давайте начнем с того, зачем вам вообще шардинг

давайте начнем с того, зачем вам вообще шардинг

для того, чтобы распаралелить нагрузку при планируемом росте, сейчас мастер/слейв, чтение со слейва

у вас планируется много записи?

у вас планируется много записи?

да

я бы начал с организации дата флоу изначально, а потом уже думать про шардинг или не шардинг

хорошо, если поговорить про шардинг, что смотреть какое решение?

Джентльмены, а кто мигрировал с Оракла на Постгрес?

Пользовали ора2пг

Привет, а кто нибудь может подсказать про шардинг для Postgresql?

Посмотрите, может вам поможет plproxy

а Postgres-XC или Postgres-XL стоит смотреть?

plproxy нетранзакционен

насколько я помню

Citus так понимаю платный

а Postgres-XC или Postgres-XL стоит смотреть?

XL

XL

тут, так понимаю схема с координаторами

там четыре типа нод: GTM, GTM-proxy, Coordinator, Datanode

XC и XC2 то же самое, только более старый форк и другие люди поддерживают

ну и XL идёт отдельным дистрибутивом, пока 9,6 там альфа

plproxy нетранзакционен

транзакции при шардинге?

таки иногда бывает нужно

распределенные транзакции еще не победили как бы

ну некоторые ходят через fdw в соседнюю базу и получается вполне транзакционно

хоть и не шустро

а что изменения через в fdw и локальные делаются в рамках 2PC?

crash-unsafe транзакционность многих устраивает :)

поясни

ERROR: S client not available

что это за типа такой транзакционности

Привет, подскажите. Процесс postgres 38220 2.2 2.2 17065512 3010896 ? Ss 21:03 0:19 postgres: 9.6/main: autovacuum worker process ad_base_1_main Означает, что автовакуум запустился в 21:03 и работает сейчас, верно?

Это процесс автовакуума запустился

Это процесс автовакуума запустился

ага, спасибо. а как понять, он ли на 100 процентов утилизирует мой диск? чтот лондист залагал .причину ищу.. вижу что диск утилизирован

Iostat есть пакет

ну неплохо было бы еще посмотреть чего там с чекпоинтами и бгврайтером

ну неплохо было бы еще посмотреть чего там с чекпоинтами и бгврайтером

это на слэйве? на получателе, всмысле?

ну неплохо было бы еще посмотреть чего там с чекпоинтами и бгврайтером

на получателе такая картина postgres 38016 2.2 12.0 16202896 15936384 ? Ss 21:03 1:26 postgres: 9.6/main: checkpointer process

Разобрался как парсить с помощью json json_to_recordset(json) и JOIN LATERAL - кому интересно поделюсь

а чекпоинтер процесс как-то можно прибить?

конечно можно, kill -9 и база в крешрековери, возможно даже запуститься, но яб на всяк случай реплику наготове держал

сначала все-таки всегда без -9 стоит пробовать

Привет коллеги, какой способ лучше для создания дампов в postgres? Использую pg_dump но есть сложности

pg_dumpall

Привет коллеги, какой способ лучше для создания дампов в postgres? Использую pg_dump но есть сложности

Какие сложности?

а чекпоинтер процесс как-то можно прибить?

Зачем его убивать?

Зачем его убивать?

Да думал, что проблема лага лондиста в нем. Рестартанул просто базу и лаг рассосался

что будет, если из трёх параллельных сессий запустить vacuum analyze на одну и ту же таблицу?

что будет, если из трёх параллельных сессий запустить vacuum analyze на одну и ту же таблицу?

а зачем?

просто исследую, что будет, если система сойдёт с ума

что будет, если из трёх параллельных сессий запустить vacuum analyze на одну и ту же таблицу?

По идее это неблокирующая операция

ну да он же только статистику собирает, не трогает саму таблицу

VACUUM ANALYZE performs a VACUUM and then an ANALYZE for each selected table.

Думаю будут небольшие блокировки на таблицы со статистикой куда вакуум пишет.