«То есть, vacuum составляет список таблиц, которые нужно обновить и медленно и печально идет по одной таблице, потом по другой и так далее. « Чойто я такое слышу. autovacuum_max_workers автор походу не слышал. Бывает. ¯\_(ツ)_/¯ Кстати, issue кое у кого в гите годами висят. Вот например один из них где пользователь еще и жалуется на некачественную документацию: https://github.com/akopytov/sysbench/issues/19 Бывает. ¯\_(ツ)_/¯ Репликацию межконтинентальную ПГ плохо варит? Ну да конечно же необходимо закладываться в асинхронной репликации что она не будет вообще отставать и вообще она молодец и можно сразу записав на мастер прочитать на реплике из той же сессии. Бывают и такие ожидания да. И не только у Убера, но они лечатся. ¯\_(ツ)_/¯ Вообще,в коммунне пг особо дураками никого не называют. Просто Уберу надо было туда обратится да совета поспрашивать. Полагаю,что ,наверное ,сформулировать боль свою не смогли или было просто тупо лень. ¯\_(ツ)_/¯

ага, коммуна бы сразу сделала индирект индексы и апдейт ин плейс

я тут в комьюнити попросил кластеризованный хип

мне ответили в основном "купи компьютер побольше"

«То есть, vacuum составляет список таблиц, которые нужно обновить и медленно и печально идет по одной таблице, потом по другой и так далее. « Чойто я такое слышу. autovacuum_max_workers автор походу не слышал. Бывает. ¯\_(ツ)_/¯ Кстати, issue кое у кого в гите годами висят. Вот например один из них где пользователь еще и жалуется на некачественную документацию: https://github.com/akopytov/sysbench/issues/19 Бывает. ¯\_(ツ)_/¯ Репликацию межконтинентальную ПГ плохо варит? Ну да конечно же необходимо закладываться в асинхронной репликации что она не будет вообще отставать и вообще она молодец и можно сразу записав на мастер прочитать на реплике из той же сессии. Бывают и такие ожидания да. И не только у Убера, но они лечатся. ¯\_(ツ)_/¯ Вообще,в коммунне пг особо дураками никого не называют. Просто Уберу надо было туда обратится да совета поспрашивать. Полагаю,что ,наверное ,сформулировать боль свою не смогли или было просто тупо лень. ¯\_(ツ)_/¯

вобще там претензия не в отставании реплик была вроде

ага, коммуна бы сразу сделала индирект индексы и апдейт ин плейс

Ну бабок бы заплатили может бы и сделала, какие вопросы?

ну они перевели нужную нагрузку обратно на иннодб, какие вопросы

Ну бабок бы заплатили может бы и сделала, какие вопросы?

кому заплатить за кластеризованный хип в апстриме?

кому заплатить за кластеризованный хип в апстриме?

Там людей много ,предложи. Может кто сделает. Всякое ж бывает. Главное по бабкам договорится

ну они перевели нужную нагрузку обратно на иннодб, какие вопросы

К компетенции Убера ж, не?

а мне кажется вполне себе компетентное решение

кому заплатить за кластеризованный хип в апстриме?

А что такое "кластеризованный хип"? А так, по идее, написать в 2ndQuadrant / EDB / postgrespro... ;)

А что такое "кластеризованный хип"? А так, по идее, написать в 2ndQuadrant / EDB / postgrespro... ;)

http://www.postgresql-archive.org/All-Taxi-Services-need-Index-Clustered-Heap-Append-td6008728.html

postgrespro порекомендовал написать в hackers

hackers порекомендовал купить компьютер побольше

hackers порекомендовал купить компьютер побольше

/прочитал thread по диагонали/ Да и в самом деле, похоже на corner case... так что, почему бы и не купить (если решение нужно прямо сейчас)? ;) А если можете подождать, так вроде все упомянутые Вами patch-и уже committed...

там костыли скорее чтобы хоть както эмулировался кластерный индекс

там костыли скорее чтобы хоть както эмулировался кластерный индекс

А что такое "кластерный индекс" (т.е. что вы под этим понимаете)? Index-organized table?

да

hackers порекомендовал купить компьютер побольше

Прочитал. Про купить лучше комп не увидал. Видел несколько советов. Ты ими воспользовался?

там 'ценные' предложения из разряда: сложи всё в json, попробуй Timescale DB

там костыли скорее чтобы хоть както эмулировался кластерный индекс

Если решение поможет увеличит производительность- это норм.

там 'ценные' предложения из разряда: сложи всё в json, попробуй Timescale DB

Тык попробовал?

Если решение поможет увеличит производительность- это норм.

не, я не обсираю, там каждый патч по делу и для других задач

да

Да, было бы неплохо... хоть бы выбор был, как в некоторых других RDBMS.

Всем треша и угара: https://habrahabr.ru/company/devconf/blog/353682/

Интересный доклад

Тык попробовал?

внешние ключи в json уже завезли? timescale db в aws нема

Коммуна делает все в правильном направлении. Если хочется быстрее она всегда готова получить патч, пару лет повозить лицо патчующего по столу, показать где кто бяку сделал, но потом все с замиранием сердца ждут новый релиз ;) Может чото и есть что хуже в mysql ,чото лучше, но чего точно не будет так это того что mysql опередит в функционале oracle rdbms. Деловая этика не позволит и так и будет он всегда в роли догоняющего старшего брата. У пг таких рамок нет , но придется подождать чутка , чтож поделать.

внешние ключи в json уже завезли? timescale db в aws нема

А мир только aws ограничен?

дык у Дaрaфея-то RDS, он же в рассылке об этом пишет

В рассылке написано хочу. Где патч ;)?

Или я его не увидел там?

Закомитили же на что указывали

Подождать же говорю надо.

И покрывайки и про вакуум

а сто коммьюнити скажет за pgpool?!

можно использовать или не очень?!

Pgpool течёт по памяти очень

Есть открытые issue по этому поводу

Есть проблемы у последней версии с адаптером erlang

Нам пришлось отказаться

Всем привет. Подскажите, пожалуйста, на какой странице мануала прочесть при синтаксис unnest(ARRAY['string123','something']::text[]) x(arr_element); Вот этот x мне незнаком. Спасибо!

похоже на алиас

Скорее на extraction. Но не получается найти в документации.

а ты замени x на y

и окажется что алиас!

вот сейчас не понял... разверни мысль?

вот сейчас не понял... разверни мысль?

Или поставь AS перед х. Если скушает то альяс

Или поставь AS перед х. Если скушает то альяс

Спасибо

в Pgadmin4 ОФИГЕННЫЙ автокомплит

крайне так себе, до datagrip пилить и пилить

Нам пришлось отказаться

ясно. а что взамен?

ясно. а что взамен?

Пробовать на уровне приложения выносить запросы на чтение на реплику

Пробовать на уровне приложения выносить запросы на чтение на реплику

к сожалению это невозможно. есть проприетарное приложение которое умеет ходить только в 1 точку подключения. дальше разносить запросы надо каким-то иным способом. пока что базовая мысль - pgpool. но может есть варианты лучше?

Pgpool течёт по памяти очень

Можете подробнее рассказать, при каких условиях это проявляется? Насколько зависит от нагрузки?

к сожалению это невозможно. есть проприетарное приложение которое умеет ходить только в 1 точку подключения. дальше разносить запросы надо каким-то иным способом. пока что базовая мысль - pgpool. но может есть варианты лучше?

HAproxy+pgbouncer ?

HAproxy+pgbouncer ?

как раскидывать запросы на запись на мастер ноду, на чтение - большую часть на слейв?

pgPool умеет

как раскидывать запросы на запись на мастер ноду, на чтение - большую часть на слейв?

Тогда это решение не подойдет

pgPool умеет

потому и выбрали

Тогда это решение не подойдет

вот к сожалению пока что не нашли ничего кроме pgpool подходящего. потому и задал исходный вопрос.

согласен что данных вводных было не очень много в нём

добрый день

может кто подсказать

если ли какойто хак

у меня есть запрос

select my_json from my_table where my_type=1 limit 10 union all select my_json from my_table where my_type=3 limit 10 union all select my_json from my_table where my_type=3 limit 10

можно ли его переписать на какойто более краткий вид?

и например с 1 чтением таблицы

limit без order by - так и должно быть?

это символический запрос

там кучи условий

которые в каждом таком запросе одинаковые

и order by тоже одинаковый

можно попробовать rank() over (partition by my_type) и where rank <= 10

нельзя)

записсей может быть миллионы

пока он посчитает

скорость падает примерно раз в 5

посравнению с union

понятно что еще к limit есть offset

Я понимаю что тут больше пользователей БД чем те кто её ковыряет, но всё же, что вы думаете по этому поводу? https://www.postgresql.org/message-id/CAHg_5grEV_gT0845XbEQXYMPJichVKL74J5_m4bMr-4%2BrMzyzw%40mail.gmail.com я пока своё очевидное мнение оставлю при себе.

мы это обсуждали в постгисе, и решили, что мы не можем уйти на шмяк, если постгрес на него не уйдёт

может кто подсказать

функция с курсором внутри и проверять, что нашли по 10 записей с нужным значением поля

но вообще было бы неплохо

а если у меня например при сортировке первые 10к записей одного типа

потом 10к записей второго типа)

а мне надо по 10 штук каждого

мне придется пролистать 20к строк?)

я просто наделся может какой хак есть

с груп баем например

или может расширение

или хранимочку на С )

прокидывался бы limit внутрь group by

select my_type, array_agg(my_id) from my_table group by my_type limit 10

или я слишком много хочу)

но вообще было бы неплохо

тогда было бы хорошо если ты отписался, хотя бы в ключе - небольшая деградация в поддержках леджеси систем не страшна. А так понятно, что вы полностью зависите от системы сборки постгри, тут о ней и идёт речь. По хорошему от этих ответов будет понятно, поднимется этот вопрос в следующий год или нет.