террабайты - это про ГИС

"терра" )

Рррррр

всем привет есть вопрос, хотел бы узнать, может кто-то знает ответ есть ли возможность в постгресе указать тип сортировки для запроса?

К нам на крупный гос проект нужен опытный базист. Естественно, PostgreSQL. Есть шардинг, pgpool, pgbadger, pglogical и тому подобное. Стек большой и сложный, работа интересная. За подробностями в ЛС. Москва или СПБ.

всем привет есть вопрос, хотел бы узнать, может кто-то знает ответ есть ли возможность в постгресе указать тип сортировки для запроса?

https://www.postgresql.org/docs/9.6/static/queries-order.html

https://www.postgresql.org/docs/9.6/static/queries-order.html

там вроде как нет ответа на мой вопрос

хотя может я невнимательный((

там вроде как нет ответа на мой вопрос

А что за тип?

Пузырьком или QuickSort? )

ага, тип того

в большинстве случаев это quicksort

но на мальних выборка, эта сволоч начинает юзать top-N heapsort

я порядком запарился уже с этим, хочу, чтобы всегда была быстрая сортировка

но в постгресе нет хинтов и я могу только играть с размером выборки

что полная лажа

https://highloadcup.ru/ Соревнование разработчиков высоконагруженных систем от mail.ru, м.б. кто-то захочет

я подозреваю, что может есть какие-то штуки в конфиге, которые можно подтюнить и заставить планировшика выбирать нужный мне тип

но в постгресе нет хинтов и я могу только играть с размером выборки

Вот тут подробнее написано: https://github.com/postgres/postgres/blob/f5d54ef97abdd1df3d6bfe0320a565ecce742abe/src/backend/utils/sort/tuplesort.c Судя по коду, явно влиять никак нельзя.

ах, жопка посто на кой черт было делать такую подлянку, они сортируют по-разному одни и те же данные((

тип полная выборка и первая страница пагинации, к примеру, отсортированны по-разному

А как у вас это аффектит?

выше описал

да тут можно массу примеров привести, когда вам будет критично, что выборка из 20 элементов и из 200 не совпадают после сортировки

хотя логично предположить, что эти 20 должны быть повтороением первых 20 из 200

хоть выпиливай одну из сортировок и компиль свою версию))

ps думаю понятно, что разница проявляется при сортировке данных с одинаковым значением (решил уточнить, а то может не сразу ясно, что я имею ввиду) тип сортируешь по имени и в базе два Васи

хм

кажется есть идея)) вот не зря говорят, что надо проговорить проблему)

чет я недопедрил, что можно использовать второе поле для сортировки, тип id

но это не отменяет проблемы на самом деле) тк его может и не быть)

Что-то я вас не понял. Разные методы сортировки не могут сортировать по-разному. Если в выборке есть неуникальные значения по сортируемому столбцу, то порядок строк с учетом остальных столбцов не гарантируется.

Ворк мема добавь процессу

ну вот быстрая всегда выдает один и тот же порядок, независимо отвыборки от будет один и тот же а вот вторая сорировка уже на этих же данных отсортирует иначе строки, где данные одинаковые

тип быстрая выдаст 1 Вася 2 Вася а top-N 2 Вася 1 Вася

я понимаю, что это ок, но проблема в том, что я не могу выбрать сортировку сам

Не нужно закладываться на это ни в коем случае. Сортируйте по уникальному набору столбцов, чтобы гарантировать одинаковый результат.

ну да, я просто чего-то ступил, сорри) но все равно как-то не круто, что сорировка меняется без моего ведома) вот забудешь про уникальность полей для сортировки и может быть не хорошо)

мне кажется, что у многих, кто работает с этой базой, есть запросы, где вы сортируете, к примеру пользователей по имени в конце и не думаю, что у всех еще в конце добавлен вторым полем id

может это и не будет для вас критично, но факт остается фактом, что разница там может быть

ну да, я просто чего-то ступил, сорри) но все равно как-то не круто, что сорировка меняется без моего ведома) вот забудешь про уникальность полей для сортировки и может быть не хорошо)

В том то и дело, что она не меняется. Сортировка выполняется для тех столбцов, которые указаны в предложении ORDER BY. Больше ничего не гарантируется. У вас результат quicksort тоже будет отличаться в разных средах.

хм, может и так может я не замечал просто, но на одной и той же выборке с быстрой, хоть бери лимит 200 хоть 500 результат был отсортирован одинаково

не знаю, что имеется ввиду под средой

Сделаете копию базы и там результат может быть другой. Удалите строки и вставите заново, результат может быть другой.

да, тут ты прав скорее всего более того, сейчас глянул быструю и по моему там такой алгоритм, что он не дает гарантии сортировки одинакого раз от раза одной и той же выборки с одинаковыми полями для сортировки

ладно, всем спасибо) надо иногда повторять теорию видимо)) а то с глупыми проблемами тут)

Кто-нибудь реализовывал пагинацию в постгресе?

Варианты кроме лимит-оффсета есть какие-то?

Кто-нибудь реализовывал пагинацию в постгресе?

а в чем проблема? limit offset

Ловлю периодически offset не может быть отрицательным

Интересно, есть ли еще какие-то варианты.

ну так обработай это в коде и всё

В коде оно обработано уже, мы не можем это воспроизвести, ошибка на продуктиве :)

Я хрен знает, как они этого добиваются )

лол

есть курсорная сотрировка

быстрее оффсетной. но там номеров страниц нету. только туда-сюда

и онас стабильная, в отличие от оффсетной

Рассматривали, в нашем варианте не взлетает

ну пример - редит

Ну, т.е., не применимо. Особенности системы

курсорную кэштировать проще

ну больше проде нету никаких)

оок

ERROR: S client not available

Такой вопрос еще. Кто-нибудь с libzbxpgsql для мониторинга пг через заббикс сталкивался? Я тут нарекомендовал его, но у заказчика, после этого, легла мониторинговая система из-за количества графиков добавленных. Там как-нибудь возможно убрать не нужные нам графики перед установкой расширения?

Сам с заббиксом не возился, не приходилось. Если есть у кого опыт, потыкайте в меня, пожалуйста. Я бы в личке поинтересовался, чтобы не флудить.

можно

ты просто в шаблоне убираешь, то что тебе не нужно

http://cavaliercoder.com/libzbxpgsql/documentation/template-installation/

речь про это?

да

Оке, поизучаю, спасибо

как зальешь шаблон, там переходи в "Список обнаружений" и убери, то что тебе не нужно

Со слов заказчика, добавилось что-то вроде 45тыс графиков/триггеров

и, мол, самим заббиксом пользоваться было вообще невозможно, он там и не поднялся, в целом

=))

Всем привет! А можно ли prepare сохранить навсегда? Т.е. между сессиями пользовательскими

Как хранимые процедуры в базе

а зачем?

а зачем?

Ну чтобы не вызывать каждый раз

Из кода

ты его сам зовёшь, не твой фреймворк?

Хочу один раз вызвать при создании базы, а потом только по имени дергать

ты его сам зовёшь, не твой фреймворк?

ага, сам

а зачем ты его зовёшь?

чего не хватает в непрепарированных запросах?

может это и не будет для вас критично, но факт остается фактом, что разница там может быть

не знаю что за база в бекэнде у ServiceDesk но меня постоянно бесит что при вводе фамилии я не вижу рядом уникального поля и угадать какую из Ивановых ткнуть невозможно. надо просто себе записать (на подкорку) такую бэстпрактис при которой фейла не случится. а разрабы сервисдеска пусть икают до посинения

чего не хватает в непрепарированных запросах?

ничего, просто я знаю что они быстрее выполняются

Создай вью

Или при старте бекенда каждый раз инить препаре

ничего, просто я знаю что они быстрее выполняются

почему ты решил, что они быстрее выполняются?

почему ты решил, что они быстрее выполняются?

ну а зачем они нужны тогда? Если ты каждые раз дергаешь запрос, каждый раз база будет составлять план запроса заново

а тут заранее

это же теория такая

а что делать, когда надо перепланировать? :)