аргумент к хабру™

с чем может быть джоин в select case when aaa in (1,2,3) then 1 end ?

джоин? с чем?

с табличной переменной же. ну или в пг конструкция есть которая создаёт на лету роусет

аргумент к хабру™

смайл нот детектед? ?

там типичное деревце if-then-else, сворачивающее многообразие осма к ограниченному набору значений

https://github.com/ThorstenHi/lyrk-mapstyle/blob/master/project.mml#L605 ничего так себе if-then-else

это гитхаб, ты можешь прислать патч

но я не вижу способа кардинально что-то изменить, не меняя схему данных

это гитхаб, ты можешь прислать патч

наверно это надо мапник досконально изучить... а там си сплошные, в которых я ничего не понимаю

зачем мапник, тебе ведь не нравятся in? :)

это гитхаб, ты можешь прислать патч

нажимать на самые большие кнопки? помню ?

зачем мапник, тебе ведь не нравятся in? :)

больше этого мне не нравится только NOT IN )

но я не вижу способа кардинально что-то изменить, не меняя схему данных

что если вместо "(...) as data", которое потом будет очевидно оборачиваться SELECT и WHERE по геометрии, внутрь скобок подставить шаблон этого самого where..?

совершенно ничего, планировщик свернёт этот запрос

оно так и читабельней будет, не? =)

кому именно читабельней?

эээ, carto?

на самом деле действительно редко ведь кто туда лезет, ты прав

carto вообще не в курсе о существовании постгреса

он просто отдаёт запрос мапнику, внутри которого, благодаря такой структуре запроса, не нужно писать полноценный парсер SQL, вставляющий что-то во внутренние скобки

а carto и делался как способ отделить css от sql и дать дизайнерам крутить цвета, не задумываясь о запросах, которые им написал кто-нибудь в самом начале

сегодня я кручу sql, а завтра буду дизайнером ?

да и постоянные IN расстраивают

Я вообще наших разрабов хочу удавить. За эти IN (и здесь сотни id). А потом они удивляться - а что это у нас запросы часами выполняются.

это неправильные разрабы. и они дают неправильный код но удавливания конечно не помогут. где тут стикер "explain"? %)

Я вообще наших разрабов хочу удавить. За эти IN (и здесь сотни id). А потом они удивляться - а что это у нас запросы часами выполняются.

set statement_timeout to 1; и запросы перестают выполняться часами

а id in (сотни id) - это ещё нормальные разрабы. местами люди делают сотню запросов where id=N.

set statement_timeout to 1; и запросы перестают выполняться часами

А где же стикер с улыбкой?

я не знаю, у меня так в продакшене, никто не жаловался

Я, к сожалению, так плотно с pg не работал, но для oracle - у меня правило - если в in подзапрос возвращающий больше 10 значений - переделай на join или на exists на худой конец. А в pg не знаю быстрее ли exists чем in

включи auto_explain и посмотри, что и как выполняется

https://explain.depesz.com/s/F8a

https://github.com/ThorstenHi/lyrk-mapstyle/blob/master/project.mml#L470 какой участи может ожидать программа с таким подходом?

их ждёт успех, а я паникёр

эхотаг рулит!

у тебя work_mem заниженный

и @Komzpa конечно котик

у тебя work_mem заниженный

как ты это делаешь?

sm=> SHOW work_mem; work_mem —------— 512MB

цпу на 56 потоков и я немного очкую каждому ворку много давать. хотя озу конечно тоже жирная, наверно можно и подбросить

или random_page_cost не 1.01, а 4

в общем, там бы не Bitmap index scan, а просто Index scan

или random_page_cost не 1.01, а 4

ух, аж мурашки по коже (надо бы калорифер включить)

толку от этих 56 потоков, если они упрутся в io и будут перепроверять каждую подозрительную страницу целиком на соответствие запросу, вместо того, чтобы сразу взять нужную строчку

у геометрий на средних масштабах совершенно неправильные эстимации, им постоянно кажется, что сейчас прочтут всю таблицу два раза

на твоём запросе планировщик думал, что rows=44,755,172, а оказалось, что rows=2,922

так что если не хочется чинить постгис и изобретать правильные быстрые эстиматоры для такого случая, можно просто разрешить ему брать памяти под 44 755 172 строк

возьмёт он из них только под 2 992, но нервничать перестанет

https://explain.depesz.com/s/eVqD битмап исчез но 44 млн осталось

время наверно уже не улучшить?

так что если не хочется чинить постгис и изобретать правильные быстрые эстиматоры для такого случая, можно просто разрешить ему брать памяти под 44 755 172 строк

в гигабайтах это сколько? от ширины (width=96) зависит?

4,5 Гб ворк_мем?! ну не знаю

у меня 10гб

тут либо планировщик нервничает, либо я ) придется привыкать

время наверно уже не улучшить?

только create index on osm_buildings_geom using gist(geometry) where type not in ('0', 'false', 'no');

и таких еще несколько по потребностям картостиля?

если надо

нарендерить карту всех домов в 11х11км за 20 секунд - возможно, не очень плохо, если это ляжет в кеш

у меня 10гб

https://explain.depesz.com/s/dtBo что-то не вижу разницы. 6 мало ему?

нет, ворк_мем тут уже не поможет

всё влезает в память

поможет или cluster osm_buildings using osm_buildings_geom; или create index on osm_buildings_geom using gist(geometry) where type not in ('0', 'false', 'no');

ERROR: S client not available

ещё поможет delete from osm_buildings where type in ('0', 'false', 'no') и стереть это условие из запроса

мудро

это как в генту собирать весь мир

хех, каламбурчик )

в планете всего 12 736 building=no, 1 building=0, ни одного false

можно переписать на where type != 'no' без особого вреда

если, конечно, в type не попадают значения из ещё каких-то тегов, кроме building

можно переписать на where type != 'no' без особого вреда

https://explain.depesz.com/s/gOyi пользы тоже никакой )

ну, ты же не любил in

вот ты от него избавился, а разницы - никакой

эхотаг рулит!

Ребят, вам оффтопик-лист вынести?

Эхотаг, сабж — это всё давно умерло. У меня тмыл уже не алё.

Ребят, вам оффтопик-лист вынести?

с расценками пожалуйста ?

Сорян, тут письмо ареафиксу писать не нужно — проще выйти.

народ, у меня вопрос такой. я хотел бы переустановить ОС. как переносить базу данных на новую винду

народ, у меня вопрос такой. я хотел бы переустановить ОС. как переносить базу данных на новую винду

Pgdump?

имхо, проще нагуглить как делать бакап, чем найти этот канал :)

народ, у меня вопрос такой. я хотел бы переустановить ОС. как переносить базу данных на новую винду

https://www.postgresql.org/ftp/pgadmin/pgadmin3/v1.22.2/win32/ через нее можно сделать бакап

https://www.postgresql.org/ftp/pgadmin/pgadmin3/v1.22.2/win32/ через нее можно сделать бакап

спасибо

https://www.postgresql.org/ftp/pgadmin/pgadmin3/v1.22.2/win32/ через нее можно сделать бакап

только если БД маленьких размеров. не более 1-2 gb, наверное.

только если БД маленьких размеров. не более 1-2 gb, наверное.

а что есть решения для basebackup уровня next-next done?

а что есть решения для basebackup уровня next-next done?

неа. но я имел ввиду юзать pg_dump через командную строку для больших БД.

неа. но я имел ввиду юзать pg_dump через командную строку для больших БД.

да для больших баз pg использовать страшно :) pg_dump хотябы seq scan сделает и индексы перестроит

да для больших баз pg использовать страшно :) pg_dump хотябы seq scan сделает и индексы перестроит

ага.

Кто работал с PostgreSQL в psycopg2 (Python). Можете подсказать, если с базой через скрипт работают несколько пользователей (читают из неё данные), надо ли создавать для каждого пользователя свой курсор и закрывать его после окончания его работы с базой.

емнип, курсор для каждой сессии свой