велком

лет 15 уже оракл не трогал :)

2017й год, что лучше брать pgpool или pgbouncer?

2017й год, что лучше брать pgpool или pgbouncer?

для чего? какая задача?

Сохранить соединения. Сегодня случился день X когда у нас на RDS кончились 150 соединений )

тогда второй

мы пользуем пгбаунсер

+1 (но есть особенности)

присоединяюсь к вопросу — как правильно pgbouncer готовить?

может кто добрый конфигом поделится?

Какие подвозные камни? Вся инфраструктура в амазоне.

да что там настраивать-то?

я по гуглу настроил

Подводные камни у нас возникали в сессионом режиме

да что там настраивать-то?

я так и не понял как рассчитать количество соединений

У нас есть есть что-то типа SET TIMEZONE. Ты про это?

Подводные камни у нас возникали в сессионом режиме

^^^

Если это вопрос ко мне, то да – возникают всякие ништяки при попытке выставить что-нибудь. типа set path и т.п

я вот вчера спрашивал, получится ли сегфолтами поломать ридреплику. у нас за пять минут не получилось :)

Если это вопрос ко мне, то да – возникают всякие ништяки при попытке выставить что-нибудь. типа set path и т.п

Так а если таймзону хочется поставить в итоге то что делать? Никак чтоли?

Саша откуда вы берете шаблоны ?

CSS

у кого мониторинги настроены, знайте: pg_postmaster_start_time не сбрасывается на сегфолте

Господа, а разъясните за Recheck cond, когда ищу по gin-индексу — откуда оно берется?

Берётся оттуда, что GIN не может точный результат вернуть.

Детальнее сказать можно только зная о каком запросе речь.

Сейчас вопрос по этому запросу: SELECT datetime, avg((data ->> 'Alarm Word 1') :: NUMERIC) OVER ( ORDER BY datetime ROWS BETWEEN 0 PRECEDING AND 16 FOLLOWING) AS value, row_number() OVER () AS rn FROM units_data_log WHERE data ->> 'Alarm Word 1' IS NOT NULL ORDER BY datetime

Задача отсеять записи, в которых отстутствует ключ 'Alarm Word 1'

в идеале следует использовать WHERE data ? 'Alarm Word 1', вот только этот запрос выполняется гораздо дольше, чем первый

несмотря на то, что добавил GIN для поля data

Покажите explain (analyze, buffers) для исходного запроса и запроса с WHERE data ? 'Alarm Word 1'

в идеале следует использовать WHERE data ? 'Alarm Word 1', вот только этот запрос выполняется гораздо дольше, чем первый

Where not?

Почему where not? Вечь человеку нужно, чтобы *ключ был*

Оператор вопрос ровно это и делает.

Покажите explain (analyze, buffers) для исходного запроса и запроса с WHERE data ? 'Alarm Word 1'

Если можно, то позже, сейчас не за компьютером

Так а что в итоге с переменными и пгбаунсером?

А, кажется я вспомнил хак для этого какой был. Все это заворачивается в транзакцию SET + исходный запрос.

Уже представляю как буду расширять наш ORM под это )

Я ведь правильно понимаю, что я могу на каждый app инстанс поставить по пгбаунсеру чтобы не городить лишних точек отказа?

если не хотите городить, то можете вообще один баунсер для всего поставить))

А в pgbouncer реально сделать чтобы все таки пароль от приложения был приоритетным и не лежал в баунсере?

Покажите explain (analyze, buffers) для исходного запроса и запроса с WHERE data ? 'Alarm Word 1'

Здесь в более удобночитаемом виде: http://pastebin.com/ysbCpqbT

work_mem маловат... Из-за этого получается lossy bitmap и возникает много recheck'а.

так и думал, спасибо за информацию, проблема в том, что база на amazon rds, так что проблематично будет увеличить

Что посоветуете, если у меня план показывает Bitmap Index Scan для 1.5млн строк?)

перелопатить данные чтобы не сканировать 1.5кк

Проблема в том, что придется это делать каждый раз, когда в базе меняется хотя бы одна из 1.5kk строк )

Это расписание

поясни

Ну вот лежит в базе 1.5кк записей таймфреймов пользователей

Надо на момент времени t понять каких пользователей выбрать

Т.е. у кого есть свободное время.

гист не работает?

гитс?

А, гист

угу

звучит как интервалы

баундинг боксы, вот это всё

бтри пока

Куда копать чтобы было быстро?

ну помимо гиста

подумай какая оптимальная структура данных и её индексирование, если бы базу данных ты програмировал сам

и положи данные так, но в базу с нужным индексом

В смысле саму СУБД?)

ну назовем это не субд а опердень-микросервис который все данные держит в памяти

?

представь что ты не разработчик на пхп, а чувак который пишет дохуя апликуху со стейтом, всё серьезно

чисто под конкретную задачу

Тут еще проблема в том, что надо прямо в запросе делать length(lseg(a.point, b.point)).

воу воу

Да..

ты такси что ли там в джуно прогромируешь?

Ахаха не

В общем заменили btree на gist и поля дат на поле с типом интервала и выиграли 75% производительности.

Тут еще проблема в том, что надо прямо в запросе делать length(lseg(a.point, b.point)).

это порт с mysql?

почему не a.point <-> b.point ?

это порт с mysql?

Почему порт?

конструкция "сделать из двух точек линию и померять длину" откуда-то оттуда веет

Не знаю. А выше это полный эквивалент?

Действительно, почему нельзя сразу расстояние измерить. )

Мопед не мой, пойду передам)

Спасибо

а скажите, есть какой-нибудь софт, в котором можно удобно порассматривать многомерный crosstab?

окулус?

тогда уж вайв

но вопрос про софт :)

софт для рассматривания МРТ интерфейсно похож на то, что хотелось бы

Теперь в 3D.

почему не a.point <-> b.point ?

Хираси. Запрос стал работать на 85% быстрее.

План запроса некисло схуднул

В общем вчера у нас было 490мс. Сейчас 15мс ?

если кто-то конструирует промежуточные сущности без нужды, бейте его