Тарантул разве не key-value?

Ну окей, постгрес тоже кей-валуе тогда. как и цеф

Тарантул разве не key-value?

Это noSQL с прикрутченной транзакционностью (не знаю только какого она там качества)

Это noSQL с прикрутченной транзакционностью (не знаю только какого она там качества)

жеж))

а есть пруф про мейл ру и PG?

mail.ru в итоге переходит на postgres. Для холодных данных по крайней мере, для горячих ведь тарантул (вроде)

да ладно, откуда инфа-то? Тем более что мейл большой - и в каждом проекте все по своему

а есть вообще разница, на чем они там сидят?

а есть вообще разница, на чем они там сидят?

разницы нет, а рынок знать интересно же)

разницы нет, а рынок знать интересно же)

проще у них спросить, они отвечают

да ладно, откуда инфа-то? Тем более что мейл большой - и в каждом проекте все по своему

С хабра из коментов

а есть вообще разница, на чем они там сидят?

на коксе, очевидно

на коксе, очевидно

скорее на спайсе)

блин, комментарии на хабре, если честно - так себе источник, там и материалы-то часто из какой-то параллельной вселенной :\

коллеги, использует ли кто pg_stat_plans ? как оно живет на 9.5 ?

https://github.com/2ndQuadrant/pg_stat_plans - последний коммит 2013 год. Бобик мертв, кмк. В README support 9.3

4

https://github.com/2ndQuadrant/pg_stat_plans - последний коммит 2013 год. Бобик мертв, кмк. В README support 9.3

может, он просто достиг совершенства?

Он-то может и достиг, а постгрес нет. Новые версии вот выпускают, злодеи

дратути

можно ли сменить кодировку в уже созданной базе?

или нужно сдампить в нужной кодировке и кинуть в новую с верной?

да, нужно создавать новую базу

с правильной кодировкой

Чат, а с хайлода видео есть? А то только презентации нашел

за 2016 еще не выложили, как я понимаю

за 2015 есть

Спасибо

А трансляцию нельзя пересмотреть?

нельзя. Нужно ждать видео, его обычно в течении месяца оформляют

трансляцию закрывали сразу после окончания

привет ребят

Я тут с глупым вопросом. У меня есть поле data::jsonb, в котором хранится сложный(можно ли его таким назвать?) JSON объект. Примерно такого вида: { "a":"string", "b":int, "nodeDataArray": [ {"foo":"bar", "typen":"long string", ... }, {"foo":"bar", "typen":"long string", ... }, {"foo":"bar", "typen":"long string", ... }, ] } И соответственно запрос на поиск вхождения не дает корректный ответ, т.к. оператор @> судя по всему не углубляется во внутрь JSON и не ищет в массиве nodeDataArray. SELECT "name", "data"@>'{"typen":"880f334b-b749-4234-976a-c4cf5984210e"}'::jsonb FROM table; Второе поле во всех случаях FALSE. А теперь вопрос, как мне найти совпадение пары внутри массива объектов nodeDataArray?

Хых. У самого получилось. Вот что значит задать вопрос ?

SELECT "name", "data"@>'{"nodeDataArray":[{"typen":"880f334b-b749-4234-976a-c4cf5984210e"}]}'::jsonb FROM table;

Рады помочь

Спасибо

А можно продолжить вопрос? Как теперь сделать апдейт записи чтоб где условие выполнилось, typen стал равен "foo"?

у кого есть опыт настройки сервера при 384 ГБ памяти?

у кого есть опыт настройки сервера при 384 ГБ памяти?

смотря что с ним делать... может ничего особого то делать и не надо.

А можно продолжить вопрос? Как теперь сделать апдейт записи чтоб где условие выполнилось, typen стал равен "foo"?

на версии <9.5 нет встроенных средств для редактирования jsonb, потом появились jsonb_set, jsonb_insert

несколько БД суммарно 548ГБ, несколько веб приложений на питоне будут с ней работать версия БД 9,5

смотря что с ним делать... может ничего особого то делать и не надо.

меня интересуют размеры shared_buffers effective_cache_size

на версии <9.5 нет встроенных средств для редактирования jsonb, потом появились jsonb_set, jsonb_insert

нет, да, и это убивает) ищу костыль

неужто парсить текст-строку из джейсона придется..?

можно поискать самописные функции в инете

да, парсить

мы до 9.5 старались пользоваться hstore

или кастовать в hstore и обратно, если можно :)

спасибо)

если json одноуровневый, то каст в hstore и обратно легко проходит

о, коллега уже подсказал)

если json одноуровневый, то каст в hstore и обратно легко проходит

попробую так тоже, спасибо

меня интересуют размеры shared_buffers effective_cache_size

если на сервер нету иной нагрузки на чтение/запись то можно ставить шареных буферов половину или 80% от оперативки ну как все и рекомендуют. А вот если она есть то надо меньше 50%. Но тут главное - тестировать. Любые рекоммендации всегда надо адаптировать под ваш use case. К слову это NUMA? Если NUMA то там свои интересные проблеммы.

если на сервер нету иной нагрузки на чтение/запись то можно ставить шареных буферов половину или 80% от оперативки ну как все и рекомендуют. А вот если она есть то надо меньше 50%. Но тут главное - тестировать. Любые рекоммендации всегда надо адаптировать под ваш use case. К слову это NUMA? Если NUMA то там свои интересные проблеммы.

это железка

на практике файловый кэш на таких объемах действует эффективнее чем shared buffers, ставьте не более 100Gb.

shared_buffers = 128GB effective_cache_size = 196GB я вот так щас сделал

и осторожнее с work_mem не задирайте его слишком много

иначе начнет планировать в памяти, и выходить за пределы при недостатке статистики

просто work_mem - это настройка "планера", а не "экзекьютора"

просто work_mem - это настройка "планера", а не "экзекьютора"

а для "экзекьютора" тогда где память?

она ничем не ограничена

только OOM ))

угу. поэтому статистика нужна всегда свежая - тоесть постоянно месить автовакуумом

у кого есть опыт настройки сервера при 384 ГБ памяти?

в первом приближении можно использовать pgtune

ERROR: S client not available

http://pgtune.leopard.in.ua/

в первом приближении можно использовать pgtune

вы код его видели? :( она писалась тогда, когда на машине больше 8gb не было :)

в первом приближении можно использовать pgtune

# WARNING # this tool not being optimal # for very high memory systems

я же и писал про перове приближение, ага

вы код его видели? :( она писалась тогда, когда на машине больше 8gb не было :)

2011 год

я же и писал про перове приближение, ага

первое я и руками могу ))

вы код его видели? :( она писалась тогда, когда на машине больше 8gb не было :)

всё не work_mem=4MB

всё не work_mem=4MB

у меня work_mem = 500MB

на amazon RDS по дефолту 4MB

у кого есть опыт настройки сервера при 384 ГБ памяти?

psql.bin (9.5.4) Type "help" for help. postgres=# \! free -g total used free shared buff/cache available Mem: 503 140 1 0 362 362

shared_buffers = 128GB effective_cache_size = 196GB я вот так щас сделал

немного понизь размер шаред эффектив кеш ставь в соответствии с мониторингом, в зависимости от того, сколько в среднем страничный кэш занимает

немного понизь размер шаред эффектив кеш ставь в соответствии с мониторингом, в зависимости от того, сколько в среднем страничный кэш занимает

Спасибо попробую

немного понизь размер шаред эффектив кеш ставь в соответствии с мониторингом, в зависимости от того, сколько в среднем страничный кэш занимает

postgres=# \! free -g total used free shared buff/cache available Mem: 3023 36 1976 155 1009 2439 Swap: 3 0 3 postgres=# show shared_buffers ; shared_buffers —------------— 100GB (1 строка)

сами напрасились :D

правда это тестировочный сервак для zabbix :)

а зачем своп?

религия не позволяет нуль.

"если у них такой стейджинг, то какой же у них продакшен"

postgres=# \! free -g total used free shared buff/cache available Mem: 3023 36 1976 155 1009 2439 Swap: 3 0 3 postgres=# show shared_buffers ; shared_buffers —------------— 100GB (1 строка)

тут можно еще уменьшить шаред, думаю вреда не будет, даже если в 2-3 раза

все-равно не пользуется

Сжатие эффевно работает, просто не ожидали :)

Оно в файловом кеше пожатым лежит

каковы настройки больших страниц?

и поповоду сжатия поподробнее, пжлст

и еще покажите, пжлст, эффектив_кэш_сайз )

и поповоду сжатия поподробнее, пжлст

ну вообщем рядом с каждым файлом релейшена создается новый форк в котором лежит маппинг смещения пожатых страниц (каждая страница жмется и вместо выровненой 8k получается что-то другое). в итоге на диске - пожатое в shared buffers разжатое

получается такая картина - скорость записи падает, утилизация стораджа падает

каковы настройки больших страниц?

nr_hugepages = 0

ну вообщем рядом с каждым файлом релейшена создается новый форк в котором лежит маппинг смещения пожатых страниц (каждая страница жмется и вместо выровненой 8k получается что-то другое). в итоге на диске - пожатое в shared buffers разжатое

на цпу большая нагрузка от этого?