Так попробовал, это не помогло.

coalesce заменяет нулл на значение, он не подходит в этом случае

А, понял. Сейчас попробую через switch

nullif(column_name, '')

nullif(column_name, '')

Variant

Всем спасибо за помощь)

Всем привет! Есть простая таблица. Нужно в нее делать много вставок и мало чтений. Какой наиболее эффективная конфигурация постгресс для этого, не считая шардирования? Где можно почитать об этом?

Написали пост о том, как устроен #PGHACK by Avito. Читайте рассказ, о том, из каких опенсорс-компонентов состоит платформа соревнования: https://habrahabr.ru/company/avito/blog/336246/. Регистрируйтесь до 31 августа на Timepad: https://goo.gl/7Wv1yj!

Вставки или аптейты тоже?

@Konst583 , супер !!!

Написали пост о том, как устроен #PGHACK by Avito. Читайте рассказ, о том, из каких опенсорс-компонентов состоит платформа соревнования: https://habrahabr.ru/company/avito/blog/336246/. Регистрируйтесь до 31 августа на Timepad: https://goo.gl/7Wv1yj!

Это заявка на событие года !

Написали пост о том, как устроен #PGHACK by Avito. Читайте рассказ, о том, из каких опенсорс-компонентов состоит платформа соревнования: https://habrahabr.ru/company/avito/blog/336246/. Регистрируйтесь до 31 августа на Timepad: https://goo.gl/7Wv1yj!

>мысль — использовать Docker. Отказались, т.к. поняли, что большинство DBA не готовы к его применению: они работают с другими системами и в других плоскостях. золотые слова

существует ещё такое интересное и обоснованное мнение https://habrahabr.ru/post/332450/

существует ещё такое интересное и обоснованное мнение https://habrahabr.ru/post/332450/

Староват материал.

любую проблему можно решить дополнительным уровнем абстракции, кроме проблемы слишком большого количества уровней абстракции

Вот, опять

Это я о своём. Не обращайте внимания пожалуйста

В пг же наверняка есть аналог сиквеловского for xml explicit? Расскажите насколько вы большие структуры создаёте таким образом )

есть постгресс 9.5, есть задача писать в него по 4 кб в кол-ве записей в 30-60 млн, что подкрутить желательно ?

30-60млн за какой период?

30-60млн за какой период?

сутки

Pgtune будет достаточно

Нагрузка ниочем

сейчас нагружаю с помощью jmetr, и после 8 млн записей начинаются пропуски, то есть постгресс откидывает часть того, что нужно записать

Нагрузка ниочем

ну jmetr'ом изображаю 12к пользователей которые к плеерам обращаются, и пишут в базу, и после 8 млн уже есть проблемы, к тому же всё пишется в 1 таблицу

Ну там нагрузка в секунду какая?

база стоит на ssd https://market.yandex.ru/product/1711601901?show-uid=040735157685250141416003&nid=55316&glfilter=7893318%3A761916

Ну там нагрузка в секунду какая?

12к в сек записей

xfs, rhel 7

а вы в copy запись не батчите?

а вы в copy запись не батчите?

пока настраивал ток доступы и кому можно кому нельзя обращаться, да фс

12к тоже не так уж и много

можно сброс на диск покрутить

12к тоже не так уж и много

для mssql например это уже капец и дайте мне 64 гб оперативки

у постгреса получше

но после 8 млн начинает часть записей пропускать

для mssql например это уже капец и дайте мне 64 гб оперативки

У меня инстанс раз а минуту 30-60к загружает, проблем не наблбдается вообще

У меня инстанс раз а минуту 30-60к загружает, проблем не наблбдается вообще

ну как бы 12к в сек, это больше чем 60к в минуту

Но там нагрузка именно по минутная, накопил, сбросил

Озу много?

Озу много?

по 32 везде

postgre память не жрёт, а вот мсскл сожрал всё

Диск один или рейд?

Нагрузка на insert же?

Диск один или рейд?

1, там же ssd 1300/2300 Мб/с 250000 IOPS Объем буферной памяти 512 Мб

Нагрузка на insert же?

да ток инсерты

пока

Пгтюном пройдись по конфигу

Пускай в памяти хранит и пореже пишет

так нагрузки на диск нет

если верить прометеусу, то нагрузка на диск 12%

я уже больше на сокеты смотрю, хотя в системе и systemd настроил

Коннект по ip или напрямую в сокеты?

по ip

с 8 плееров

Они каждый соединяютя с базой?

Они каждый соединяютя с базой?

да

А нагрузка на процессор какого рода?

Сообщений о переполнении Conntrack таблиц нет в логах?

syscall, softirq не высокие?

Сообщений о переполнении Conntrack таблиц нет в логах?

эт надо будет ближ к вечеру, сейчас на тесте mssql стоит

А нагрузка на процессор какого рода?

30%

d rjyak.tyct pfqle

сек в кофлюенсе зайду

Pg переварит без проблем 12к в секунду

30%

Важен именно характер нагрузки.

И еще - индексов много в таблице?

И нет ли триггеров например для аудита?

И всякие констрэинты

И еще - индексов много в таблице?

Intel Xeon E3-1275 v5, 3.60GHz, 4 ядра, 8 потоков, 32 гб ддр 4,

30 там даже редко бывало, в основном 6%, уже путаюсь в тестах

http://dpaste.com/3GHZ6Q4

вот данные с тестов

там не картинка увы

30 там даже редко бывало, в основном 6%, уже путаюсь в тестах

30 - при 4х ядрах - как раз 1 ядро в 100

Нужны подробности о таблице

jmetr и графана в основном вообще на 6%, бывали оч редко пики до 30 на ядро

в графане

с mssql закончу снова постгресс под нагрузку сделаю

у кого есть инструкция по установке 1С + PostgreSQL на Windows Server 2012

у кого есть инструкция по установке 1С + PostgreSQL на Windows Server 2012

проще поставить fedora и туда и 1С и постгресс

bycnherwbz tcnm&

проще поставить fedora и туда и 1С и постгресс

есть инструкция

редакция 1С какая

8,2,19,80

редакция а не версия

предприятие, бухгалтерия, ерп

ПРежприятие

ПРежприятие

https://postgrespro.ru/products/1c_build

для федоры подходит версия от centos

https://habrahabr.ru/company/stss/blog/282852/

tckb yt jcbkbim ueuk

если не осилишь гугл возьми центось как в статье

Хрыч, ты и тут рхел форсить начал??