а еще с патчами 1с не проходят selftests. По крайней мере на 9.6.3 и 10

Добрый день! Подскажите инструменты для отслеживаний изменений в схеме?

Мне тут когда-то отвечали на этот вопрос. Вот список инструментов, который мне советовали: liquibase phinx SQL Workbench/J Sqitch

+Pyrseas

Коллеги, всем доброго дня. Релиз 10 версии таки в августе?

Полнотекстового поиска в jsonb не хватает... Или кто подскажет: в jsonb поле есть массив. Проверяю на вхождение через @>. Но форма слов может отличаться

Можно ли как-то обойтись без unnest ?

Сколько места на диске занимает пустой варчар? Заливаю в базу 20гб данных, выходит оверхед ~3 раза, пытаюсь понять что я делаю не так В одной строке интовый адйи + 6 варчаров(из них данные есть только в двух)

Индексы тоже место занимают.

Индекс еще не добавлял

Сколько места на диске занимает пустой варчар? Заливаю в базу 20гб данных, выходит оверхед ~3 раза, пытаюсь понять что я делаю не так В одной строке интовый адйи + 6 варчаров(из них данные есть только в двух)

Лучше нуллами забивать, они занимают один бит в карте нуллов

Вопрос. База в которой работаем в некоторых частях не была нормализованной, в том числе и связей не было . Как при связывании полей указывать null, если id нет в родительской таблице. При этом зафиксировать стертый id куда либо?

Или вообще как правильно поступить?

Снести всё нафиг и сделать все нормальным не предлагать. Перестраиваю аккуратно

Вопрос. База в которой работаем в некоторых частях не была нормализованной, в том числе и связей не было . Как при связывании полей указывать null, если id нет в родительской таблице. При этом зафиксировать стертый id куда либо?

ну так и указывай null, в чём проблема?

Нужно помнить какой id конфликтный и в какой строке

Единственное решение пока что - еще одна колонка типа old_id

я для старых записей сгенерировать id?

чтобы были

Всем добрый день. Столкнулся с invalid page in block. Подскажите, нет никакого враианта попробовать починить без потери данных?

Всем добрый день. Столкнулся с invalid page in block. Подскажите, нет никакого враианта попробовать починить без потери данных?

Готовых утилит нет, только хекс-редактором

А какие есть вообще варианты решения? SET zero_damaged_pages = on; VACUUM FULL; не помогает, все так же получаю invalid page in block при попытке переиндексации и compressed data is corrupted при попытке дампа

Всем добрый день. Столкнулся с invalid page in block. Подскажите, нет никакого враианта попробовать починить без потери данных?

О, у нас тоже сегодня такая штука вылезла, хостинг случайно не reg.ru?

Неа, не reg.ru )

Парни, помогите с UUID. Не могу понять в чем проблема.

postgres=# select * from website_endpoint where uuid='17506859-3157-4f41-a16f-76131402679801'; ERROR: invalid input syntax for uuid: "17506859-3157-4f41-a16f-76131402679801" LINE 1: select * from website_endpoint where uuid='17506859-3157-4f4...

uuid это поле с типом uuid

А какие есть вообще варианты решения? SET zero_damaged_pages = on; VACUUM FULL; не помогает, все так же получаю invalid page in block при попытке переиндексации и compressed data is corrupted при попытке дампа

стендбай есть?

postgres=# select * from website_endpoint where uuid='17506859-3157-4f41-a16f-76131402679801'; ERROR: invalid input syntax for uuid: "17506859-3157-4f41-a16f-76131402679801" LINE 1: select * from website_endpoint where uuid='17506859-3157-4f4...

у вас uuid невалидный

А какие есть вообще варианты решения? SET zero_damaged_pages = on; VACUUM FULL; не помогает, все так же получаю invalid page in block при попытке переиндексации и compressed data is corrupted при попытке дампа

Это сеттинг чтоб дамп сделать, дальше нужно проверить диски, пересоздать кластер и залить обратно то что уцелело

у вас uuid невалидный

хм. я беру его как пример из той же таблицы

http://guid.us/Test/GUID

хотя это для .net

А какие есть вообще варианты решения? SET zero_damaged_pages = on; VACUUM FULL; не помогает, все так же получаю invalid page in block при попытке переиндексации и compressed data is corrupted при попытке дампа

Вообще первым делом желательно сделать снапшот блок девайсов, если в будущем планируете восстанавливать

postgres=# select uuid from website_endpoint; uuid -------------------------------------- 17506859-3157-4f41-a16f-761314026798 4b319ec6-e84c-4373-9bb6-f3f2ca4c10c9 36013202-01a4-4672-af20-313fe41ff6d6 091e7ecb-36fb-4b26-8d4d-69cdbfc26ecd ecfd76ee-5e88-4558-81fb-eeae73c30a06 b69abcb4-fa24-4e1f-8c84-380ef5b1f7ca

postgres=# select uuid from website_endpoint; uuid -------------------------------------- 17506859-3157-4f41-a16f-761314026798 4b319ec6-e84c-4373-9bb6-f3f2ca4c10c9 36013202-01a4-4672-af20-313fe41ff6d6 091e7ecb-36fb-4b26-8d4d-69cdbfc26ecd ecfd76ee-5e88-4558-81fb-eeae73c30a06 b69abcb4-fa24-4e1f-8c84-380ef5b1f7ca

Хе, косяк

откуда 01?

генерируются питоном через uuid.uuid4()

может в этом дело

postgres=# select uuid from website_endpoint; uuid -------------------------------------- 17506859-3157-4f41-a16f-761314026798 4b319ec6-e84c-4373-9bb6-f3f2ca4c10c9 36013202-01a4-4672-af20-313fe41ff6d6 091e7ecb-36fb-4b26-8d4d-69cdbfc26ecd ecfd76ee-5e88-4558-81fb-eeae73c30a06 b69abcb4-fa24-4e1f-8c84-380ef5b1f7ca

у тебя в выборке норм uuid

В запросе криво

ох блин

точно спасибо :)

М.б. в запросе в конце нечаяно "печатнул" 01

Вообще первым делом желательно сделать снапшот блок девайсов, если в будущем планируете восстанавливать

Понял, спасибо

попробуйте подменить файл со стендбая, если его нет, то попробуйте записать страницу нулями вручную

Есть у кого идеи как улушить запрос? SELECT * FROM table_a WHERE id NOT IN (SELECT parent_id FROM table_b)

table_a - 500 000 строк. table_b - 300 000 строк.

ужас какой

not exists вероятно будет побыстрее

хотя, оно может планировщиком в одну хрень перестраивается

еще можно сделать left join table b where b.column is null

имхо, как минимум, мне кажется надо обозначить связь, чтобы не тупо выбирать таблицу. Аля WHERE table_a.id = table_b.id

Есть у кого идеи как улушить запрос? SELECT * FROM table_a WHERE id NOT IN (SELECT parent_id FROM table_b)

план говорит что так быстрее

(

not exists вероятно будет побыстрее

Пробовали? Индексы есть?

SELECT * FROM table_a a WHERE NOT EXISTS (SELECT 1 FROM table_b b where b.parent_id=a.id)

Кстати, можно писать просто SELECT FROM, т.к. считается ряд)

просто меньше сахара)

ERROR: S client not available

Учту

checkpointer process отел 40% RAM отдельно его одного не прибить никак только весь кластер перезапускать?

эээ, а зачем ты будешь прибивать процесс, который пишет твою базу?

ну, не прибить, а чтоб оно конфиг перечитало

А вы какой параметр меняете? Смотрели в pg_settings применится ли он при релоаде или рестарт нужен?

https://www.postgresql.org/docs/current/static/view-pg-settings.html

Если в context internal или postmaster - нужен рестарт

shared_buffers (change requires restart)

Эти 40% RAM не те самые shared buffers случайно?

postgres 8111 0.0 39.2 21714428 12904968 ? Ss 2016 53:38 postgres: checkpointer process

Мне опытные Линуксоведы рассказывали что сколько shared memory процесс поторогает, столько к нему в top'е и приплюсуется. Т.е. обычный worker, который под свои блоки данных использовал немного shared buffers занимает памяти немного, а checkpointer, которому весь shared buffers нужно на диск скинуть занимает чуть больше чем shared buffers

Какая версия постгреса у вас и какая модель шареной памяти используется?

И какую вы проблему решаете? Чем вам эти 40% RAM у checkpointer жить мешают? Он отожрал и успокоился или у вас утечка и он продолжает кушать память?

Ребят, я новичок, а почему джоины плохо?

Джоины не плохо.

Я это часто слышу от бывалых программистов

Ребят, я новичок, а почему джоины плохо?

откуда такая информация?

Я это часто слышу от бывалых программистов

mysql-погромистов?

В мыскле - да, джойны не есть бысть хорошо.

Я это часто слышу от бывалых программистов

они плохо, если не смотреть в план вообще

Да вроде нет, ребята хотят использовать JSON за место ещё одной таблички

но это ортогонально джоинам :)

Что значит ортогонально?)

Что значит ортогонально?)

В данном контексте - независимо.

А как лучше делать?

Да вроде нет, ребята хотят использовать JSON за место ещё одной таблички

join дороже создания маппера и чтения json'a? а по данным json'a выборку не надо делать? а вам вообще sql нужен?

Я вообще сначала NoSql использовал, но наш системный архитектор не любит монгу (запрещённое слово), поэтому заставил переписывать на pg

Я вообще сначала NoSql использовал, но наш системный архитектор не любит монгу (запрещённое слово), поэтому заставил переписывать на pg

Правильный системный архитектор.

А как лучше делать?

Изучать БД с самого начала в Вашем случае.

Стартовать с аббревиатурый ACID

Хз как это заставить делать других