ну и дальше запускай снова заливку, смотри на какую строку ругается и вручную исправляй, и так по кругу

лучше конечно поискать копии бекапа

invalid input syntax for integer: "84749383

На эту строчку почему-то ругается

кавычка же там

Нету ее

COPY users (uid, ) FROM stdin; 84749383 5000

Вот так в дампе

может невидимый символ

Ну ладно, спасибо

Всем привет

Привет

Как мне попробовать удалить каскадно строоку, но с ограничениями. Поясню. Мне нужно чтобы из родительской таблицы "A" удалить запись и во всех дочерних таблицах ("B","C"...) кроме таблицы "N" тоже удалить запись.

iconv -f utf-8 -t utf-8 -c dump.sql

Очень крутая фишка, спасибо

То есть как-то каскадное удаление, если в N таблице нет связанных записей

как вариант, отключить внешний ключ в таблице N перед удалением

но сразу же получаете отсутствие консистентности

А с таблицы N спилить констрейнт не вариант? Еще можно в связующую колонку пихнуть NULL, тогда связь не будет нарушена (но это не всех устраивает).

Это нормально что ILIKE раза в три медленнее LIKE в постгресе? Как юзать LIKE без зависимости от регистра?

но сразу же получаете отсутствие консистентности

Отключать ключ не вариант. Я понимаю, что можно написать DELETE ... WHERE N.A_id NOT IN(A.id) Но думал может есть вариант изящнее.

Это нормально что ILIKE раза в три медленнее LIKE в постгресе? Как юзать LIKE без зависимости от регистра?

ILIKE вроде как переводит все в единый регистр и потом ищет. Поэтому логично что он медленнее

Отключать ключ не вариант. Я понимаю, что можно написать DELETE ... WHERE N.A_id NOT IN(A.id) Но думал может есть вариант изящнее.

можно переписать констрейнты на явные триггеры например

типа if...

да, плюс можно всё в одну функцию уместить

можно переписать констрейнты на явные триггеры например

я к тому, что в PG внешние ключи сделаны на механизме триггеров

ILIKE вроде как переводит все в единый регистр и потом ищет. Поэтому логично что он медленнее

а индексирование всей таблицы не поможет?

А вот хз. План юзайте, смотрите

В теории должен помочь

а индексирование всей таблицы не поможет?

Что значит по всей таблице? У вас частичный индекс?

В теории должен помочь

Но надо индекс тогда как-то на ilike ориентировать. Чтобы эффективнее было

В доке написано: It is also possible to use B-tree indexes for ILIKE and ~*, but only if the pattern starts with non-alphabetic characters, i.e., characters that are not affected by upper/lower case conversion. https://www.postgresql.org/docs/9.4/static/indexes-types.html

Что значит по всей таблице? У вас частичный индекс?

да, Индексы: "f" btree ("Фамилия", "Имя")

хотя согласен, это тупо

Частичный индекс - это индекс по условию. У вас есть whereв кляузе создания индекса?

Лучше в сторону полнотекста посмотрите.

В 9.6 с появлением RUM индексов полнотекст в постгре просто огонь.

https://www.postgresql.org/message-id/200309291002.14823.josh@agliodbs.com

Как вариант

В 9.6 с появлением RUM индексов полнотекст в постгре просто огонь.

Расскажи вкратце в чём огонь

https://www.postgresql.org/message-id/200309291002.14823.josh@agliodbs.com

Функциональный индекс тоже вариант. Вот в ораклах вариант с upper более производительный, чем с lower. Кто-нибудь знает, как в постгресе дела обстоят по этому вопросу?

Расскажи вкратце в чём огонь

Поищи презентацию от Бартунова. Там все очень хорошо по полочкам разложено.

Поищи презентацию от Бартунова. Там все очень хорошо по полочкам разложено.

www.highload.ru/2016/abstracts/2352.html эта?

За 2017 год

Эта старовата

https://pgconf.ru/2017/94101

https://pgconf.ru/2017/94083

Вторая презентация сначала в ГАИШе на митапе была, а потом на pgconf в этом году.

Благодарю

Вроде не мне адресовывалось изначально :-), но, блин, полезно же! Спасибо еще раз

Всегда пожалуйста :)

Ещё можно в расширение pg_tgrm потыкать. Тоже интересная технология с этими триграммами.

https://pgconf.ru/2017/94083

?

а кто-нибудь пробовал делать gist_print на двухгиговый индекс? :)

оно как-то очень долго не заканчивается

Внутри транзакций SELECT Допустимы?

У меня на select ругается "current transaction is aborted, commands ignored until end of transaction block"

допустимы, не очень допустимы ошибки

Это ошибка вылазит после запроса выполненного с ошибкой

=> SELECT as; ERROR: syntax error at or near "as" LINE 1: SELECT as; ^ => SELECT * FROM users limit 1; ERROR: current transaction is aborted, commands ignored until end of transaction block => rollback ;

сохраняйтесь, https://www.postgresql.org/docs/9.6/static/sql-savepoint.html

сохраняйтесь, https://www.postgresql.org/docs/9.6/static/sql-savepoint.html

не до конца понял совет. Перечитал доку несколько раз. По своей сути это не что иное как замена двух строк ... begin; commit; ... И немного налог goto То есть нужно скорее для отката до определенного шага транзакции. Я правильно понимаю, что мне надо использовать rollback to savepoint после select чтобы отловить ошику?

ERROR: S client not available

Всё, спасибо. Нашел ошибку.

а я в очередной раз напоролся на то, что у геометрий в постгисе = сравнивает только боксы

и group by по линиям сгруппирует прямые и реверсные в один бакет

Вопрос, как узнать сколько в транзакции добавилось строк?

Сижу с работы уйти не могу, потому что обработка идет на ноуте и прервать её не хочу

А сколько сидеть не понятно. Знаю что добавиться должно в итоге примерно 50к строк

ну 50к за несколько секунд максимум должно добавиться)

или ты делаешь что-то странное

Ну почему странное, там может быть агрегация тяжелая, а по её итогам вставка

Но видимо запрос тяжеловат

Делать параллельно select count?

Там запрос в транзакции

Сижу с работы уйти не могу, потому что обработка идет на ноуте и прервать её не хочу

если не хотите, так зачем ее прерывать?

если не хотите, зачем уходить с работы?)

рабочий ноут домой таскаете? или на работу со своим ноутом ходите?

screen?

screen?

туда я и клонил

А вообще у меня прогрессбар для такого на plpgsql написан с eta

рабочий ноут домой таскаете? или на работу со своим ноутом ходите?

Второе

Второе

Хотя и первое тоже

в таком случае пользуйте скрины

а слип в ноуте работает?

на худой конец посмотрите трассировку сессии

или база не на нём?

или база не на нём?

На нем

ну так сложи ноут и иди :)

ну так сложи ноут и иди :)

А не остановится?

Я часа 2 уже жду. Там скан по 20гб базы, поэтлму долго

https://www.gnu.org/software/screen/

Я часа 2 уже жду. Там скан по 20гб базы, поэтлму долго

Это чегой-то с запросом не то явно.