Учебник русского языка

Ректально

Ой, простите, милостивые судари. Не подскажете ли барышне, какие нынче в моде издания по хранилищам данных?

именно по dwh?

Я бы начала с чего-то обзорного из разряда «должен прочитать каждый», а дальше пошла бы вглубь

кимбалл какой-нить

и у него ещё антагонист есть, фамилию к сожалению не помню

и у него ещё антагонист есть, фамилию к сожалению не помню

спасибо, гуглится вместе с антагонистами сразу

Я бы начала с чего-то обзорного из разряда «должен прочитать каждый», а дальше пошла бы вглубь

Мне симпатичен подход Oracle Autonomous Data Warehouse. Они тут обещают демки в обмен на персональные данные https://www.oracle.com/database/autonomous-database/demo-series.html?elq_mid=97369&sh=082209202202112207091205291709091726&cmid=WWMK170417P00011

А вот и их реклама - https://www.youtube.com/watch?v=tZMZODoi2xw&elq_mid=97369&sh=082209202202112207091205291709091726&cmid=WWMK170417P00011

dblink пора считать deprecated. Лучше использовать postgres_fdw

А если функцию дернуть? А автономные транзакции, а ассинхрон? Мне кажется еще живее всех живых инструмент

А если функцию дернуть? А автономные транзакции, а ассинхрон? Мне кажется еще живее всех живых инструмент

А я уже успел разочароваться, что никто не отметил это :)) да, согласен про функции, но это очень узкие случаи (функции можно держать и на исходном узле), а вот про асинхрон и автономное — вы реально это используете? У меня очень негативный опыт с этим на больших нагрузках.

А есть реальный опыт использования автономных транзакций на больших нагрузках? И какой с этим негативный опыт?

Ну за счёт dblink async - да есть. Я уточню что там было не так. Как минимум логи постгреса были забиты connection closed unexpectedly, насколько помню

Фция dblink_send_query

Кто-нибудь пихал hunspell_ru в докер контейнер с постгресом? Поделитесь, пожалуйста, dockerfile-ом.

Вдруг кому понадобиться - Dockerfile

Подскажите есть таблица id productId version name date productId может быть одинаковым, мне нужно вытащить для каждого productId максимальный version

select productId,max(version) from таблица group by productId;

Так как же всё-же лучше хранить отчётность? Есть к примеру отчёт в котором может быть произвольное количество колонок, в любой момент, этот отчёт вбивается ручками. Обмазаться JSONB, темболее всё красиво нынче выбирается и считается или всё-же забить на это и пилить по старинке с промежуточной таблицой? Отчёты —------\ —- табличка с значениями полей Типы полей -/ Собмазыванием жейсоном как-то красивее получается :)

Вот кто-то же должен был уже наступить в этой теме на грабли )

обмазывайся, если что потом помоешься

Да отмытся потом проблематично будет :)

Привет всем, сорян, что не про постгрес, но все же. Можете подсказать сколько оперативы выделить тачке под rabbitmq, чтобы ему комфортно жилось? =)

Привет всем, сорян, что не про постгрес, но все же. Можете подсказать сколько оперативы выделить тачке под rabbitmq, чтобы ему комфортно жилось? =)

Да-да, и как пропатчить KDE?

Так как же всё-же лучше хранить отчётность? Есть к примеру отчёт в котором может быть произвольное количество колонок, в любой момент, этот отчёт вбивается ручками. Обмазаться JSONB, темболее всё красиво нынче выбирается и считается или всё-же забить на это и пилить по старинке с промежуточной таблицой? Отчёты —------\ —- табличка с значениями полей Типы полей -/ Собмазыванием жейсоном как-то красивее получается :)

См. pivot tables как вариант.

Привет. Кто нибудь сталкивался на арче с тем, что pgadmin4 не запускается и выдаёт ошибку: "the application server could not be contacted"

Привет. Кто нибудь сталкивался на арче с тем, что pgadmin4 не запускается и выдаёт ошибку: "the application server could not be contacted"

возможно надо добавить постгрешный порт в /etc/hosts.allow

ну и в целом надо проверить: 1. запущена ли в принципе постгря 2. на какой адрес забинжен постгрешный порт 3. default policy у фаерволла и наличие каких-либо правил для постгрешного порта 4. разрешен ли доступ в pg_hba

постргря зарущена, у меня на локалхосте всё, фаерволл вроде не трогал. pgadmin раньше работал, это началось как обновился до postgresql-10

pg_hba.conf последняя строчка all поставь

если дефотьтный конфиг

там толи trust толи md5

по дефолту

@Komzpa, однако, спамер завелся, расстрелять бы его...

select productId,max(version) from таблица group by productId;

а если мне еще нужно вытащить поле name?

а насколько плохо хранить пустую строку вместо NULL в varchar?

иногда рекомендуют пустую строку, ибо когда нулл - нужно ещё проверять на нулл, а пустая строка - выводится ничего

Ребят, такой вопрос Есть события, события имеют свою логическую суть, то есть могут повторяться каждую неделю, могут раз в четную неделю, нечетную, раз в 3 недели, а могут вообще быть 1 раз в году. Думаю что у каждого события должна быть строка с датами, например, у события А 18.09.2017,25.09.2017,02.10.2017,09.10.2017,16.10.2017,23.10.2017,30.10.2017 Есть 2 вида календаря с событиями, первый - показывает события в определенный день, второй же - показывает события на всю неделю, то есть 7 дней. В первом случае идёт поиск с помощью LIKE %...% А во втором случае как быть? Делать поиск 7 раз ? Или вообще такая структура нехорошая

а насколько плохо хранить пустую строку вместо NULL в varchar?

лучше смотреть по семантике, пустая строка и null - это разные вещи. и тип бы лучше брать text :)

Ребят, такой вопрос Есть события, события имеют свою логическую суть, то есть могут повторяться каждую неделю, могут раз в четную неделю, нечетную, раз в 3 недели, а могут вообще быть 1 раз в году. Думаю что у каждого события должна быть строка с датами, например, у события А 18.09.2017,25.09.2017,02.10.2017,09.10.2017,16.10.2017,23.10.2017,30.10.2017 Есть 2 вида календаря с событиями, первый - показывает события в определенный день, второй же - показывает события на всю неделю, то есть 7 дней. В первом случае идёт поиск с помощью LIKE %...% А во втором случае как быть? Делать поиск 7 раз ? Или вообще такая структура нехорошая

массив и gin

а насколько плохо хранить пустую строку вместо NULL в varchar?

NULL меньше места занимает )

лучше смотреть по семантике, пустая строка и null - это разные вещи. и тип бы лучше брать text :)

так varchar - то же самое, что и text, или нет?

массив и gin

переходить на фреймворк на голанге пока нет

переходить на фреймворк на голанге пока нет

ээм? https://www.postgresql.org/docs/10/static/gin-builtin-opclasses.html

ээм? https://www.postgresql.org/docs/10/static/gin-builtin-opclasses.html

аа, пардон

чет всеравно допереть не могу как запилить, мне нужно максимальный count для каждого productId id prodId count name 1 3333 1 kek 2 4444 1 kek 3 4444 2 kek 4 5555 2 kek 5 3333 5 kek id prodId count name 3 4444 2 kek 4 5555 2 kek 5 3333 5 kek

подскажите

distinct on

SELECT DISTINCT ON ("prodID") max(count) FROM products; column "producs.prodID" must appear in the GROUP BY clause or be used in an aggregate function

если сделаю group by тогда другие поля не смогу вытащить

тебе не нужен max, тебе нужно order by count desc

чат, пожалуйста, подскажите как сформировать запрос Есть табличка first name | last name Benet Waeftaker | .. Abeer Dakdouk | .. нужно как то вытащить данные после пробела, т.е. Waeftaker и Dakdouk, удалить их с поля first name и засунуть в поле last name. При этом, записей около миллиона

хотя бы в какую сторону копать

https://www.postgresql.org/docs/9.4/static/functions-string.html ...set last_name = regex_split_to_array(first_name, ' ')[2] ...

поотлаживаться на копиях, возможны сюрпризы

(типа имён с пробелом или двойных фамилий)

Хорошо, спасибо

Ребят, всем доброй ночи. Подскажите ресурсы с хорошим описанием на русском, как происходит "хранение пользователей на сервере с разграничением доступа к таблицам" и "агенты в постгре (изменения по дате или с течением какого-либо времени)".

Не буду оригинальным ;)

https://postgrespro.ru/docs

всем привет, выгружаю через Copy дамп записей, потом загружаю в таблицу на другом сервере, выдает ошибку с кодировкой типа ERROR: invalid byte sequence for encoding "UTF8": 0xc8 0x33 или другие коды, хотя везде utf8 выгрузка Copy (a, b, c from transactions where trans_date='2017-01-05') To '/tmp/transactions_trans_date_is_2017-01-05.tsv' With CSV DELIMITER E'\t' null as '\N'; загрузка COPY transactions (a, b, c) FROM '/tmp/transactions_trans_date_is_2017-01-05.tsv'; подскажите, что не так?

а в файле utf-8, если глазами посмотреть?

а в файле utf-8, если глазами посмотреть?

выглядит все нормально, если через less смотреть, команда file выдает UTF-8 Unicode text, with very long lines

может у субд клиента не utf-8? может из локали что-то другое похватывается?

может у субд клиента не utf-8? может из локали что-то другое похватывается?

show client_encoding; выдает UTF8

всем привет, выгружаю через Copy дамп записей, потом загружаю в таблицу на другом сервере, выдает ошибку с кодировкой типа ERROR: invalid byte sequence for encoding "UTF8": 0xc8 0x33 или другие коды, хотя везде utf8 выгрузка Copy (a, b, c from transactions where trans_date='2017-01-05') To '/tmp/transactions_trans_date_is_2017-01-05.tsv' With CSV DELIMITER E'\t' null as '\N'; загрузка COPY transactions (a, b, c) FROM '/tmp/transactions_trans_date_is_2017-01-05.tsv'; подскажите, что не так?

Версии пг на источнике и приемнике какие?

Версии пг на источнике и приемнике какие?

соответственно 9.6.3 и 9.6.2

Может посмотреть в сторону кодировок и локалей самой бд?

Encoding и Collate

Может посмотреть в сторону кодировок и локалей самой бд?

этот же файл в ту самую базу грузит норм, значит дело и правда в чем-то таком, буду смотреть

Ну просто через psql -l сравните два кластера БД.

Если разницы нет, то копать в сторону создания самого дампа.

Ну просто через psql -l сравните два кластера БД.

да, никакой разницы, может в версии дело? файл грузит в базу источник то нормально, значит нормальный дамп

Для одной мажорной версии разницы нет.

всем привет, выгружаю через Copy дамп записей, потом загружаю в таблицу на другом сервере, выдает ошибку с кодировкой типа ERROR: invalid byte sequence for encoding "UTF8": 0xc8 0x33 или другие коды, хотя везде utf8 выгрузка Copy (a, b, c from transactions where trans_date='2017-01-05') To '/tmp/transactions_trans_date_is_2017-01-05.tsv' With CSV DELIMITER E'\t' null as '\N'; загрузка COPY transactions (a, b, c) FROM '/tmp/transactions_trans_date_is_2017-01-05.tsv'; подскажите, что не так?

Первое, что приходит на ум - либо в выгрузке выкинуть параметры (with и далее), либо в загрузке эти параметры указать явно.

Первое, что приходит на ум - либо в выгрузке выкинуть параметры (with и далее), либо в загрузке эти параметры указать явно.

больше спасибо! проблема именно в этом была, а то что в базе источнико якобы норм загружало, то там та же ошибка была, но позже просто, ибо диск медленее сильно

Доброе утро, коллеги! Нужна помощь :) Два постгреса 9.5.5 в кластере на пэйсмейкере, бэкапы и журналу улетают в барман. Сегодня с утра зажмурился мастер, кластер перешел на стэндбай, запустился айпишник, запустился инстанс. А вот старый мастер не хочет становится стэндбаем, потерял хистори файл и журнал. Как такое может случится? Ошибка в логе:

между узлами WAL передаются потоковой репликацией

И главный вопрос. Как теперь консистентость то вернуть стэндаю )

https://postgrespro.ru/docs/postgresql/9.6/app-pgrewind

И главный вопрос. Как теперь консистентость то вернуть стэндаю )

Заново пересоздать реплику.

Ну вариант с бэйсбэкапом да, сразу в голову пришел. Но попробую сначала pg_rewind

Просто с ростом размера базы вариант становится всё менее привлекательным

Ну вариант с бэйсбэкапом да, сразу в голову пришел. Но попробую сначала pg_rewind

rewind не для всех случаев подходит.

не для всех конечно. Если не поможет то наливать заново pg_basebackup-ом

Спасибо, буду пробовать. Отпишусь по результатам

?