Где-то тут скорее всего оно и есть https://github.com/postgrespro/pg_query_state

ага, а на 9.6 не портировалось?

там еще есть проблемы с windows, не то что с 9.6 :)

ну, это ортогональные, всё же, проблемы :)

На 9.6 работает с master (либо PGPRO9_6) ветки, но последние изменения с исправлениями находятся в сборке pgpro 9.6. В репу позже изменения залью. @vadvmkn, ну и рекламу расширению ты создаёшь: подумаешь, под винду не собирается - плёвое дело исправить :)

=) у меня на линуксе не собрался, на pgpro_95 сборке

вы ветку PGPRO9_5 использовали?

да, но дело было вечером, сильно не заморачивался, попробовал патчи по одному применить, после того как на первом полезли ошибки понял что что-то делаю не так )

вы дистрибутив pgpro_95 используете?

патч runtime_explain.patch не применился?

судя по истории баша дальше patch procsignal.c custom_signals.patch я не дошел

=)

[branch "PGPRO9_5"] remote = origin merge = refs/heads/PGPRO9_5 из конфиг файла гита

[remote "origin"] url = https://github.com/postgrespro/pg_query_state.git fetch = +refs/heads/*:refs/remotes/origin/* [branch "master"] remote = origin merge = refs/heads/master

походу не ту ветку расширения брал

в дистрибутиве pgpro-9.5-beta уже есть это расширение как встроенное, если что

отлично! а есть планы сделать что-то подобное этому ? http://www.openscg.com/2015/02/postgresql-plpgsql-profiler сейчас его переписали на питоне, и по мне стало хуже, в итоге хотелось бы такого-же функционала как dbms_profiler в oracle или dbms_hprof

посоны у меня core_1 | App 56 stderr: 2016-10-11 12:09:16 - Sequel::DatabaseDisconnectError - PG::ConnectionBad:PQconsumeInput() server closed the connection unexpectedly core_1 | App 56 stderr: This probably means the server terminated abnormally core_1 | App 56 stderr: before or while processing the request. что с этим можно делать?

оно в докере и пока в дев

не знаю почему ломается - от докера или от sequel

сегфолтится, может

db_1 | STATEMENT: SELECT CONNECTION_ID() db_1 | ERROR: function connection_id() does not exist at character 8 db_1 | HINT: No function matches the given name and argument types. You might need to add explicit type casts.

может это

в логах пг

это не причина падения

это не причина падения

рандомно падает

В логах совсем ничего? если кроме stdout пишется еще и в файл, то его можно вытащить через docker cp даже в умершем контейнере

точно не OOM ?

точно не OOM ?

я прочитал как раз про ООМ

vm.overcommit_memory=2 попробуй

Коллеги из pgpro, а те события ожиданий что добавили в 9.6 в  (pg_stat_actitivity) это ваш pg_stat_wait ?

да, это бэграунд воркер, которой профайлит и ротейтит эти waits

А кто что использует для построения схем баз данных ? наблюдаю что некоторые тулы тип SQL Power Architect не очень корректно стали работать с 9.5/9.6 версией хотя с 9.3 работали нормально.

PGModeller

PGModeller

спасибо

Не за что... Там правда мне пришлось собирать из исходников, ибо за собранное он хочет денег... И собралось относительно странно - при работе с 9.5 часто крашит... С 9.6 пока не пробовал

Ну вот проверил - с 9.6 работать не хочет...

а научите меня патчи делать на постгрес мне tanh и cosh очень нужны

Да я вот думаю попробовать купить 10 баксов то не много

но если крашится =\

Да я вот думаю попробовать купить 10 баксов то не много

А за что отдавать, если можно самому собрать?

может оно более стабильно ? :)

да и на винде с сорцов собирать не хочется

Не за что... Там правда мне пришлось собирать из исходников, ибо за собранное он хочет денег... И собралось относительно странно - при работе с 9.5 часто крашит... С 9.6 пока не пробовал

Моделлер ставил из пакетов _postgresql.org. Навскидку работает. Там много чего есть. Сорцы моделлера блядские.

Моделлер ставил из пакетов _postgresql.org. Навскидку работает. Там много чего есть. Сорцы моделлера блядские.

Эм... а на postgresql.org есть PGModeller????

Был такой инструмент, Toad Data Modeller 2.25, ему лет 10 наверное, но работает до сих пор отлично

http://fishcodelib.com/Database.htm

Вообще можно порыть здесь: https://www.postgresql.org/download/products/1-administrationdevelopment-tools/

http://fishcodelib.com/Database.htm

Кривовато он схемы строит

1. Добавляем функцию во src/backend/utils/adt/float.c

а научите меня патчи делать на постгрес мне tanh и cosh очень нужны

упс 1. Добавляем функцию во src/backend/utils/adt/float.c 2. добавляем запись в pg_proc.h 3. тестируем, добавляем документации 4. ??? 5. Profit Для примера можно вот на этот патч посмотреть https://github.com/postgres/postgres/commit/e1bd684a34c11139a1bf4e5200c3bbe59a0fbfad

это софт со своим постгресом потом поставлять?

Ну тут про патч к постгресу спрашивали, так что да. А если нужно отдельно, то запихиваем всё то же самое в extension (он же contrib).

Всем добра! Кто нибудь решал сиё: http://www.sql.ru/forum/237482/unix-timestamp-pgsql-timestamp-vo-vremya-copy ?

Ну и наконец, если совсем-совсем не хочется писать, можно вот на это посмотреть. http://pgxn.org/dist/orafce/ и позаимствовать cosh и tanh у них

А чем обусловлено ограничение выполнять COPY только от SUPERUSER?

"COPY naming a file or command is only allowed to database superusers, since it allows reading or writing any file that the server has privileges to access."

можно обойти, используя psql'ный 'copy .. from ..

но надо учитываться что добавится время трансфера между psql и сервером еще

по сабжу топика, проще всего - действительно обработать через пайп седом каким-нибудь, как там уже предложили

особенно если задача одноразовая

мне нужно в хранимой функции

что именно вам нужно в хранимой функции?

и почему?

да, в постгресе очень убого с копи в таймстемп

ERROR: S client not available

А чем обусловлено ограничение выполнять COPY только от SUPERUSER?

copy можно от юзера выполнять. файлы читать может только суперюзер.

copy можно от юзера выполнять. файлы читать может только суперюзер.

Ну это и имелось ввиду. Чем обусловлено данное ограничение.

что именно вам нужно в хранимой функции?

нужно читать файлы.

Ну это и имелось ввиду. Чем обусловлено данное ограничение.

тем же, почему нельзя создавать экстеншены обычному пользователю

потому что copy '/etc/passwd' to table; - и ты знаешь хеши паролей на системе

а тебя только в базу пускали

если не только в базу - то ты суперюзер

эти примитивные кейсы безопасности и так понятны

ну так потому и нельзя

что ж неясного? :)

Ну и наконец, если совсем-совсем не хочется писать, можно вот на это посмотреть. http://pgxn.org/dist/orafce/ и позаимствовать cosh и tanh у них

ох, а если в ядро, то тангенс гиперболический без тестов на него не примут? :'(

хочется большего - например разрешение читать с определённых локейшинов. Т.е. например SUPERUSER выставил ALLOW COPY FROM '/var/data1,/var/data2,/var/data3' и все счастливы

хочется большего - например разрешение читать с определённых локейшинов. Т.е. например SUPERUSER выставил ALLOW COPY FROM '/var/data1,/var/data2,/var/data3' и все счастливы

а почему это не решается через stdin?

потому-что в функцию хочется передавать только имя файла с хранилища, а не поднимать файл на клиента (ну или в бекенде доп.логику рисовать для чтения файла и передачи в субд).

а хранилище на одном диске с базой? почему не FDW?

Alibek https://www.postgresql.org/docs/9.6/static/file-fdw.html

cat supertfile | psql -U user db -c "COPY temp_table from stdin"

os.system('ssh dbserver -c "cat supertfile | psql -U user db -c "COPY temp_table from stdin""')

хранилище смонтировано к серверу с базой, file-fdw - не подойдёт, файлов много и разных.

варианты с cat, psql и т.п. - костыли, непроизводительные.

эммм

через fdw быстре будет чем через cat и psql?

зато в одну строку и мейком пускается

а в чём глобальная разница в cat | psql copy и copy from '/...'?

Alibek вы это хотите сделать не костылём, а постоянным элементом системы, что ли? :)

а у вас на чем загрузка в базу?

у нас bash + python( с монги данные), мейком пускаюсь

ох, а если в ядро, то тангенс гиперболический без тестов на него не примут? :'(

ну тесты это всегда хорршо

у нас bash + python( с монги данные), мейком пускаюсь

у нас так же

и чтобы выкинуть питон оттуда, я уже очень долго хочу ts в unix time

но потом оказывается, что постгрес ещё и не всякие строки вот ест...

очень хочу выкинуть питон, но к монге из баша не походишь)