@pgsql
Максим31.08.2018
16:01:03
16:01:03
Спасибо вам
https://postgrespro.ru/education/courses
Там и видео и слайды с заметками
Да, вот уже листаю на ютубе)
Vadim31.08.2018
16:33:00
16:33:00
Господа, а нет ли противоположенности /*NO LOAD BALANCE*/ у ПгПула? Нужно конкретный селект принудительно на стэндбай отправить, не отправляя другие селекты туда
Посмотри white и black lists. Через них можно управлять функциями. Оберни sql в функцию и добавь в конфигурации pgpoolGoogle
Alexander31.08.2018
16:39:44
16:39:44
Посмотри white и black lists. Через них можно управлять функциями. Оберни sql в функцию и добавь в конфигурации pgpool
Да там в том и проблема, что в функцию очень не хотелось бы оборачивать. Много плавающих предикатов(Nikita31.08.2018
16:47:07
16:47:07
Да там в том и проблема, что в функцию очень не хотелось бы оборачивать. Много плавающих предикатов(
Зашить в приложении адрес слейва для этого запроса нельзя?Если он один такой
Denis31.08.2018
18:20:15
18:20:15
Всем привет! На новой работе требуют умение работать с этой СУБД. Ранее имел не плохой опыт по работе с MySQL.
Подскажите, пожалуйста, с чего начать? Что почитать? Может есть какие то статьи/видео по краткому описанию:
- утилиты командной строки;
- типы данных;
- особенности работы(было бы отлично получить отличия от MySQL);
- список фич, которых нет в мускуле;
- конфигурирование.
Я понимаю, что "Гугл в помощь", но с английским не оч, а найти что то толковое ( типа записок Postgres DBA) не получается
Оф доки постгри есть на рус просто выбираешь язык все хорошо описано прям на оф сайте
Andrey31.08.2018
19:47:02
19:47:02
Ребят, вопрос достаточно тупой.
Когда идет инсерт множества строк в базу, начинает жраться память. Как этого избежать?
Хватит ли вставки commit раз в N строк?
Nikita31.08.2018
19:48:35
19:48:35
Andrey31.08.2018
19:49:22
19:49:22
Да
А правильно ли я понимаю что все что идет внутри 1 инсерта, должно помещаться в память и ни в какие темповые таблицы на диске не кладется никогда?Nikita31.08.2018
19:49:39
19:49:39
Кладётся, зависит от настроек
Yaroslav31.08.2018
19:50:05
19:50:05
А правильно ли я понимаю что все что идет внутри 1 инсерта, должно помещаться в память и ни в какие темповые таблицы на диске не кладется никогда?
Нет, совсем не так.
> начинает жраться память.
Где? Каким процессом?Andrey31.08.2018
19:50:16
19:50:16
ну postgres: %username% INSERT
Yaroslav31.08.2018
19:51:30
19:51:30
процессом коннекта юзера
Backend-ом, то есть (тем, который Вы видите в pg_stat_activity, для ясности)?
А вставляете как? И как использование памяти смотрите?Andrey31.08.2018
19:52:21
19:52:21
Backend-ом, то есть (тем, который Вы видите в pg_stat_activity, для ясности)?
А вставляете как? И как использование памяти смотрите?
да, им.
Вставка идет запросом INSERT с большим количеством VALUES. Ну т.е. это не много инсертов, а один с множеством строкGoogleYaroslav31.08.2018
19:53:12
19:53:12
да, им.
Вставка идет запросом INSERT с большим количеством VALUES. Ну т.е. это не много инсертов, а один с множеством строк
Ну вот поэтому память и "жрётся". Parser вообще "жадный" в этом плане.Andrey31.08.2018
19:53:41
19:53:41
Ну вот поэтому память и "жрётся". Parser вообще "жадный" в этом плане.
Т.е. 100500 запросов будет теоретически экономнее по памяти?Yaroslav31.08.2018
19:55:34
19:55:34
Т.е. 100500 запросов будет теоретически экономнее по памяти?
Да, конечно. Но Вы, по-моему, вообще не туда смотрите. :)
Каким API или клиентом Вы для этого пользуетесь? Посмотрите, есть ли там поддержка COPY. Если есть, используйте.Andrey31.08.2018
19:55:57
19:55:57
Yaroslav31.08.2018
19:57:22
19:57:22
Я юзаю jdbc ?♂️
(Быстро погуглил) Вот это похоже на поддержку: https://jdbc.postgresql.org/documentation/publicapi/org/postgresql/copy/PGCopyInputStream.htmlAndrey31.08.2018
19:59:45
19:59:45
(Быстро погуглил) Вот это похоже на поддержку: https://jdbc.postgresql.org/documentation/publicapi/org/postgresql/copy/PGCopyInputStream.html
да тут все сложнее. Это все дело вываливается из спарка, да еще и пишу все это не я. Но вектор поисков понял, спасибо!Yaroslav31.08.2018
20:02:51
20:02:51
да тут все сложнее. Это все дело вываливается из спарка, да еще и пишу все это не я. Но вектор поисков понял, спасибо!
Тем не менее, если Вам нужно быстро и много вставлять, COPY vs INSERT — это небо и земля. :)
Можно, конечно, исполнять шаманские "танцы" с INSERT (см. https://www.depesz.com/2007/07/05/how-to-insert-data-to-database-as-fast-as-possible/ , например). Но всё равно будет хуже.
Let Eat31.08.2018
21:47:43
21:47:43
там нет поддержки Azure, только AWS
https://github.com/wal-g/wal-g/issues/9
Кажется minio умел притворятся S3 с одного конца и говорить с azure с другого
Roman31.08.2018
21:52:57
21:52:57
Кажется minio умел притворятся S3 с одного конца и говорить с azure с другого
Но лучше не использовать minioLet Eat31.08.2018
22:04:19
22:04:19
Почему? Оно ж у себя ничего не хранит в таком режиме https://docs.minio.io/docs/minio-gateway-for-azure
Vasiliy31.08.2018
22:44:00
22:44:00
Почему? Оно ж у себя ничего не хранит в таком режиме https://docs.minio.io/docs/minio-gateway-for-azure
например по этой причине: https://github.com/minio/minio/issues/6338 ?
Tim01.09.2018
07:13:12
07:13:12
Кажется minio умел притворятся S3 с одного конца и говорить с azure с другого
у меня вот такое решение придумалось для запуска wal-e со standby
https://github.com/wal-e/wal-e/pull/407
вроде бы работает
Terminator01.09.2018
08:20:07
08:20:07
@Alex0847 будет жить. Поприветствуем!
IGOR01.09.2018
13:28:03
13:28:03
Ребята, почему у меня постгре не ест оперативку? Виртуалка на 40 Гб. Настройки от pgtune. Жрет 4 Гб и все! Используется для 1С который стоит на ней же. Запускаем 5 баз комплексной конфигурации "тестирование и исправление" Памагити!!!!
Darafei01.09.2018
13:29:50
13:29:50
а почему он должен есть оперативку?
Anton01.09.2018
14:11:03
14:11:03
4гб - как будто ограничение 32 бит
Darafei01.09.2018
14:18:51
14:18:51
виндовз?
Olexande01.09.2018
14:34:07
14:34:07
Ребята, почему у меня постгре не ест оперативку? Виртуалка на 40 Гб. Настройки от pgtune. Жрет 4 Гб и все! Используется для 1С который стоит на ней же. Запускаем 5 баз комплексной конфигурации "тестирование и исправление" Памагити!!!!
Размер баз?.. Битность / разрядность postgre?.. Конфиги где?.. "Типовой план запросов"?.. Может все таки хватает?..
Vladimir01.09.2018
14:49:28
14:49:28
Всем привет. подскажите как лучше устанавливать постгрес на линукс? достаточно ли установить pqAdmin? или же нужно сначала установить постгрес, допустим 10 версии, а уже потом админа?
IGOR01.09.2018
14:50:06
14:50:06
Размер баз?.. Битность / разрядность postgre?.. Конфиги где?.. "Типовой план запросов"?.. Может все таки хватает?..
1) 90гби 70+Гб
2) 64
3) несовсем понял где
4) опять не понял
5) может но странно
Сервак HP
На Dell все збс. Всю память жретGoogleOlexande01.09.2018
14:52:25
14:52:25
3 имел в виду что Вы "накрутили" в настройках postgre - его конфиг от типового чем отличается?
Ilya01.09.2018
14:52:33
14:52:33
Olexande01.09.2018
14:53:42
14:53:42
4 план запроса - "расшифровка" что делал сервер, как "данные искал, объединял, где думал"...
Может все данные "попали в кеш" и все ок?..
Опять же на это ответит план запросов ...
MikaelBox01.09.2018
14:57:31
14:57:31
Всем привет. подскажите как лучше устанавливать постгрес на линукс? достаточно ли установить pqAdmin? или же нужно сначала установить постгрес, допустим 10 версии, а уже потом админа?
Если вам нужны средства управления, то pgAdmin, если сервер, то ставьте сам постгри
elfiki01.09.2018
15:10:33
15:10:33
пацаны, а в чем разница в использовании последовательностей для инкремента и serial?
ну кроме того, что с последовательностью можно веселиться и в разных таблицах одну и ту же использовать
MikaelBox01.09.2018
15:11:33
15:11:33
Сиквенс и счётчик?
elfiki01.09.2018
15:12:59
15:12:59
sequence ага
MikaelBox01.09.2018
15:19:01
15:19:01
Счётчик в таблице это счётчик в таблице, а сиквенс более гибкий и позволяет организовать хитрые последовательности, в том числе и зацикливающиеся. В том числе нет привязки к конкретной таблице. Если грубо, то это отвязанный от таблицы счётчик
elfiki01.09.2018
15:25:36
15:25:36
это я понимаю. а кроме дополнительные возможностей какие есть плюсы-минусы-подводные камни?
MikaelBox01.09.2018
15:32:21
15:32:21
да какие там подводные камни? ))
Mike Chuguniy01.09.2018
15:34:04
15:34:04
Всем привет. подскажите как лучше устанавливать постгрес на линукс? достаточно ли установить pqAdmin? или же нужно сначала установить постгрес, допустим 10 версии, а уже потом админа?
постгрес на линукс надо устанавливать так, как описано на соответствующей дистрибутиву страничке ОФИЦИАЛЬНОЙ документации по ПОСТГРЕС-у.А чтобы было совсем понятно, иных средства управления экземпляром, кроме правки конфигов непосредственно на сервере с помощью системного текстового редактора и системныз команд перечитывания конфигурации и/или перезапуска экземпляпа ПГ нет и неизвестно.
Terminator01.09.2018
15:57:18
15:57:18
@yoldarz будет жить. Поприветствуем!
@KensayKavi будет жить. Поприветствуем!
Богдан01.09.2018
18:36:43
18:36:43
Господа, а не подскажите с задачкой, я как бы ее решил, но может есть лучшее решение?
Получить список айпи, с которых постило несколько разных авторов. Нужно вывести айпи и user_id
SELECT ip,
user_id
FROM (
SELECT ip,
user_id,
COUNT(*) OVER (PARTITION BY ip) AS count
FROM (
SELECT DISTINCT ip, user_id FROM posts
) tt
) tt
WHERE count > 1
ORDER BY ip,
user_id
https://www.db-fiddle.com/f/5geJ3AzxorVNmBGSzzsUFk/1
Google
Denis01.09.2018
18:58:38
18:58:38
вот так еще можно:
SELECT DISTINCT ip, user_id
FROM posts p
WHERE EXISTS (
SELECT 1 FROM posts
WHERE ip = p.ip AND user_id <> p.user_id
)
https://www.db-fiddle.com/f/senbAj85A1XHJ135zP9CNi/2
Terminator01.09.2018
22:14:51
22:14:51
@dergudzon будет жить. Поприветствуем!
Dmitrii01.09.2018
23:03:50
23:03:50
Вопрос не совсем по постгресу — имеет ли смысл хранить PEM сертификат в базе? Или хватит только serial и прочей мета информации? Сам сертификат без пассфразы — что-то запихивать его туда не особо хочется.
Alexander02.09.2018
00:02:39
00:02:39
Сертификату пароль не нужен. Он нужен для ключа
то есть для приватной части
Dmitrii02.09.2018
00:37:30
00:37:30
Сертификату пароль не нужен. Он нужен для ключа
А еще такой вопрос тогда. У меня при импорте в Chrome показывает чтов цепочке только один сертификат (выписаный) никаких корневых нету, и вот DN не подхватывается на вебсервереГде может быть ошибка?
Alexander02.09.2018
00:43:21
00:43:21
Значит, надо вместе с сертификатом хранить и тот, которым он подписан. Свой сертификат должен идти первым
И соотвественно отдавать их браузеру так же
А что за импорт в Chrome?
Dmitrii02.09.2018
00:45:33
00:45:33
Ну в настройках Advanced есть SSL/Certificates
Тамможно своих сертов понавтыкать
Alexander02.09.2018
00:46:58
00:46:58
Ну, OK! нет корневого сертификата и ладно. Браузер просто будет показывать, что не доверяет этому сертификату, но SSL/TLS шифрование будет все равно
Речь о самоподписанном сертификате?
Dmitrii02.09.2018
00:47:48
00:47:48
Ну, OK! нет корневого сертификата и ладно. Браузер просто будет показывать, что не доверяет этому сертификату, но SSL/TLS шифрование будет все равно
Не, ты сейчас путаешь клиентский сертификат и sslЯ пытаюсь испечь клиентский
Alexander02.09.2018
00:48:44
00:48:44
А!
Dmitrii02.09.2018
00:48:58
00:48:58
Попытался экспортировать пемку их двух сертов (корневик и мой) в pkcs12 и все равно отображает только мой
Alexander02.09.2018
00:57:07
00:57:07
Так он отображает тот, который и будет использовать. Разве не так?
GoogleDmitrii02.09.2018
01:01:31
01:01:31
Так он отображает тот, который и будет использовать. Разве не так?
Да, но почему у него в чейне нету корневого от которого он был создан? По типу как все SSL сертификаты?Alexander02.09.2018
01:01:54
01:01:54
Не знаю, к сожалению
Dmitrii02.09.2018
01:02:50
01:02:50
Я тут блин еще этот сертификат собираю из болтов и гаек (либой) не openssl а через ООП. Там столько всяких классов.. полюбому что-то пропустил ?
MikaelBox02.09.2018
04:39:08
04:39:08
SELECT ip,
user_id
FROM (
SELECT ip,
user_id,
COUNT(*) OVER (PARTITION BY ip) AS count
FROM (
SELECT DISTINCT ip, user_id FROM posts
) tt
) tt
WHERE count > 1
ORDER BY ip,
user_id
with cte as (
select
ip,
user_id,
row_number() over(partition by ip) rn
from
posts
)
select distinct
ip,
user_id
from
cte
where
rn > 1
order by
1Terminator02.09.2018
09:56:19
09:56:19
@andrik312 будет жить. Поприветствуем!
G702.09.2018
09:56:49
09:56:49
Всем привет! Кто сможет подсказать , где можно купить клиентские базы производителей товаров и продукции?
Открыть в Telegram