Даже уже так пытался

Хорошо, а теперь покажите, как Вы вызываете psql, чтобы подключиться.

Покажите \d таблицы, запрос и план ( EXPLAIN (ANALYZE, BUFFERS) SELECT ... ), для начала.

я даже начал подумывать что ему не хватает привелегий и добавил sudo)

sudo su postgres

с паролем нет

А пароль точно тот? А в логе PostgreSQL что?

да по нескольку раз зашёл и через sql комманду и через \password поменял на test. Без флага -host заходит с паролем, а с флагом нет

> Без флага -host заходит с паролем А ведь не должен, если я правильно вижу. Вы точно делали reload после последнего изменения pg_hba?

день добрый. А как можно в Postgree в процедуре сделать commit через каждые 100 записей во вставке? Я делаю инсетрт большого кол -ва записей и хочу чтобы каждые 100 комитились.

А как в этом цикле промежуточный комит поставить через каждые 100 записей? begin for i in 1..1000000 loop insert into markcontrol.test_table (id, fam, nam, otc, drg, sn, nomer) values (nextval('markcontrol.seq_test'), substr(upper(md5(random()::text)),1,30), substr(upper(md5(random()::text)),1,30), substr(upper(md5(random()::text)),1,30), current_date, substr(upper(md5(random()::text)),1,2), trunc(random()*999999999999) ); end loop; end;

Ручками

Недавно был точно такой же вопрос.

Недавно был точно такой же вопрос.

почему3 так плохо все в postgree? ((((

Погодите. Это же были вы ))

да и меня это сильно возмущает. Поставлю вопрос по другому как быстро проинсертить миллиард записей в таблицу?

Убрать индексы, триггера. Потом сделать \copy.

да по нескольку раз зашёл и через sql комманду и через \password поменял на test. Без флага -host заходит с паролем, а с флагом нет

да и меня это сильно возмущает. Поставлю вопрос по другому как быстро проинсертить миллиард записей в таблицу?

почему3 так плохо все в postgree? ((((

Вы можете логи посмотреть? И выкладывать не screenshots...

Хотелось бы промежуточный комит чтобы посмотреть сколько положил и оценить время

Просто инсертите) дамп заливаете, копи, или выражением каким-либо

Где?

В логах PostgreSQL. SHOW data_directory; SHOW log_directory;

Вариантов много, как это сделать. Начиная с автономных транзакций заканчивая скриптом на баше.

https://gist.github.com/Free-cat/90d885bca2f18268135fb356ce3d881e

к запросу особо претензий нет. он непростой для базы, поэтому и время солидное. тут нужно пробовать использовать параллельность (какая у вас версия Pg, кстати?), ускорять диски

к запросу особо претензий нет. он непростой для базы, поэтому и время солидное. тут нужно пробовать использовать параллельность (какая у вас версия Pg, кстати?), ускорять диски

к запросу особо претензий нет. он непростой для базы, поэтому и время солидное. тут нужно пробовать использовать параллельность (какая у вас версия Pg, кстати?), ускорять диски

В логах PostgreSQL. SHOW data_directory; SHOW log_directory;

9.4

Я незнаю какой конкретно лог нужен

insert into tablse select sn from generate_series(1,1000000000) as sn

#!/usr/bin/env bash DB="-h 127.0.0.1 -p 9001 -U postgres" psql -c "create table test(id bigint);" $DB for i in {0..1000}; do psql -c "insert into test select sn from generate_series(1, 1000000) as sn" $DB done;

в этом случае он будет по 1000 commit делать? Я правильно понял?

Я же Вам писал, как логи найти... Ещё "SHOW logging_collector;"

Каждые миллион записей.

Хотелось бы промежуточный комит чтобы посмотреть сколько положил и оценить время

Каждые миллион записей.

Логи то нашёл но не знаю как их прочесть, если они в двоичном виде... как всё запущено

в этом случае уникальность sn в данной таблице теряется?

Сделайте bigserial, или генерируйте id в bash.

Нет, не нашли. Покажите вывод трёх statements, которые я Вам давал.

извините меня невежду , а что такое bash ?

/var/lib/postgresql/9.5/main/base/16384 - путь к бд /var/lib/postgresql/9.5/main/ - data_directory pg_log - log_directory

Я что-то не вижу pg_log на Вашем screenshot... Поэтому я и давал 3-й запрос (может, у Вас collector выключен, и логи идут куда-то ещё).

скорее всего выключен, потому что там была ошибка ERROR: syntax error at or near "logging_collector" LINE 2: SHOW logging_collector;

В любом скриптовом языке напишите, если bash вам незнаком. Можно ещё сгенерировать пачки INSERT прямо в psql: \o inserts.sql select format("insert into test select sn from generate_series(...)", ...) from generate_series(1, 1000); \i inserts.sql

Нет тут ошибки, Вы что-то неправильно ввели.

Я сдаюсь.

Это прям в pg_admin можно сделать?

Это прям в pg_admin можно сделать?

судя по расположению конфига, логи могут оказаться в /var/log/postgresql/

Вот вам ещё вариант, который можно прямо в pgadmin запустить: do $$ declare i integer; begin for i in 1 .. 1000 loop insert into test select n from generate_series(1, 1000000) n; raise warning '% total rows inserted', i*1000000; end loop; end; $$ language plpgsql;

спасибо

Не думаю что такие ошибки складываются в main.log. Я заново попробовал подконнектится и ошибки в логи не записались

А сам лог Вы нашли, всё-таки? И вообще, выложите полный pg_hba.conf на какой-нибудь paste site, сколько можно screenshot-ов... :(

А сам лог Вы нашли, всё-таки? И вообще, выложите полный pg_hba.conf на какой-нибудь paste site, сколько можно screenshot-ов... :(

:D Да там кроме тех строчек ничего и нет

А "psql -U postgres -d postgres -h 127.0.0.1" даёт тот же результат? А пароль Вы как меняли? Может, ещё раз попробуете (с помощью "\password")?

даже если укажу конкретного юзера \password bot тот же результат

Да причём тут bot?! Вы же под postgres подключаетесь.

sudo -u postgres

sudo -u postgres

Найс совет. Я тут целые сутки мучаюсь

И, казалось бы, всё правильно... только не работает. ;) А "SHOW listen_addresses;" что показывает? А "SELECT * FROM pg_authid WHERE rolname = 'postgres';" что выдаёт?

И, казалось бы, всё правильно... только не работает. ;) А "SHOW listen_addresses;" что показывает? А "SELECT * FROM pg_authid WHERE rolname = 'postgres';" что выдаёт?

И, казалось бы, всё правильно... только не работает. ;) А "SHOW listen_addresses;" что показывает? А "SELECT * FROM pg_authid WHERE rolname = 'postgres';" что выдаёт?

И, казалось бы, всё правильно... только не работает. ;) А "SHOW listen_addresses;" что показывает? А "SELECT * FROM pg_authid WHERE rolname = 'postgres';" что выдаёт?

Пароль в md5

А если listen_addresses временно поставить в "*"? Вообще это было бы странно (кривой resolving "localhost")... но, вроде, тоже бывает. Вы, кстати, на 100% уверены, что это именно тот pg_hba.conf и т.д. и т.п.? А то бывает, что долго мучаются, а потом выясняется, что настраивали-то не тот кластер PostgreSQL. ;(

j_j