ключевое тут, конечно, первое

Совпадает с моими ожиданиями. Спасибо, буду иметь в виду.

за очень дешево по железу можно развернуть greenplum на машинках OVH DO-32 в FRA (50eur/month за шард) и там же рядом можно собрать мастера за копейки хоть на облаке (регион подходит только этот, так как там гигабит в комплекте) за ~150eur/month можно крутить почти 1.5ТБ данных достаточно резво

Аналитикам вы реплику там подняли, да?

Greenplum через самописную шину. У меня под боком было немного ядер и памяти, пару m2 nvmeшек взяли и через райзеры доставили в сервера инфраструктуры.

так как у нас пока данных мало - еле подбираемся к 150gb, то пока такого хватит чтобы понять что аналитикам реально надо а как будем понимать - развернем уже нормально (m2 взяли десктопные intel 760p, райзеры - самые дешевые с али по 250 рублей) интерконнект между серверами у нас гигабитный, но можно для пары серверов организовать 10g для тестов OVH держу в голове как самый дешевый вариант поднять это на приемлемом железе и в более-менее серьёзном ДЦ

DO-32 у нас есть парочка - в WAW и FRA; я железки покрутил, тесты поделал и остался доволен Через vRack иперфом лезет 900+мбит (через 10g мы как-то поднимали реплику и там было 8.5gbit, но в Канаде) Диски стоят - интелы p3520

так как у нас пока данных мало - еле подбираемся к 150gb, то пока такого хватит чтобы понять что аналитикам реально надо а как будем понимать - развернем уже нормально (m2 взяли десктопные intel 760p, райзеры - самые дешевые с али по 250 рублей) интерконнект между серверами у нас гигабитный, но можно для пары серверов организовать 10g для тестов OVH держу в голове как самый дешевый вариант поднять это на приемлемом железе и в более-менее серьёзном ДЦ

Почему не clickhouse? Много особенностей?

Почему не clickhouse? Много особенностей?

Потому что аналитики любят SQL. А у кликхауса он своеобразный...

и Гринплам всё-таки постгрес в душе, при проблемах с ним (есть вера что) понятно с чего начинать хотя бы

и с Яндексом... Мы их файлуху тестировали. Elliptics. Это была феерия... С тех пор я не очень хочу с их продуктами связываться, честно :)

Да, есть такое. Я просто почему вспомнил, ваши 150г превратятся в нем в 15-20гб данных на диске. Ну и по аналитике он по некоторым факторам быстрее Грина

ну мы пока укладываемся в 1-2 секунды на -весь- дашборд в цеппелине

Аааа))) тогда у вас пока вообще нет проблем ??

именно)))

Мы просто сношаемся с clickhouse сейчас. Но данных поболе. От того и проблемы.

150gb - это планируемый объём, там миграцию ещё делают... Основные постгресы - три по ~350gb gp сейчас 2х63 занимает, но его ещё не обслуживали после заливки данных

Mayk будет жить. Поприветствуем!

подскажите в таблице было интовое поле id, я увеличил его до bigint но последовательность(sequence) которая автоинкрементирует это поле осталась с тем же интовым(2147483647) пределом. как его увеличить до bigint(9223372036854775807)?

если делать: ALTER SEQUENCE public.mytable_id_seq MAXVALUE 9223372036854775807; ругается что: MAXVALUE (9223372036854775807) выходит за пределы типа данных последовательности (integer).

если делать: ALTER SEQUENCE public.mytable_id_seq MAXVALUE 9223372036854775807; ругается что: MAXVALUE (9223372036854775807) выходит за пределы типа данных последовательности (integer).

ALTER SEQUENCE public.mytable_id_seq AS bigint ...;

ALTER SEQUENCE public.mytable_id_seq AS bigint ...;

о спс...

а как-то заставить накатывать wal до нужного времени можно? как бы с самого начала

Вот здесь есть различные recovery target https://www.postgresql.org/docs/9.6/static/recovery-target-settings.html

@WiCKed666 будет жить. Поприветствуем!

При подключении кстати psql -U postgres -h 127.0.0.1 логов нет от слова совсем. Это меня и пугает.

При подключении кстати psql -U postgres -h 127.0.0.1 логов нет от слова совсем. Это меня и пугает.

Так netstat показывает порт 5434. А postgres по умолчанию идёт на 5432

Так netstat показывает порт 5434. А postgres по умолчанию идёт на 5432

ненене. Все правильно. Вчера в череде своих изысканий, я поменяла порт подключения на не стандартный

ненене. Все правильно. Вчера в череде своих изысканий, я поменяла порт подключения на не стандартный

Тогда правильная команда должна выглядеть как psql -U postgres -h 127.0.0.1 -p 5434

Ну да, правильная команда конечно с портом должна быть, но вот у @KellyDink нету коннекта даже такого: nc -v 127.0.0.1 5434 Я прав?

Здесь порт не указан

Тогда правильная команда должна выглядеть как psql -U postgres -h 127.0.0.1 -p 5434

там вроде как при установке и подключении с локалхоста он запоминает алиасы и подключается по ним

Здесь порт не указан

ну я его на стандартный поменяла. 5432. и дождалась отлупа. Это достаточно долго происходит

а если -h ключ не указывать, то подключение проходит

и других ПК тоже подключение проходит.

а если -h ключ не указывать, то подключение проходит

потому что unix socket

Ещё раз, что выводит такая комагда nc -v 127.0.0.1 5434?

я проверяла сокеn в /var/run/postgres

и права на него. не знаю, где еще смотреть

Ещё раз, что выводит такая комагда nc -v 127.0.0.1 5434?

секунду.

и права на него. не знаю, где еще смотреть

А в pg_hba что прописано?)

А в pg_hba что прописано?)

Там до pg_hba даже не доходит

Запутался. Здесь у вас уже порт 5432.

Там до pg_hba даже не доходит

Мде? Если через сокет цепляется а через 127.0.0.1 нет разве не доходит?

Ещё раз, что выводит такая комагда nc -v 127.0.0.1 5434?

хм... у меня нет такого пакета. и врепозиториях не находит. сейчас я подключу сторонние дебиановские

netcat-traditional пакет

sudo tcpdump -i lo

Запутался. Здесь у вас уже порт 5432.

ну Выше мне написали, что он подключается по стандартному порту, я и изменила его обратно. и нетстат там вывела, чтобы быть не голословной

Ещё раз, что выводит такая комагда nc -v 127.0.0.1 5434?

так же безбожно виснет.

и с Яндексом... Мы их файлуху тестировали. Elliptics. Это была феерия... С тех пор я не очень хочу с их продуктами связываться, честно :)

Расскажите :) выглядела интересно, особенно в связке с cocaine, когда можно было что-то навроде joyent manta собрать, и даже для реалтайма, а не только аналитики

sudo tcpdump -i lo

@KellyDink сделайте это в соседней вкладке

он даже логи мне не пишет, что самое обидное. А если я прописываю стандартное listen_addresses='127.0.0.1', то служба не запускается вот с такой ошибкой

ip a

Расскажите :) выглядела интересно, особенно в связке с cocaine, когда можно было что-то навроде joyent manta собрать, и даже для реалтайма, а не только аналитики

Про эллиптикс?

@KellyDink а что выводит netstat -ln после сбойного запуска ПГ?

Про эллиптикс?

Да, эллиптикс

я кажется поняла...

Почему тут опять порт 5434?

Т.е. вы отредактировали конфиг и попытались перезапуститься, вывалились с ошибкой. Что после этого выдаёт netstat/ss?

Почему тут опять порт 5434?

это старые логи. выслала картинку для примера ошибки. Это единственная ошибка, которую я смогла выжать из постгреса.

ping 127.0.0.1 ?

Мде? Если через сокет цепляется а через 127.0.0.1 нет разве не доходит?

КОгда в логах тишина и симметрия, то да, не доходит. Потому что в противном случае в логе есть отлуп по pg_hba.conf

это старые логи. выслала картинку для примера ошибки. Это единственная ошибка, которую я смогла выжать из постгреса.

Эта ошибка говорит, что таки что-то или кто-то уже слушает порт на интерфейсе, соответственно, надо разбираться, кто слушает, почему слушает.

Эта ошибка говорит, что таки что-то или кто-то уже слушает порт на интерфейсе, соответственно, надо разбираться, кто слушает, почему слушает.

именно поэтому первым делом я полезла менять порты постгреса

@KellyDink сделайте следующиее: systemctl stop postgresql* ss -ntlp

@KellyDink у меня есть подозрения что вы постгрю под Astra Linux настраиваете

@KellyDink у меня есть подозрения что вы постгрю под Astra Linux настраиваете

Вас наименование машины на это навело?

видел в конфиге ранее от вас

@KellyDink сделайте следующиее: systemctl stop postgresql* ss -ntlp

секунду. Я тут все немного поламала

так или нет ?

видел в конфиге ранее от вас

да. под ней. Но я не использую мандатный доступ, а нулевые метки всем раздала, кому только можно

Посмотрите настройки фаерволла

Посмотрите настройки фаерволла

они чисты.

Посмотрите настройки фаерволла

Уже смотрели, там пусто. Т.е. так нам сказали...

Я к тому что под астрой дофига нюансов есть, я сам тогда за....лся настраивать. Ранее в одной организации пришлось иметь дело. Там могут не работать стандартные способы настроить постгрю.

Так ведь по дефолту они запрещают соединения. Создайте правило явно разрешающее

Попробуйте. Хуже не будет.

Блин. @KellyDink ещё раз: гасите постгрес. Проверяете в списке процессов его отсутствие, нетстатом - свободу порта, меняете настройку, стартуете. Если будет ругаться - вывод нетстат/сс сюда.

Короче @KellyDink проще будет поставить Centos/Debian/Ubuntu и за 5 минут все настроить

Если вы на AstraLinux столкнулись с проблемой, обычно это быстро не решается

в плане PostgreSQL

Если вы на AstraLinux столкнулись с проблемой, обычно это быстро не решается

Решается там всё. Правда доки покурить таки прийдется. да...

Решается там всё. Правда доки покурить таки прийдется. да...

Вы имели дело с настройкой PostgreSQL в Astra Linux ?

Тем более астрой люди не от хорошей жизни и/или желания поразвлечься по-настоящему пользоваться начинают. Тем более специальной редакцией с мандаторией.

Вы имели дело с настройкой PostgreSQL в Astra Linux ?

Причём в службе каталогов ALD

С мандаторией,

Больной ублюдок

шутка =)

Больной ублюдок

Насчёт ублюдка - это не есть правда, а вот больной - это таки да, и не только на всю головушку. ^)

Серьезно, я много проблем поимел в настройке постгри в Astra Linux. И да, если выбора нет, и нужно имено под астрой, тогда придется потрахатся))

Там бывало что проблема связана была не только с самой PostgreSQL, но и сетями, /etc/hosts/ и еще их ебучей службой безопасности, имя которой слава богу я забыл))