@pgsql
Terminator13.09.2018
11:22:23
11:22:23
@irc0p будет жить. Поприветствуем!
Илья13.09.2018
11:52:00
11:52:00
подскажите, пожалуйста, где почитать можно. Есть Citus с distributed_table. Есть желание отказаться от Citus и перетащить данные в одну базу Postgresql. Как правильно и наиболее быстро сделать можно?
Terminator13.09.2018
12:41:25
12:41:25
@kalloc будет жить. Поприветствуем!
Nikita13.09.2018
12:41:36
12:41:36
hi
GoogleNikita13.09.2018
12:42:04
12:42:04
скажите, изучаем тут asyncpg и видим что nested transaction делаются в отдельных коннектах
Artem13.09.2018
13:13:49
13:13:49
nested или autonomus ?
cудя по этим докам https://magicstack.github.io/asyncpg/current/api/index.html#asyncpg-api-transaction
все в одном коннекте происходит, тк оно работает через сейвпоинт
Nikita13.09.2018
13:18:41
13:18:41
cудя по этим докам https://magicstack.github.io/asyncpg/current/api/index.html#asyncpg-api-transaction
все в одном коннекте происходит, тк оно работает через сейвпоинт
это не позволяет наследовать read commited уровень изоляции в вложенной транзакцииAleksandr13.09.2018
13:20:01
13:20:01
Здравствуйте. Изучаю сейчас постгрес, и задался вопросом, есть база по месту занимает 330гб если делать pg_basebackup получаю 57гб. И собственно вопрос - откуда лишние 250гб получаются? Знаю что у ПГ идет версионирование записей (вроде бы так называется), делал запросы - вроде бы старых записей нету, автовакум делается регулярно.
Можете подсказать пожалуйста
Виктор13.09.2018
13:24:55
13:24:55
Бэкап оптимизирован под хранение.
Активная база с оглядкой на поиск, обновление и т.д.
Данные могут занимать больше места, плюс вспомогательные структуры, индексы и т.д.
Aleksandr13.09.2018
13:25:41
13:25:41
то есть такая ситуация вполне может быть?
Виктор13.09.2018
13:25:51
13:25:51
Да
Yaroslav13.09.2018
13:28:17
13:28:17
Здравствуйте. Изучаю сейчас постгрес, и задался вопросом, есть база по месту занимает 330гб если делать pg_basebackup получаю 57гб. И собственно вопрос - откуда лишние 250гб получаются? Знаю что у ПГ идет версионирование записей (вроде бы так называется), делал запросы - вроде бы старых записей нету, автовакум делается регулярно.
Нет, подождите!
Так pg_basebackup или всё же pg_dump?Aleksandr13.09.2018
13:28:46
13:28:46
pg_basebackup
GoogleYaroslav13.09.2018
13:31:48
13:31:48
pg_basebackup
Если не сжатый — проверьте размер pg_xlog / pg_wal. Но, вообще говоря, это бинарный backup, и (без чего-то необычного) такая ситуация не нормальна.Artem13.09.2018
13:33:34
13:33:34
это не позволяет наследовать read commited уровень изоляции в вложенной транзакции
там сейвпоинт, там нет никакой вложенной транзакции, постгрес их не умеетAleksandr13.09.2018
13:38:31
13:38:31
Если не сжатый — проверьте размер pg_xlog / pg_wal. Но, вообще говоря, это бинарный backup, и (без чего-то необычного) такая ситуация не нормальна.
забыл упомянуть архив сжатиый, таром + gzip и компрессией 3Yaroslav13.09.2018
13:39:58
13:39:58
забыл упомянуть архив сжатиый, таром + gzip и компрессией 3
А, тогда ясно (можете проверить, какой там размер без компрессии, впрочем).Aleksandr13.09.2018
13:40:27
13:40:27
просто досталось это все в наследство, вот сижую изучаю это все ?
Vladimir13.09.2018
14:22:06
14:22:06
Переосмыслил вчерашнюю статейку, переписал
https://habr.com/post/423097/
Думаю средничкам зайдёт
Darafei13.09.2018
14:25:13
14:25:13
а где все комментарии?
или вы их стёрли методом перевыкладывания почти того же самого заново?
Vladimir13.09.2018
14:28:21
14:28:21
Это новая
Yaroslav13.09.2018
14:44:43
14:44:43
Это новая
> SELECT length(regexp_replace(X,'[^A-ZА-ЯЁ]', '','g')) FROM table_6
Серьёзно? Языков, кроме английского и русского, в мире не существует? ;)Vladimir13.09.2018
14:45:49
14:45:49
Yaroslav13.09.2018
14:48:40
14:48:40
Что вы имеет ввиду ?
Я имею в виду то, что написал. Вопрос был:
> Как вычислить количество ЗАГЛАВНЫХ букв в строке с помощью SQL?
Полякам / грекам / тайцам и прочим следует пройти в известном направлении со своими заглавными буквами? ;)Vladimir13.09.2018
14:50:23
14:50:23
Terminator13.09.2018
14:53:13
14:53:13
Dima Semenyaka будет жить. Поприветствуем!
Yaroslav13.09.2018
14:53:33
14:53:33
Предложите сначала свою версию, а потом критикуйте
Я просто указал, что Ваше решение неверное.
И уж как-нибудь сам разберусь, что мне делать.
(Вы на code review так же себя ведёте, мне просто любопытно?)Nikita13.09.2018
14:54:35
14:54:35
https://gist.github.com/kalloc/4eed3c0416d789536e53402e8daa9ab0
вот примерно так
работает через savepoint
Vladimir13.09.2018
14:57:44
14:57:44
Stanislav13.09.2018
14:58:13
14:58:13
здравсвуйте, господа
подскажите можно ли в postgresql 9.5(ubuntu14)
без рестарта инстанса postgres перенести pg_xlog на другой диск?
GoogleArtem13.09.2018
14:59:43
14:59:43
работает через savepoint
так проблема в чем?
второй start был проигнорен, потом откатились на сейвпоинтNikita13.09.2018
15:00:52
15:00:52
Vladimir13.09.2018
15:00:53
15:00:53
Darafei13.09.2018
15:01:25
15:01:25
Буду рад если покажете как надо, я не разработчик даже
в какой ситуации вообще может понадобиться считать заглавные буквы?Vladimir13.09.2018
15:02:48
15:02:48
в какой ситуации вообще может понадобиться считать заглавные буквы?
Такой пример наиболее понятен и прост
2 в одном
Вытащить, ну и посчитать так ради примера lengthDarafei13.09.2018
15:03:54
15:03:54
Vitaly пока что придумался воркараунд через ST_DWithin(geom, geom, 0), он будет использовать индекс, хоть и чуть медленнее ST_Intersects
Mike Chuguniy13.09.2018
15:04:18
15:04:18
в какой ситуации вообще может понадобиться считать заглавные буквы?
Это у филологов надо спрашивать, на самом деле. Мимо меня что-то подобное пролетало, связанное с употреблением разных буковок и связанной с этим употреблением статистики.Vitaly13.09.2018
15:06:10
15:06:10
Darafei13.09.2018
15:06:39
15:06:39
Это у филологов надо спрашивать, на самом деле. Мимо меня что-то подобное пролетало, связанное с употреблением разных буковок и связанной с этим употреблением статистики.
ну, сделать что-то по n-граммам и нормализовать кейс перед этим - это да, бывает. но вот именно необходимости вызнать, заглавная буква или строчная пока не встречал.Vladimir13.09.2018
15:06:44
15:06:44
Это у филологов надо спрашивать, на самом деле. Мимо меня что-то подобное пролетало, связанное с употреблением разных буковок и связанной с этим употреблением статистики.
Во, и я юзал, чтоб понять верно ли название организаций забито
Или там initcap-ом отработали, по моему глупо задаваться вопросом «зачем»
Всякое бываетMike Chuguniy13.09.2018
15:07:51
15:07:51
Правильность названия проверять подсчётом количества заглавных буков?! о_О
Какая прелесть.
Vladimir13.09.2018
15:09:41
15:09:41
Странно что это все что вас задело))
Darafei13.09.2018
15:11:03
15:11:03
падлічым колькасць вялікіх літар у простай беларускай фразе:
18:09:13 [kom] > SELECT length(regexp_replace(X,'[^A-ZА-ЯЁ]', '','g')) FROM (select 'Піў ты сёння ці НЕ ПІЎ?'::text x) as a;
┌────────┐
│ length │
├────────┤
│ 4 │
└────────┘
Vladimir13.09.2018
15:11:42
15:11:42
падлічым колькасць вялікіх літар у простай беларускай фразе:
18:09:13 [kom] > SELECT length(regexp_replace(X,'[^A-ZА-ЯЁ]', '','g')) FROM (select 'Піў ты сёння ці НЕ ПІЎ?'::text x) as a;
┌────────┐
│ length │
├────────┤
│ 4 │
└────────┘
Там же конкретная строка, статья не для таких матёрых как выDarafei13.09.2018
15:12:20
15:12:20
так не надо людей плохому учить, в этой отрасли брак дорого обходится
GoogleMike Chuguniy13.09.2018
15:12:25
15:12:25
Переосмыслил вчерашнюю статейку, переписал
https://habr.com/post/423097/
Думаю средничкам зайдёт
> типичные рабочие моменты и тонкости
ТИПИЧНЫЕ - это когда по стандарту, закону и прочим задокументированным в юридическом порядке указивкам. Всё остальное - это свободный полёт мысли маразматирующих умов (с) наш препод по культурологии.Vladimir13.09.2018
15:13:30
15:13:30
так не надо людей плохому учить, в этой отрасли брак дорого обходится
Все пустой треп, пока вы не покажете как надо.
Напишите пожалуйста. Я поправлюMike Chuguniy13.09.2018
15:14:14
15:14:14
Все пустой треп, пока вы не покажете как надо.
Напишите пожалуйста. Я поправлю
Этот вопрос в своей постановке неверен. Соответственно, ответ такой жеИ сам он ни в одном глазу не типичный. Даже рядом с типичными не стоял.
Darafei13.09.2018
15:15:58
15:15:58
Все пустой треп, пока вы не покажете как надо.
Напишите пожалуйста. Я поправлю
давайте начнём с простого: что такое заглавная буква?Mike Chuguniy13.09.2018
15:17:29
15:17:29
давайте начнём с простого: что такое заглавная буква?
В лингвистическом смысле, или с точки зрения набора кодов?Darafei13.09.2018
15:19:00
15:19:00
Как вычислить количество ЗАГЛАВНЫХ букв в строке с помощью SQL?
это тот вопрос, который был поставлен
Yaroslav13.09.2018
15:19:32
15:19:32
И сам он ни в одном глазу не типичный. Даже рядом с типичными не стоял.
Вот-вот. И это общая проблема статьи, IMHO.Mike Chuguniy13.09.2018
15:20:11
15:20:11
Общая проблема и самой статьи, и ей подобгых - их существование.
Darafei13.09.2018
15:22:05
15:22:05
Все пустой треп, пока вы не покажете как надо.
Напишите пожалуйста. Я поправлю
вот например вот эта буква, она заглавная?
ﺽVladimir13.09.2018
15:22:40
15:22:40
вот например вот эта буква, она заглавная?
ﺽ
Я вас понял, у меня было раньше по другому, зачем-то стёрА вы уже заминусовать успели
Поправил
Yaroslav13.09.2018
15:26:50
15:26:50
вот например вот эта буква, она заглавная?
ﺽ
Эта?
SELECT U&'\FEBD';
Ни заглавная, ни строчная, если верить unicode tables. ;)vlade1111513.09.2018
15:30:58
15:30:58
В юникоде нет букв.
Darafei13.09.2018
15:32:22
15:32:22
vlade1111513.09.2018
15:33:06
15:33:06
Лучше сразу в эмодзи считать.
Darafei13.09.2018
15:33:57
15:33:57
вообще, это обсуждение напомнило мне список того, во что программисты верят при хранении адреса:
https://www.mjt.me.uk/posts/falsehoods-programmers-believe-about-addresses/
vlade1111513.09.2018
15:35:05
15:35:05
Видел подобное но про заблуждения с кодировками и юникодом в целом.
Google
Сергей13.09.2018
15:37:14
15:37:14
vlade1111513.09.2018
15:38:04
15:38:04
https://www.joelonsoftware.com/2003/10/08/the-absolute-minimum-every-software-developer-absolutely-positively-must-know-about-unicode-and-character-sets-no-excuses/
Anton [Mgn, az09@osm]13.09.2018
17:39:47
17:39:47
и кастати всем FF!
vlade1111513.09.2018
17:40:13
17:40:13
https://blog.emojipedia.org/fun-emoji-hacks/
Anton [Mgn, az09@osm]13.09.2018
17:43:44
17:43:44
ладно, с эмодзи это шутка. но у меня есть реальный юзкейс - определить на каком языке лежит строка в поле таблицы. хотя бы наборы символов. на SQL
статью не читал. но если на собеседе такой вопрос возникнет то я пропал)
Открыть в Telegram