Да, но именно после этого появились ошибки

Может была настроена паника ядра при oom и после перезагрузки файловая система была не консистентна.

Да - там был ребут

Собственно на ребут я и среагировал

есть позитивный опыт использования xfs в убунте?

у меня очень позитивный опыт с xfs.

вот интересно как может быть "очень позитивный" опыт от ФС? Я понимаю негативный может быть (ну типа потерял данные по вине ФС). Но если ФС просто работает, то к этому и относишься как к чему-то стандартному

Это был единственный случай в моей практике - причем условия реально "специфические". А так - под СУБД oracle всегда xfs

xfs не дал же вам буст производительнсоти, скажчем на 30% в сравнении с ext4?

С xfs в ubuntu были проблемы. Но характер нагрузки другой - файловое хранилище на 100 млн файлов. Проблемы в том, что однажды пришёл oom и файловая система стала содержать ошибки

afaik, xfs сейчас единственная фс в ядре, которая умеет обрабатывать ошибки выделения памяти.

или он же не дает чего сверх гибкого по управлению в сравнению с ext4?

ну и сейчас xfs активно пилят в ядре, в отличие от ext4.

вот интересно как может быть "очень позитивный" опыт от ФС? Я понимаю негативный может быть (ну типа потерял данные по вине ФС). Но если ФС просто работает, то к этому и относишься как к чему-то стандартному

я уже выпше как-то писал: рабочий aio на xfs

или он же не дает чего сверх гибкого по управлению в сравнению с ext4?

Я знаю только преимущество с inode

aio да, наверное

Я знаю только преимущество с inode

динамическое выделение inode?

но вот если про Oracle вспоминать, я бы вообще предпочитал его на сырых девайсах держать

с vxvm или lvm это очень удобно и гибко

Да - можно на лету менять процент и соответсвенно максимальное количество inode

но вот если про Oracle вспоминать, я бы вообще предпочитал его на сырых девайсах держать

Не всегда надо "максимальную" производительность. Файловая база зачастую удобнее

ну не знаю RMAN + LVM что еще нужно?

за одно всякие леваки с шаловливыми ручками отрезаются

С xfs в ubuntu были проблемы. Но характер нагрузки другой - файловое хранилище на 100 млн файлов. Проблемы в том, что однажды пришёл oom и файловая система стала содержать ошибки

имхо, 100млн файлов - это вы что-то делаете не так с фс. вне зависимости от xfs/ext4.

но то моя специфика была

про преимущества: http://xfs.org/images/d/d1/Xfs-scalability-lca2012.pdf

с 14 слайда.

Да - там был ребут

так это не фс виновата, а вы ушатали :)

имхо, 100млн файлов - это вы что-то делаете не так с фс. вне зависимости от xfs/ext4.

Это наследство от разработчиков осталось. Не расчитывали они на такие объемы.

так это не фс виновата, а вы ушатали :)

ФС должна быть готова к подобным моментам. С ext4 небывало такого. Хотя ребуты на некоторых площадках бывали и разные - не только при панике ядра.

ФС должна быть готова к подобным моментам. С ext4 небывало такого. Хотя ребуты на некоторых площадках бывали и разные - не только при панике ядра.

ну так запустили бы xfs_repair, коль ошибки были.

В целом решили проблему. Сервер по прежнему на xfs

и фс не должна быть готова к тому что вы в какой-то момент нажмете reset. т.е. на выходе фс будет консистентна, но данные вы потеряете.

http://www.spinics.net/lists/xfs/msg41945.html

и фс не должна быть готова к тому что вы в какой-то момент нажмете reset. т.е. на выходе фс будет консистентна, но данные вы потеряете.

так это и есть "готова" ) главное чтобы консистентна осталась )

ФС должна быть готова к подобным моментам. С ext4 небывало такого. Хотя ребуты на некоторых площадках бывали и разные - не только при панике ядра.

"не бывало" или "не замечали"?

"не бывало" или "не замечали"?

Не бывало. Но похожих по количеству файлов серверов небыло. Опять же там, где xfs под oracle проблем не встречал

и на какой версии ядра это всё было? в районе 3.10 xfs сильно переделали и сейчас переделывают семимильными шагами. в 3.15 можно уже смело включать чексуммы для метаданных.

4.4.0-34-generic #53~14.04.1-Ubuntu SMP We

и на какой версии ядра это всё было? в районе 3.10 xfs сильно переделали и сейчас переделывают семимильными шагами. в 3.15 можно уже смело включать чексуммы для метаданных.

Ого, они решили вместо btrfs теперь xfs пилить?

Тогда наверное было что-то вроде 4.4.0-xx - но в целом 4.4

помогите ? делал pkill -f python, подозреваю что из-за этого `2016-08-30 21:07:25 UTC [14867-2] LOG: checkpointer process (PID 14896) was terminated by signal 9: Killed 2016-08-30 21:07:25 UTC [14867-3] LOG: terminating any other active server processes` `2016-08-30 21:07:27 UTC [29681-3] HINT: In a moment you should be able to reconnect to the database and repeat your command. 2016-08-30 21:07:41 UTC [14867-4] LOG: statistics collector process (PID 14900) was terminated by signal 9: Killed 2016-08-30 21:07:42 UTC [14867-5] LOG: all server processes terminated; reinitializing 2016-08-30 21:07:46 UTC [29743-1] LOG: database system was interrupted; last known up at 2016-08-30 20:35:50 UTC 2016-08-30 21:07:46 UTC [29743-2] LOG: database system was not properly shut down; automatic recovery in progress 2016-08-30 21:07:46 UTC [29743-3] LOG: redo starts at F5C/E90B5958`

а все заработало, фух ?

@blkmrkt http://i.imgur.com/EqjJAFf.png

видимо про вас, извините, написали :)

Идиот дба это хорошо

Dmitry привет

@blkmrkt http://i.imgur.com/EqjJAFf.png

?

Ура! Появился патч на ICU интеграцию. Надеюсь скоро адъ с локалями кончится.

Скучно жить

Ура! Появился патч на ICU интеграцию. Надеюсь скоро адъ с локалями кончится.

О чем речь, если не секрет? Траблы с psql под виндой?

Ура! Появился патч на ICU интеграцию. Надеюсь скоро адъ с локалями кончится.

@schors

А что?

О чем речь, если не секрет? Траблы с psql под виндой?

да нет, вообще любые манипуляции с текстом не в ASCII...

это и различные сортировки и функции типо upper, lower. Короче вот тут всё описанно: http://site.icu-project.org/

Ребят, а кто нибудь пробывал pgpool-II с вотчдогом пускать в двух разных ДЦ в Azure ? Интересует, насколько "поймет" Azure такое вот поднятие одного виртуального IP в разных дц ?

Или это можно как-то со стороны Azure настроить чтобы было переключение на другой IP в случае фейла ?

советую не использовать pgpool :D

http://www.pgpool.net/mantisbt/view.php?id=225

потеря коннекта с мастером приводит к сегфолту, только потому что в коде уж больно красиво было

я сам не хочу, заказчик настаивает.

мы в pgpro продолжаем сотрудничество с ms, скоро будет образ доступен, в первый заход с авто-бакапом

а второй заход как раз было про авто-файловер

скоро это когда ? :)

ну вот у нас сейлы бегают - скоро говорят :)

а то тут продакшн через 3-6 месяцев только

уже недели две как :)

ну через месяц-полтора будет автобакап - это точно

ну автобакап мы и сами настроить могем )

а автофейловер между двумя дц будет ? :)

или в рамках одного ? :)

в пределах одного пока :)

?

а второй заход как раз было про авто-файловер

а что-нибудь подобное случайно не делаете http://www.cubrid.org/manual/10_0/en/ha.html, чтоб не только в Azure ? )

Имхо это лучше в своём приложении закладывать.

А девы ему скажут, что закладывайте в бд

Когда уже модно станет перед бд mq ставить

Кому-то напарник для проживания во время pgconf.eu требуется? Рассматриваю варианты как отеля, так и AirBnB

Имхо это лучше в своём приложении закладывать.

В своем приложении нужно закладывать работу в recovery, а вот инструмент для автофейловера нужен, понятно что биллинг просто вот так взять и переткнуть нельзя, но есть достаточное количество проектов не критичных к потере данных за несколько секунд для которых это чуть более чем приемлемо и переход сначала в RO, а потом и восстановление мастера автоматом это достаточно неплохое решение.

@blkmrkt http://i.imgur.com/EqjJAFf.png

Гы. А это мог быть out of memory killer?

Гы. А это мог быть out of memory killer?

это тоже признак idiot DBA :)

вот это я пересрал конечно знатно

rc1 завтра выходит

Кому-то напарник для проживания во время pgconf.eu требуется? Рассматриваю варианты как отеля, так и AirBnB

а couchsurfing.com отменили чтоль?

а couchsurfing.com отменили чтоль?

А там одни участники конференции, ага

Коллеги, добрый день. Может кто то имел дело с полнотекстовым поиском на Иврите и остались словари?

Не смотрели этот словарь? http://extensions.openoffice.org/en/project/hebrew-he-spell-check-dictionary

Вот тут написано как установить OpenOffice словари. В разделе Hunspell. http://azakirov.blogspot.ru/2015/12/dictionaries-and-postgresql-fts.html

о, эту ссылку не видел. Спасибо большое

Ух ты

Rc 1

Круто

Я наверное зимой сапгрейджусь

Как раз будет ништяк

Коллеги, добрый день. Может кто то имел дело с полнотекстовым поиском на Иврите и остались словари?

халтуришь?