
nikoinlove
03.06.2016
09:21:11
много таблиц в mysql напрашивает mydumper

Sergey
03.06.2016
09:24:46
Разве на таких объёмах mysqldump ещё используют?

Architector
03.06.2016
09:30:28
почему нет? если таблицы шардены по пользователям, то как раз удобно бекапы делать по-пользователям.

nikoinlove
03.06.2016
09:33:19
пользователей шаред хостинга не волнуют консистентные бекапы обычно)

Google

Architector
03.06.2016
09:37:51
это вы на что намекаете?

Dmitry
03.06.2016
09:45:58
gtid
вроде как проще там все даже с дампом
при заливке дампа в пг никто не встречал такое
Cannot enlarge string buffer containing 0 bytes by 2064092892 more bytes.
?

Architector
03.06.2016
09:53:37
гтид к дампу же не имеет никакого отношения )

Dmitry
03.06.2016
09:54:25
с гтид можно делать —single-transaction
или независимо от?

Architector
03.06.2016
09:56:01
это никак не связанные вещи. гтид нужен для автопозиционирования репликации, а сингл-транзакшон - для консистентности бекапа транзакционных таблиц

Sergey
03.06.2016
09:58:53
пользователей шаред хостинга не волнуют консистентные бекапы обычно)
Да вопрос не про консистеность. Вопрос сколько времени это количество мелких табличек будет бекапиться. Файлами всяко быстрее. Да и объем, видимо, немаленький. Сколько сейчас средний размер базы на shared? Кажется, с засильем всяких монструозных CMS, должно быть мегабайт 100.

Navern
03.06.2016
09:59:30
я бы сказал скорее средний размер около гигабайта
точно не считал

Architector
03.06.2016
10:00:28
верно, большие объемы лучше xtrabackup делать, однако что потом делать если из него нужно вытащить одного клиента из тысяч?

Google

Sergey
03.06.2016
10:01:27

Architector
03.06.2016
10:01:44
каким это образом?
ипортирование тейблспейсов?

Sergey
03.06.2016
10:03:50
Да, метаданные там все равно лежат в общем файле.
Как вариант - можно просто mysql натравить на бекап и сделать тот же дамп только одного клиента. Но может есть способы лучше.

Architector
03.06.2016
10:06:00
на самом деле, если там где хранятся подготовленные xtrabackup-файлы есть возможность пускать этот бекап - то вынуть оттуда данные быстро - не представляется особой сложности

Dmitry
03.06.2016
10:06:11

Architector
03.06.2016
10:07:13
single-transaction можно было всегда делать, а гтид появился лишь в 5.6

Alexandr
06.06.2016
05:06:32
Доброе утро! А кто идет на DevConf на следующей неделе - http://devconf.ru/ru/schedule#storage там чумовая программа смотрю.. PostgreSQL vs MySQL vs Tarantool

Dmitriy
06.06.2016
05:11:22
лучше бы с енотом сравнивали
а, это не в одном докладе :)

Alexandr
06.06.2016
05:16:21
Да каждый кулик свое болото хвалит ? когда PostgreSQL завоюет мир - от представителя муськи странно слышать ?-

Al
06.06.2016
05:18:09

Dmitriy
06.06.2016
05:18:33
не знаю, чо-нить
просто сравнение мускуль вс постгрес вс тарантул, выглядит как сравнение базы данных с енотом
или с котом

Al
06.06.2016
05:22:43

Dmitry
06.06.2016
07:44:34
а будут все эти записи потом где то?
хотя бы за бабки

Google

Dasha
12.06.2016
22:20:55
Доброй ночи - ищем волонтеров на секцию Storage
http://devconf.ru/ru/schedule#storage

Dmitry
15.06.2016
12:08:03
есть ли какойто способ посмотреть что мускул свопит?

Square
15.06.2016
12:08:47
помоему тут собрались все такие некомпетенты как мы

Dmitry
15.06.2016
12:09:34
ненене

Square
15.06.2016
12:11:04
мне по мускулю больше помогли в чяте по плюсам :)
я сам все пытаюсб немного в дба углубиться... но слабовато. решил начать с того, что упражняюсь в заливке википедии и пытаюсь добитсья адекватной работоспособности - но как то пока не очень выходит. полнотекстовый индекс не работает
точней работает не так ка кдолжен

Dmitry
15.06.2016
12:13:27
полнотекстовый индекс мускуля?
просто обычно для этого сторонние штуки юзают
сфинкс там

Architector
15.06.2016
12:20:06
да, не очень идея использовать для полнотекстового поиска mysql

Dmitry
15.06.2016
12:25:04
не очень понятны опасности
что будет если мемлок
и оно там кончится
короче суть такая, отсыпали жирный innodb буфер, но мускул продолжает обильно кушать свопчик

Architector
15.06.2016
12:31:44
короче, используй memlock, настрой мониторинги, грамотно выдели пул под innodb

Dmitry
15.06.2016
12:35:23
"грамотно"
тут подробнее

Google

Dmitry
15.06.2016
12:35:33
сейчас там грубо говоря размер базы

Square
15.06.2016
12:38:48
у них там весь дамп мускульный

Architector
15.06.2016
13:02:08
https://dev.mysql.com/doc/refman/5.7/en/innodb-buffer-pool-resize.html

Dmitry
15.06.2016
13:04:23
надо еще зайцева почитать
что там пишуть

Navern
15.06.2016
13:56:06
Ну мож конечно чего не знаю, но навсеидку способа управлять этим из mysql не знаю

Dmitry
15.06.2016
13:56:57

Navern
15.06.2016
13:57:44
Фуллтекст + иннодб? И как? Быстро работает? По идее должно адово тормозить;) какой там датасет по размеру?

Dmitry
15.06.2016
13:58:45
фултекста там нету
база на шесть гигов

Anton
15.06.2016
13:59:10
.

Navern
15.06.2016
14:03:38
Так а значения сваппинесс какие? Пробовали ли их снижать?

Dmitry
15.06.2016
14:04:04
нет, все по дефолту
необходимости раньше не было
60, да

Navern
15.06.2016
14:07:39
60 это дефолтный, ну я бы сильно снизил. До 10 как уже говорил
Это помоему рекомендуют и в хай пердформанч майскуэль;)

Google

nikoinlove
15.06.2016
14:08:40
свап на сервере с базой это зло
обычно попадание в свап значит что все встает раком навсегда

Dmitry
15.06.2016
14:09:00
окей, это я понял
но, тогда вопрос

jatelka
15.06.2016
14:09:08
свап на сервере - это зло

Dmitry
15.06.2016
14:09:18
что будет когда кончится рама
и прийдет добрый оом
тупо мониторить раму и жать красную кнопку когда пройдут трешхолды?

nikoinlove
15.06.2016
14:10:30
он же не течет у тебя. ограничь его в памяти и все
это же не монга которая жрет не в себя)
прикинуть сколько он максимум может сожрать умеет mysqltuner

Dmitry
15.06.2016
14:12:21
он уже сказал
так, мне надо только обосновать memlock нормально

nikoinlove
15.06.2016
14:13:11
не надо тебе никакого мемлок

Navern
15.06.2016
14:13:21
и прийдет добрый оом
Ну оом чтото еще убьет, не?;) хоть оом и тормознутый. У тебя же скоры для бд настроены?

Dmitry
15.06.2016
14:13:47
да никто там не настраивал ) стоит мускул и стоит
он недавно начал нагружаться
ждут туда еще нагрузку

Navern
15.06.2016
14:14:11

Dmitry
15.06.2016
14:14:18
рпм (