@dba_ru

Страница 13 из 718
nikoinlove
03.06.2016
09:21:11
много таблиц в mysql напрашивает mydumper

Sergey
03.06.2016
09:24:46
Разве на таких объёмах mysqldump ещё используют?

Architector
03.06.2016
09:30:28
почему нет? если таблицы шардены по пользователям, то как раз удобно бекапы делать по-пользователям.

nikoinlove
03.06.2016
09:33:19
пользователей шаред хостинга не волнуют консистентные бекапы обычно)

Google
Architector
03.06.2016
09:37:51
это вы на что намекаете?

Dmitry
03.06.2016
09:45:58
gtid

вроде как проще там все даже с дампом

при заливке дампа в пг никто не встречал такое Cannot enlarge string buffer containing 0 bytes by 2064092892 more bytes.

?

Architector
03.06.2016
09:53:37
гтид к дампу же не имеет никакого отношения )

Dmitry
03.06.2016
09:54:25
с гтид можно делать —single-transaction

или независимо от?

Architector
03.06.2016
09:56:01
это никак не связанные вещи. гтид нужен для автопозиционирования репликации, а сингл-транзакшон - для консистентности бекапа транзакционных таблиц

Sergey
03.06.2016
09:58:53
пользователей шаред хостинга не волнуют консистентные бекапы обычно)
Да вопрос не про консистеность. Вопрос сколько времени это количество мелких табличек будет бекапиться. Файлами всяко быстрее. Да и объем, видимо, немаленький. Сколько сейчас средний размер базы на shared? Кажется, с засильем всяких монструозных CMS, должно быть мегабайт 100.

Navern
03.06.2016
09:59:30
я бы сказал скорее средний размер около гигабайта

точно не считал

Architector
03.06.2016
10:00:28
верно, большие объемы лучше xtrabackup делать, однако что потом делать если из него нужно вытащить одного клиента из тысяч?

Google
Architector
03.06.2016
10:01:44
каким это образом?

ипортирование тейблспейсов?

Sergey
03.06.2016
10:03:50
Да, метаданные там все равно лежат в общем файле.

Как вариант - можно просто mysql натравить на бекап и сделать тот же дамп только одного клиента. Но может есть способы лучше.

Architector
03.06.2016
10:06:00
на самом деле, если там где хранятся подготовленные xtrabackup-файлы есть возможность пускать этот бекап - то вынуть оттуда данные быстро - не представляется особой сложности

Architector
03.06.2016
10:07:13
single-transaction можно было всегда делать, а гтид появился лишь в 5.6

Alexandr
06.06.2016
05:06:32
Доброе утро! А кто идет на DevConf на следующей неделе - http://devconf.ru/ru/schedule#storage там чумовая программа смотрю.. PostgreSQL vs MySQL vs Tarantool

Dmitriy
06.06.2016
05:11:22
лучше бы с енотом сравнивали

а, это не в одном докладе :)

Alexandr
06.06.2016
05:16:21
Да каждый кулик свое болото хвалит ? когда PostgreSQL завоюет мир - от представителя муськи странно слышать ?-

Al
06.06.2016
05:18:09
Dmitriy
06.06.2016
05:18:33
не знаю, чо-нить

просто сравнение мускуль вс постгрес вс тарантул, выглядит как сравнение базы данных с енотом

или с котом

Dmitry
06.06.2016
07:44:34
а будут все эти записи потом где то?

хотя бы за бабки

Google
Dasha
12.06.2016
22:20:55
Доброй ночи - ищем волонтеров на секцию Storage

http://devconf.ru/ru/schedule#storage

Dmitry
15.06.2016
12:08:03
есть ли какойто способ посмотреть что мускул свопит?

Square
15.06.2016
12:08:47
помоему тут собрались все такие некомпетенты как мы

Dmitry
15.06.2016
12:09:34
ненене

Square
15.06.2016
12:11:04
мне по мускулю больше помогли в чяте по плюсам :)

я сам все пытаюсб немного в дба углубиться... но слабовато. решил начать с того, что упражняюсь в заливке википедии и пытаюсь добитсья адекватной работоспособности - но как то пока не очень выходит. полнотекстовый индекс не работает

точней работает не так ка кдолжен

Dmitry
15.06.2016
12:13:27
полнотекстовый индекс мускуля?

просто обычно для этого сторонние штуки юзают

сфинкс там

Architector
15.06.2016
12:20:06
да, не очень идея использовать для полнотекстового поиска mysql

Dmitry
15.06.2016
12:25:04
не очень понятны опасности

что будет если мемлок

и оно там кончится

короче суть такая, отсыпали жирный innodb буфер, но мускул продолжает обильно кушать свопчик

Architector
15.06.2016
12:31:44
короче, используй memlock, настрой мониторинги, грамотно выдели пул под innodb

Dmitry
15.06.2016
12:35:23
"грамотно" тут подробнее

Google
Dmitry
15.06.2016
12:35:33
сейчас там грубо говоря размер базы

Square
15.06.2016
12:38:48
полнотекстовый индекс мускуля?
ну педивикия же работает как то так?

у них там весь дамп мускульный

Architector
15.06.2016
13:02:08
https://dev.mysql.com/doc/refman/5.7/en/innodb-buffer-pool-resize.html

Dmitry
15.06.2016
13:04:23
надо еще зайцева почитать

что там пишуть

Navern
15.06.2016
13:56:06
короче суть такая, отсыпали жирный innodb буфер, но мускул продолжает обильно кушать свопчик
По идее mysql тут не причем. Свопить или нет это про ядро:) майскуль это все видит как память. Обычно на серваках с бд ставят опцию vm.swappiness = 10 или даж меньше

Ну мож конечно чего не знаю, но навсеидку способа управлять этим из mysql не знаю

Dmitry
15.06.2016
13:56:57
Navern
15.06.2016
13:57:44
Фуллтекст + иннодб? И как? Быстро работает? По идее должно адово тормозить;) какой там датасет по размеру?

Dmitry
15.06.2016
13:58:45
фултекста там нету

база на шесть гигов

Anton
15.06.2016
13:59:10
.

Navern
15.06.2016
14:03:38
Так а значения сваппинесс какие? Пробовали ли их снижать?

Dmitry
15.06.2016
14:04:04
нет, все по дефолту

необходимости раньше не было

60, да

Navern
15.06.2016
14:07:39
60 это дефолтный, ну я бы сильно снизил. До 10 как уже говорил

Это помоему рекомендуют и в хай пердформанч майскуэль;)

Google
nikoinlove
15.06.2016
14:08:40
свап на сервере с базой это зло

обычно попадание в свап значит что все встает раком навсегда

Dmitry
15.06.2016
14:09:00
окей, это я понял

но, тогда вопрос

jatelka
15.06.2016
14:09:08
свап на сервере - это зло

Dmitry
15.06.2016
14:09:18
что будет когда кончится рама

и прийдет добрый оом

тупо мониторить раму и жать красную кнопку когда пройдут трешхолды?

nikoinlove
15.06.2016
14:10:30
он же не течет у тебя. ограничь его в памяти и все

это же не монга которая жрет не в себя)

прикинуть сколько он максимум может сожрать умеет mysqltuner

Dmitry
15.06.2016
14:12:21
он уже сказал

так, мне надо только обосновать memlock нормально

nikoinlove
15.06.2016
14:13:11
не надо тебе никакого мемлок

Navern
15.06.2016
14:13:21
и прийдет добрый оом
Ну оом чтото еще убьет, не?;) хоть оом и тормознутый. У тебя же скоры для бд настроены?

Dmitry
15.06.2016
14:13:47
да никто там не настраивал ) стоит мускул и стоит

он недавно начал нагружаться

ждут туда еще нагрузку

Navern
15.06.2016
14:14:11
да никто там не настраивал ) стоит мускул и стоит
В дебовских пакетиках инии скрипт сразу с установкой скоров

Dmitry
15.06.2016
14:14:18
рпм (

Страница 13 из 718