ну для начала show full processlist что он там убивает

а потом проверять количество этих самых итемов за промежуток времени, мб какая-то метрика "засырает" БД

у меня был такой прикол с кастомной проверкой 250Гб диска отъело меньше чем за сутки

Вот что-то не разобрался. Все что было не надо было отключено. Время хранения было не особо большое и переопределено для всех. Хаускипер в один момент запустился и так и не закончился походу

Как я понимаю, размер базы в основном будет зависеть от того, сколько времени хранится собираемая инфа и как часто она собирается. Т.е. нужно грамотно выставлять значения history и trends. Если резко начал расти размер - может быть изменился какой-то шаблон, на который привязано большое кол-во узлов.

Как я понимаю, размер базы в основном будет зависеть от того, сколько времени хранится собираемая инфа и как часто она собирается. Т.е. нужно грамотно выставлять значения history и trends. Если резко начал расти размер - может быть изменился какой-то шаблон, на который привязано большое кол-во узлов.

Вот говорю ж, галки переопределения всегда стояли...

Ну и в целом, база то была вся в одном файле

Не оптимизируешь

ну смотри, для сравнения, количество активных метрик ~22к, срок хранения истории 90 дней, трендов 365. объем бд в пределах 280Гб (мускуль)

Вот говорю ж, галки переопределения всегда стояли...

Мм, а интервал?

Хистори 30 тренды 90

Потом еще уменьшал когда спалил непотребство

интервал снятия метрики

Не оптимизируешь

А в одном файле?

Надо уменьшать количество NVPS

интервал снятия метрики

Очень много поминутно

И зачистить руками базу по старым записям

Лучше с выключенным заббиксом

Очень много поминутно

т.е. не чаще?

Почти сутки чистил одну табличку. Так и не дочистил

т.е. не чаще?

Да

Почти сутки чистил одну табличку. Так и не дочистил

Что-то не то

а кол-во метрик?

Порциями дропать

Смотреть кво записей

Смотреть индексы

а кол-во метрик?

Домой вот ща еду, точно не скажу. Не так много

Включить лог медленных запросов

Смотреть индексы

Что с индексами?

Оптимизировать файловую систему

Что с индексами?

Почему долго удаляется

Но удалять лучше в монопольном

Спасибо, парни, буду ковырять

А сколько памяти?

4гб

Я б памяти дал много и буфферы накрутил бы

4гб

Мало

У меня в телефоне столько

Какие буферы крутить и насколько?

В статье что тут порекоммендовали советуют не трогать буферы

а потом проверять количество этих самых итемов за промежуток времени, мб какая-то метрика "засырает" БД

А какая методика выявления, какие запросы или что?

А какая методика выявления, какие запросы или что?

Это возможно только мой уникальный случай - куча записей с одним таймштампом

На одну метрику

Понял

В статье что тут порекоммендовали советуют не трогать буферы

innodb_buffer_pool_size

А версия мускуля какая, кстати?

Mariadb 10.3 вродь

innodb_buffer_pool_size

В 3 гб поставил

Ну, типа 3 гига из 4 это норм. Но общий объем, да, согласен, что мало.

Есть возможность докинуть?

Это к тому что хаускиперу не хватало?

Это к тому, что 4 гига для сервера мало. Ну, я не вижу загрузку, но просто по современным меркам. Какая-то нагрузка, сервер крутит СУБД, приложение, веб-сервер (у вас же там всё в одном?), плюс сама система что-то хочет и на всё это выделяется 4 гига.

Это к тому, что 4 гига для сервера мало. Ну, я не вижу загрузку, но просто по современным меркам. Какая-то нагрузка, сервер крутит СУБД, приложение, веб-сервер (у вас же там всё в одном?), плюс сама система что-то хочет и на всё это выделяется 4 гига.

Да, все в одном. Но дело то в том что хватало. И сам сервак по памяти не орал никогда

Это к тому что хаускиперу не хватало?

Опять хаускипер, лал...

Как есть)

Здравствуйте. Скажите плиз, кто нибуть пытался логировать DNS-DIST в Graylg? Я тут нашел в истории случайно в гугле на этом канале кто то это делал. У меня трудности с пониманием как это вообще работает.

@al_1313 Я не совсем понял. Это вы написали этот плагин?

Опять хаускипер, лал...

Да всё с ним норм. ) Уж 60 гиговую БД он должен переваривать 100%. Если Zabbix не на Raspberry Pi запускается, конечно.

чтоб логи по протоколу dnstap выгребать из unbound

Тук.

Да всё с ним норм. ) Уж 60 гиговую БД он должен переваривать 100%. Если Zabbix не на Raspberry Pi запускается, конечно.

У нас на 300х гигаг начал пердеть

А если хаускипер справляется, размер таблиц не пухнет?

мне кажется корректней говорить о кол-ве вычищаемых метрик, а не о объемах самой бд

Он их сжимает сам или как? Я прост хз как эт устроенр

мне кажется корректней говорить о кол-ве вычищаемых метрик, а не о объемах самой бд

Так-то да. Но оно же прямо связано с разменом БД всё равно.

Он их сжимает сам или как? Я прост хз как эт устроенр

Файлы? Innodb всё равно не вернет место ФС.

ERROR: S client not available

Файлы? Innodb всё равно не вернет место ФС.

А партиционирование вернет)

Хаускипер просто удаляет данные. Физически места больше не стает на диске.

Хаускипер просто удаляет данные. Физически места больше не стает на диске.

Вот именно. Толку тогда

Он их сжимает сам или как? Я прост хз как эт устроенр

это обусловленно самими мускулем, получаешь фрагментацию, но если у него получится - запишет новые данные на место удаленных

это обусловленно самими мускулем, получаешь фрагментацию, но если у него получится - запишет новые данные на место удаленных

Если б не это если)))

может ли забикс собирать не только по расписанию но и в случае если прилодение скажем написало в файл 1

Так-то да. Но оно же прямо связано с разменом БД всё равно.

тут просто прийдется подходить с другой строны, но больше это будет связанно не с объемом самой БД, а с железом на котором вся кухня крутится

Если б не это если)))

Инфа сотка, так и есть

Вот именно. Толку тогда

Толк есть. Он же не будет расширять файл, если есть пустые места.

может ли забикс собирать не только по расписанию но и в случае если прилодение скажем написало в файл 1

Можешь через трапер реализовать

может ли забикс собирать не только по расписанию но и в случае если прилодение скажем написало в файл 1

В смысле? Читать файл по триггеру? Это наверное больше в строну траппера.

это все условности пока

я прост к чему

можно ли стрелять скажем тригером не проверяя по расписанию событие а скажем если приложение сообщило нечто

можно ли стрелять скажем тригером не проверяя по расписанию событие а скажем если приложение сообщило нечто

Пишешь прогу, которая на вход ожидает данные, если они поступили отправляешь заббиксу

Я плохо понимаю мысль, но вроде это всё про траппер.

Я плохо понимаю мысль, но вроде это всё про траппер.

+

делай трапперы, приложением вызывай zabbix_sender и передавай это "нечто", или используй метрики типа log

Я плохо понимаю мысль, но вроде это всё про траппер.

я признаюсь не знаю про трапперы пока

Ну вот, есть повод узнать. )

https://www.zabbix.com/documentation/3.0/ru/manual/config/items/itemtypes/trapper

прост мне не оч нравиться подход дергать агент по расписанию

Ну вот, есть повод узнать. )

спасибо обязательно почитаю

прост мне не оч нравиться подход дергать агент по расписанию

Агент там вообще не нужен

Да и что в этом плохого

Можешь ещё активной проверкой чекать файл

Проще всего

Да и что в этом плохого

очереть на забикс если данных много теоретически у меня пока )

очереть на забикс если данных много теоретически у меня пока )

Параноик чтоле?

да трапер мне нравиться странно что он не был популярным для меня

Параноик чтоле?

бывает иногда