@metrics_ru
Uncel26.07.2017
18:19:03
18:19:03
https://groups.google.com/forum/#!topic/prometheus-users/PcQy2Yikd5U
Ivan26.07.2017
18:19:47
18:19:47
https://groups.google.com/forum/#!topic/prometheus-users/PcQy2Yikd5U
Тогда уточняющий вопрос - это должно быть на клиенте в виде агента?
GoogleIvan26.07.2017
18:20:03
18:20:03
или snmp explorer - это часть серверная?
и она гуляет на устройства по v1/v2/v3 и собирает данные, как это делает заббикс, а потом отдает их прометеусу?
Sergey26.07.2017
18:21:11
18:21:11
Uncel26.07.2017
18:21:18
18:21:18
Ivan26.07.2017
18:21:42
18:21:42
точно
и вот мне нужно было обойти 3 чата с одним и тем же вопросом, в которых ты есть, что бы ты мне ответил?Сережа, у меня сейчас пригорит)
Uncel26.07.2017
18:22:03
18:22:03
тематика
Sergey26.07.2017
18:22:19
18:22:19
Ivan26.07.2017
18:22:39
18:22:39
ну ты мудак (с)
Sergey26.07.2017
18:23:36
18:23:36
я знаю
Google
Andrey26.07.2017
20:39:01
20:39:01
Начал читать про prometheus, но что то мне не понятно, как он работает с snmp. Мне вроде как объяснили, что нужно на каждое устройство будет ставить агента специального, но как то я не въеду.
есть отдедьный snmp_exporter который из snmp подучает инфу и представляет в привычном для прометея виде
Алексей26.07.2017
20:41:09
20:41:09
И с графаной и кликхаусом и топологией
Ivan26.07.2017
20:46:28
20:46:28
Sergey26.07.2017
20:47:35
20:47:35
Топология не нужна. Нужны тригеры и скрипты)
вы живете в прошлом веке! вам нужны микросервисы и пайплайны, а не триггеры и скрипты!Алексей26.07.2017
20:47:57
20:47:57
Тогда всё равно НОК. Но про топологию надо ещё раз подумать
Ivan26.07.2017
20:48:00
20:48:00
Sergey26.07.2017
20:49:30
20:49:30
Сережа, прекращай)
ну обсудили сто раз же уже. если у тебя уже все настроено на твой заббикс и тебе хватит производительности одного бокса на твою инфраструктуру и она не будет расти - ну зачем велосипед изобретать?Ivan26.07.2017
20:49:50
20:49:50
ну обсудили сто раз же уже. если у тебя уже все настроено на твой заббикс и тебе хватит производительности одного бокса на твою инфраструктуру и она не будет расти - ну зачем велосипед изобретать?
Так не хватит же производительностив это и упираемся)
Sergey26.07.2017
20:50:07
20:50:07
ты же посчитал что тебе потребуется 10к nvps. и на 10k nvps производительности хватит.
Ivan26.07.2017
20:50:36
20:50:36
ты же посчитал что тебе потребуется 10к nvps. и на 10k nvps производительности хватит.
Я не посчитал во что это выльется в железкахПотому как железка не своя, а облачная. И не хочется за неё огромные бюджеты ежемесячно отстегивать
GithubReleases26.07.2017
23:23:00
23:23:00
https://github.com/influxdata/telegraf/releases/1.3.5 was tagged
https://github.com/influxdata/telegraf/releases/1.3.5 was tagged
Pablo27.07.2017
07:49:07
07:49:07
Alexandr27.07.2017
07:51:34
07:51:34
Какую задачу вы хотите этим решить?
Алертинг на метрики у которых порог стоит наверху, а она сама уползла внизPablo27.07.2017
07:53:19
07:53:19
а зачем?
Alexandr27.07.2017
07:54:32
07:54:32
Я понял, что ответа на первоначальный вопрос нет, но готов поиграть. Потому что может эксплуатация может поймать гавно вырубившее одного клиентоса до реального факапа.
Andor27.07.2017
07:54:39
07:54:39
Начал читать про prometheus, но что то мне не понятно, как он работает с snmp. Мне вроде как объяснили, что нужно на каждое устройство будет ставить агента специального, но как то я не въеду.
через snmp_exporter (который стоит на 1+ хостах)GoogleAndor27.07.2017
07:55:03
07:55:03
блин, я не тормоз
Alexandr27.07.2017
07:55:55
07:55:55
Потому, что 100 загрузка БД это событие с приоритетом 1, а загрузка БД в 15% (вместо стандартных 50) это аномалия
И руткозом такой херни может быть одно из сотни минорных мигающих событий
Zhenia27.07.2017
08:04:24
08:04:24
ладно, чат. Может у кого-то есть тулза которая бы данные из прома забирала и писала в графит?
Pablo27.07.2017
08:04:53
08:04:53
Потому, что 100 загрузка БД это событие с приоритетом 1, а загрузка БД в 15% (вместо стандартных 50) это аномалия
что ты дальше с ней делать будешь, с этой аномалией
Andrei27.07.2017
08:05:28
08:05:28
Какую задачу вы хотите этим решить?
Например, помощь в поиске rootcause, когда незначительные события могут влиять на важные вещи.Alexandr27.07.2017
08:05:43
08:05:43
что ты дальше с ней делать будешь, с этой аномалией
Дальше я ее запихну в руткоз и посмотрю, на что может влиять и что ее родилоК чему вопросы-то? Тебе просто интересно как мы это используем или хочешь плавно подвести к тому, что этот механизм нам ни в рот ни в уши не уперся?
Vladimir27.07.2017
08:06:44
08:06:44
@yelowhut про anomaly detection - область новая и нормальных универсальных решений кажется нет от слова совсем
потому что чуваки пишут алгоритмы под задачу конкретную
Alexandr27.07.2017
08:07:12
08:07:12
@yelowhut про anomaly detection - область новая и нормальных универсальных решений кажется нет от слова совсем
Перестань… мы эту хрень толкали с 2009Vladimir27.07.2017
08:07:25
08:07:25
Alexandr27.07.2017
08:07:36
08:07:36
нормализовать функцию и взять от нее производную - не так сложно
Vladimir27.07.2017
08:07:38
08:07:38
как народ под каждый конкретный случай писал велосипеды так и пишет
Alexandr27.07.2017
08:07:57
08:07:57
Трабла в том, что я таких механизмов в нормальных решениях не видел, только в кровавом ынтерпрайзе
(а на него теперь денег нет)
GoogleAlexandr27.07.2017
08:08:57
08:08:57
Это да… Но вопрос у товарища стоял вполне четкий - “есть ли что-то?”
И на этот вопрос первый ответ был “Зачем?”
Vladimir27.07.2017
08:09:19
08:09:19
ну вот ответ на вопрос товарища "нет, нету, пиши сам"
Alexandr27.07.2017
08:10:00
08:10:00
Блин... придется и дальше толкать кровавый значит :/
Vladimir27.07.2017
08:10:15
08:10:15
или взять и запилить свое )
Alexandr27.07.2017
08:10:55
08:10:55
Нет у нас денег на запилить. Я раб галерный
Vladimir27.07.2017
08:11:05
08:11:05
на ынтерпрайз есть, а на запилить нет? )
AdminERROR: S client not available
Pablo27.07.2017
08:12:47
08:12:47
К чему вопросы-то? Тебе просто интересно как мы это используем или хочешь плавно подвести к тому, что этот механизм нам ни в рот ни в уши не уперся?
угадал - если не первое, то второе =)Alexandr27.07.2017
08:14:05
08:14:05
Ну вроде несколько человек сказали, как это используют
Pablo27.07.2017
08:14:05
08:14:05
нормализовать функцию и взять от нее производную - не так сложно
можно подробнее пожалуйста? это подходит только для каких-то случаев или в общем? как нормализовать? Что потом с этой производной?Andor27.07.2017
08:14:05
08:14:05
ладно, чат. Может у кого-то есть тулза которая бы данные из прома забирала и писала в графит?
прометей вроде сам это умел?Zhenia27.07.2017
08:14:32
08:14:32
но я так понимаю, ничего нету и нужно на его основе костылять нужное мне
Zhenia27.07.2017
08:15:25
08:15:25
я хочу что бы за сутки до удаления данные переливались в графит
GoogleAndor27.07.2017
08:15:27
08:15:27
ну либо ты (возможно) можешь поставить рядом прометей, сделать его как федерейшн к первому и с него в графит засылать
Alexandr27.07.2017
08:15:34
08:15:34
можно подробнее пожалуйста? это подходит только для каких-то случаев или в общем? как нормализовать? Что потом с этой производной?
Можно. Усредняй значения верхними и нижними персинтилями, 10 и 90 нааоимер. Строй доверительный интервал с переносом день в деньPablo27.07.2017
08:15:47
08:15:47
Например, помощь в поиске rootcause, когда незначительные события могут влиять на важные вещи.
это некое абтракнтное представление, что такое бывает* или опыт есть и конкретные примеры?Alexandr27.07.2017
08:16:04
08:16:04
можно подробнее пожалуйста? это подходит только для каких-то случаев или в общем? как нормализовать? Что потом с этой производной?
Вылетел за доверительный - зажигай информ событиеPablo27.07.2017
08:16:20
08:16:20
В смысле считаем среднее на окне от 10 и 90 перцентилей и сомтрим когда оно вылетает из него?
Pablo27.07.2017
08:16:50
08:16:50
btw offtop — тут постинг вакансий разрешен?
Alexandr27.07.2017
08:17:11
08:17:11
Ща скриншот попробую найти из кровавого проекта
Pablo27.07.2017
08:17:49
08:17:49
ок, а какой "класс аномалий" оно находит и какой пропускает, и как по опыту — когда пригождалось.
есть тут "правила канала" где нибудь, чтоб посомтреть можно ли job posting?
Alexandr27.07.2017
08:20:03
08:20:03
Уточни про класс аномалий. Короче, дальше из проектного начну гнать. Берем тупую цифру - %диск спейс юзед. Триггеры на 80/90. Приклад банковский начинает срать на файловую систему - это для него плохо. Три месяца до этого - 5% бзед в среднем
Юзед
Вот у тебя по статике алерт будет хер знает когда
Zhenia27.07.2017
08:20:26
08:20:26
ну, тут правило говорить о метриках и мониторинге
Pablo27.07.2017
08:20:47
08:20:47
Ез
вот я вижу в описанной схеме проблемы, но может я не до конца понял как мы "аномалии" считаем. ща попробую сформулировать уточняющий вопросZhenia27.07.2017
08:20:48
08:20:48
так что если вакансия про метрики или мониторинг - то наверное можно
Открыть в Telegram