А ссылки на инфлюкс чат нету?

запиливай я приду.

запиливай я приду.

Мне это не надо. Я просто фак прочел. Хорошо бы еще написать почему прометей и графит говно. Для полноты картины)

да. это было бы честно

Всем ку, ребят поделитесь, что и почему используете вместо заббикса?

Мне это не надо. Я просто фак прочел. Хорошо бы еще написать почему прометей и графит говно. Для полноты картины)

если составишь, я дополню)

Я с промом еще не так много вожусь чтобы называть дерьмом. Пока мне не нравится проблемы в долговременном хранении только

у прома сейчас две беды * нет возможности сделать экшен. * нет в коробке долговременного хранилища.

> * нет возможности сделать экшен. что есть экшен?

у графита тоже есть беды: * метаданные. их нет. нельзя сказать покажи загрузку порта в процентах если собираешь мегабиты. * фрагментированные стеки. тут imho.

> * нет возможности сделать экшен. что есть экшен?

экшен это когда аларм -> экшен -> нет алярма

экшен это когда аларм -> экшен -> нет алярма

Ну, решается хуком, но да, согласен.

хуком куда ?

пока я видел хук из которого можно извелечь пользу примерно нигде.

я протыкал гитхаб сколько мог и вгуглил полдня на это. лучшее что есть это prom exec кажется так

хуком куда ?

в свою систему, которая будет алертить и делать экшен

я протыкал гитхаб сколько мог и вгуглил полдня на это. лучшее что есть это prom exec кажется так

https://github.com/imgix/prometheus-am-executor

в свою систему, которая будет алертить и делать экшен

в какую свою ?

ну в смысле самописную

ну тогда все системы одинаково хороши.

))

и между ними нет разницы.

опять я со своими разборками с Consul. по прежнему не догоняю - каким образом сonsul установленный на ноде может увидеть сервисы, которые работают в докер контейнерах на этой же ноде? например если я создам service definition file - service1.json для некого сервиса, который работает под докером и у него ip адрес из 172 докерской сетки, скормлю этото конфиг сonsul-у - то как consul сможет найти ВСЕ реплики этого сервиса на своей ноде и на остальных нодах докер сварма? повторюсь - мне надо эти данные както так скормить в blackbox exporter чтобы иметь возможность точно определять (tcp connect) какая реплика и на какой ноде живая или дохлая.

может мне consul все таки в докер тоже заводить?

опять я со своими разборками с Consul. по прежнему не догоняю - каким образом сonsul установленный на ноде может увидеть сервисы, которые работают в докер контейнерах на этой же ноде? например если я создам service definition file - service1.json для некого сервиса, который работает под докером и у него ip адрес из 172 докерской сетки, скормлю этото конфиг сonsul-у - то как consul сможет найти ВСЕ реплики этого сервиса на своей ноде и на остальных нодах докер сварма? повторюсь - мне надо эти данные както так скормить в blackbox exporter чтобы иметь возможность точно определять (tcp connect) какая реплика и на какой ноде живая или дохлая.

Может их надо там регистрировать. Например, вот так: https://github.com/gliderlabs/registrator

блжад, мне уже говорили про это, но я чет прощелкал.. а где этото registrator надо запускать - в контейнере получается?

В контейнере

Но ему нужен доступ к сокету

Там же в доке написано все, на первой странице

то есть чтото вроде такого у меня должно быть в сompose моем: registrator: image: gliderlabs/registrator:v7 volumes: - /var/run/docker.sock:/tmp/docker.sock command: "-internal consul://consul-server:8500" depends_on: - consul-server - cadvisor links: - consul-server только command: "-internal consul://consul-server:8500" надо поменять на чтото другое, чтобы указывало на мой консул, который на ноде. и потом этот консул будет скрейпится промом, который тоже в контейнере.. как-то не по джедайски получается нафига сonsul снаружи то?

В твоем случае проще в контейнере

опять я со своими разборками с Consul. по прежнему не догоняю - каким образом сonsul установленный на ноде может увидеть сервисы, которые работают в докер контейнерах на этой же ноде? например если я создам service definition file - service1.json для некого сервиса, который работает под докером и у него ip адрес из 172 докерской сетки, скормлю этото конфиг сonsul-у - то как consul сможет найти ВСЕ реплики этого сервиса на своей ноде и на остальных нодах докер сварма? повторюсь - мне надо эти данные както так скормить в blackbox exporter чтобы иметь возможность точно определять (tcp connect) какая реплика и на какой ноде живая или дохлая.

все таки, есть веские причины иметь геморой с консулом и докер свармом, когда всё уже давно решено в кубернетес? (ака service discovery)

блин куча енвов в таком режиме. просто так не переделать быстро

а мониторить надо вчера

Думаю это меньший геморой, чем учить целую систему

Тем более если уже выбран сворм

В твоем случае проще в контейнере

спасибо..

все таки, есть веские причины иметь геморой с консулом и докер свармом, когда всё уже давно решено в кубернетес? (ака service discovery)

Есть, если ваша среда не только на докерах

у меня гибридные среды. Но проблема @Zlokot вроде в контексте докера.

Большая редкость когда все в контейнерах, либо проект молодой либо был жесткий рефакторинг, остальные по старинке с зоопарками - вот тут и заходит консул

Не в докере, а в сворм, но да, именно в нем

consul не стартует в сворме моем: говорит: ==> Multiple private IPv4 addresses found. Please configure one вот так в compose выглядит он: # consul-server consul-server: image: consul:latest ports: - 8500:8500 command: "agent -server -bootstrap -ui -bootstrap-expect=1 -client=0.0.0.0" networks: - service_net deploy: mode: global placement: constraints: - 'node.labels.monit.consul == true'

хз как ему передать IP для bind - по идее за это отвечает ключ bootstrap - он должен сам настроить все..

получается в контейнере где он должен запуститься есть несколько сетевух - и это кстати да - одна из 172 сетки, вторая из 10 - это докер стек добавляет оверлейную сеть

хз как ему передать IP для bind - по идее за это отвечает ключ bootstrap - он должен сам настроить все..

Вместо 0.0.0.0 написать, вроде

так я же не знаю этот ip пока контейнер не стартанет. там же автоматом выдаются адреса

даже просто с такими параметрами: command: "-bootstrap" не стартует с той же ошибкой

вот например вывод из соседней контейнера с cadvisor: / # ip a 1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN qlen 1 link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00 inet 127.0.0.1/8 scope host lo valid_lft forever preferred_lft forever 2753: eth0@if2754: <BROADCAST,MULTICAST,UP,LOWER_UP,M-DOWN> mtu 1450 qdisc noqueue state UP link/ether 02:42:0a:00:00:78 brd ff:ff:ff:ff:ff:ff inet 10.0.0.120/24 scope global eth0 valid_lft forever preferred_lft forever inet 10.0.0.45/32 scope global eth0 valid_lft forever preferred_lft forever 2755: eth1@if2756: <BROADCAST,MULTICAST,UP,LOWER_UP,M-DOWN> mtu 1500 qdisc noqueue state UP link/ether 02:42??12:00:03 brd ff:ff:ff:ff:ff:ff inet 172.18.0.3/16 scope global eth1 valid_lft forever preferred_lft forever

Клиент можно запустить с локалхостом, раз порт форвардинг

Так есть же опция -bind

boostrap тут вообще не при делах

ну так

хз как ему передать IP для bind - по идее за это отвечает ключ bootstrap - он должен сам настроить все..

Ничего он не должен

ну так пишут вроде

вот тут например https://stackoverflow.com/questions/29061026/using-the-host-ip-in-docker-compose

by starting consul with just -server -bootstrap, consul figures out it's own advertise address, for example:

-bootstrap - это устаревшая опция

если сделать -bind=127.0.0.1 - то как тогда к нему достучиться registrator на порт 8500 никак же..

тут вообще получается что надо сделать такой универсальный конфиг в моем сompose файле, чтобы при деплое он разворачивал новый инстанс сonsul на новой ноде так, чтобы эти consul оказались в кластере

то есть както сразу настройки ему передавать в сompose

Зачем, у тебя же будут доступны другие ноды консула по DNS, их в —retry-join и указываешь

один фиг пока даже первый консул не стартует

А почему там несколько интерфейсов?

один из 172 сетки докера, второй из 10 сети - это докер стек добавляет оверлейную сеть

я не строил всю кухню.. так и было до меня кстати. но в целом тоже было интересно зачем эта вторая 10 сетка там надо. видимо есть стандартная сеть host и добавили еще overlay сеть - вот она и 10

]# docker network ls NETWORK ID NAME DRIVER SCOPE 2cba96bb98a0 bridge bridge local 38bc2c1070fa docker_gwbridge bridge local 8a84a36a808f host host local 4vy93s3gg3z9 ingress overlay swarm ddhuom8y4rlj service_net overlay swarm 151f47b001da none null local

ERROR: S client not available

и все сервисы пингуются в 10 сети кстати

Не разбираюсь в docker stack, но может там есть возможность указывать статический ip для контейнера в сети?

ох если бы!!!

это столько бы проблем убрало

но нельзя..

ох ебическая сила...

Вообще можно

https://docs.docker.com/engine/reference/run/#network-settings

это в сворме не пашет

там реплики автоматом одариваются IP

а сворм еще не всё? :)

А там кстати внутри для discovery не консул? Раньше вроде был.

По умолчанию в swarm

где там?

В swarm

да хз как это проверить.

короч завелось чтото.. сделал как тут написано

https://github.com/sdelrio/consul/blob/master/docker-compose.yml

через environment хотя думаю bind на eth0 можно было и в command указать

Да, как раз хотел предложить CONSUL_BIND_INTERFACE=eth0

и вот что интересно...

как я уже говорил - в контейнере два сетевых интерфейса - eth0 и eth1 когда биндаю 0 - в вебморде вижу только сервисы consul-a

а когда 1 - вижу все свои сервисы, которые и нужно мониторить..

eth0 - это 10 сеть, а eth1 - 172

а тебе надо 10?

это то и непонятно. ладно - я пока сделал так, чтобы в UI отборажались все сервисы, но оказывается он их видит так же как и например swarm manager через команду docker service ls. то есть отображает весь список сервисов: service1 - 1 passing service2 - 1 passing и это по идее понятно - ведь registrator же берет все данные из докер сокета.. но мне то нужно мониторить каждую конкретную реплику сервиса, которая работает на определенной ноде. то есть то, что видно по команде docker ps на каждой ноде. там же к каждому сервису добавляется еще ID его - типа service1.09db87ad3fc8 и при рестарте сервиса он меняется. хз, поможет ли tasks тут..

Всем привет! Если кто метрики собирает через collectd, то вот свежий плагин, который шлёт нотификации в REST API Icinga2: https://github.com/tnt4brain/collectd/tree/feature/notify_icinga

привет, а кто-то пробовал через graphite-grafana собирать метрики разработки (time to market например) или я хочу странного?

Jira, не?

у нас redmine, но не суть, в jira я слышал тоже не хватает встроенных инструментов для анализа scrum и kanban метрик мы умеем вытаскивать нужные данные и я думаю выгружать их в graphite, но кажется мне что люди это делают как-то не так, так как найти подобных примеров не могу

Пора пересмотреть свое мироощущение и взгляды на метрики