мда...

а кто тут node-exporter прометея использует? его в докер можно заворачивать или нужно, чтобы он на хосте работал?

а кто тут node-exporter прометея использует? его в докер можно заворачивать или нужно, чтобы он на хосте работал?

ты не поверишь, только что решил этот же вопрос

вообще, его инсталятор тоже норовит его в докер пихнуть

ща

--- - name: run node exporter container docker_service: project_name: node_exporter restarted: true definition: version: '2' services: node_exporter: image: prom/node-exporter:0.12.0 restart: always ports: - 9100:9100 volumes: - /proc:/host/proc - /sys:/host/sys - /:/rootfs network_mode: host command: -collector.procfs /host/proc -collector.sysfs /host/sys -collector.filesystem.ignored-mount-points "^/(sys|proc|dev|host|etc)($$|/)" ...

сам спионерил в интернетах, долго гуглил, нашел тольк ов каком-то малопопулярном личном блоге и то там было с ошибкой

после definition - чистый docker-compose

фишка в том, что ему нужно хостовый /proc и /sys аккуратно подложить

ух ты, спасибо, буду разбираться

не за что:)

а ты прометей графаной смотришь?

пока ничем :) потом планирую графану поставить, да

и это единственный путь, только весь контекст модуля почит вместе с модулем. все коннекшены, если они там хэндлились в том числе. аккуратно и очень вдумчиво надо, иначе смысла нет. ну т.е. вот кто мешает. запустить второй процесс, не важно каким способом и роутить все новые соединения туда, а старые отдавать пока не надоест со старого процесса. даже название для такого есть - connection draining

Так надо держать стейт в отдельном месте

Так надо держать стейт в отдельном месте

это в каком? самому глазками запомнить? ну, я про то, что это место надо писать, надо помнить, что ты делаешь релоад этого модуля и понимать откуда и куда у тебя ссылки хранятся

это в каком? самому глазками запомнить? ну, я про то, что это место надо писать, надо помнить, что ты делаешь релоад этого модуля и понимать откуда и куда у тебя ссылки хранятся

Ну чудес не бывает :)

пока ничем :) потом планирую графану поставить, да

докером там вообще нечего ставить. последняя графана из коробки тащит с прометея данные, только урл дай

прометей дольше конфигурить на порядка два времени

это в каком? самому глазками запомнить? ну, я про то, что это место надо писать, надо помнить, что ты делаешь релоад этого модуля и понимать откуда и куда у тебя ссылки хранятся

Заводишь объект в котором хранишь все и вся :)

докером там вообще нечего ставить. последняя графана из коробки тащит с прометея данные, только урл дай

ага, понял. Вот прометей настрою и графану сразу заведу

Заводишь объект в котором хранишь все и вся :)

а потом тебе Дима расскажет про дикты и как это всё и вся у тебя в этом объекте зранится

ага, понял. Вот прометей настрою и графану сразу заведу

графану удобно как записную книжку для запросов использовать на первых порах, иначе нужно в закладки класть урлы графиков прометея. можно и дашбоард к нему поставить, н оесли потом графана, то смысла нет

а потом тебе Дима расскажет про дикты и как это всё и вся у тебя в этом объекте зранится

Ну так в питоне сплошные дикты :)

Ну так в питоне сплошные дикты :)

дык. DSL для хэшмапов же:)

графану удобно как записную книжку для запросов использовать на первых порах, иначе нужно в закладки класть урлы графиков прометея. можно и дашбоард к нему поставить, н оесли потом графана, то смысла нет

скоро и алерты туда прикрутят https://github.com/grafana/grafana/pull/6089

только написал, уже смержили

только написал, уже смержили

Отлично. А, кстати, а их CloudWatch оно умеет алерты, интересно...

омг, а в джанге уже давно свой генератор докуменатции есть https://docs.djangoproject.com/en/1.10/ref/contrib/admin/admindocs/

и сфинкс особо не нужен и симпатично всё

NIH is strong with this one

NIH is strong with this one

?

скоро и алерты туда прикрутят https://github.com/grafana/grafana/pull/6089

Нахера? Я вот нарисовал телеграм-бота к алертменеджеру и доволен как слон. Теперь еще туда прикрутить всякие командочки для управления и будет вообще все круто

Нахера? Я вот нарисовал телеграм-бота к алертменеджеру и доволен как слон. Теперь еще туда прикрутить всякие командочки для управления и будет вообще все круто

здорово! > командочки для управления например?

Нахера? Я вот нарисовал телеграм-бота к алертменеджеру и доволен как слон. Теперь еще туда прикрутить всякие командочки для управления и будет вообще все круто

Ну вот, если оно умеет быть алертменеджером для алертов их всех источников, это очень хорошо было бы

Типа чтобы в одном месте управлять алертами прома и клаудвотча

Но похоже оно там не так

Придется в общем в двух местах алерты продолжать делать

Дублировать клаудвотч не хочется

Но похоже оно там не так

откуда такой вывод?

Я слабо предоставляю как оно клаудвотч алерты будет затягивать...

здорово! > командочки для управления например?

Ну тебе прилетает алерт что какой-то сервис сдох. Ты говоришь: пингани такой хост, проверь доступность по tcp, рнстартани процесс.

Ну тебе прилетает алерт что какой-то сервис сдох. Ты говоришь: пингани такой хост, проверь доступность по tcp, рнстартани процесс.

Чем это лучше, чем в консоли написать?

Консоли в электричке нет?

Консоли в электричке нет?

Есть же

Кактус

Кактус

А?

Рекомендую "ConnectBot" https://play.google.com/store/apps/details?id=org.connectbot

А?

Неудобно с телефона в консоль что-то писать

Плюс когда телега всегда под рукой что-то левое запускать смысла нет

Гугл ассистент какой-то ботан

?

Рекомендую "ConnectBot" https://play.google.com/store/apps/details?id=org.connectbot

Уж лучше juicessh

Чем это лучше, чем в консоли написать?

Тем что шорткаты на какие-то действия.

Уж лучше термукс + openssh

what's new in python 3.6 (Andrew Vlasovskih) http://blog.pirx.ru/media/files/2016/vlasovskikh-whats-new-in-python36.pdf

Уж лучше термукс + openssh

С телефона?

what's new in python 3.6 (Andrew Vlasovskih) http://blog.pirx.ru/media/files/2016/vlasovskikh-whats-new-in-python36.pdf

mypy уже поддерживает PEP 526: Syntax for variable annotations ?

Ага

Я вообще в поезде код пишу

Блютус клава, термукс и емакс. Там elpy, венв, гит, вся фигня.

mypy уже поддерживает PEP 526: Syntax for variable annotations ?

пока нет, https://github.com/python/mypy/pull/2131

а ты используешь mypy, @skovorodkin ?

what's new in python 3.6 (Andrew Vlasovskih) http://blog.pirx.ru/media/files/2016/vlasovskikh-whats-new-in-python36.pdf

интересно, что это значит > Mypy and PyCharm are not 100% compatible

а ты используешь mypy, @skovorodkin ?

писал уже тут, пока нет, только типы описываю, pycharm показывает ошибки, если находит

интересно, что это значит > Mypy and PyCharm are not 100% compatible

У PyCharm, видимо, свой формат комментариев для типов для Py < 3.6. https://www.jetbrains.com/help/pycharm/2016.1/type-hinting-in-pycharm.html

ERROR: S client not available

https://www.ietf.org/mail-archive/web/tls/current/msg21278.html

ох приплыли

Всем доброго времени суток! Кто-нибудь работал с фреймворком scrapy?

день сейчас

да, извините) Всем добрый день!

просто кто-то возможно сейчас в другом часовом поясе, но вопрос не в этом

просто кто-то возможно сейчас в другом часовом поясе, но вопрос не в этом

так вы сразу вопрос задавайте, к чему церемонии

как именно работают правила в CrawlSpider? У меня есть сайт, я генерирую ссылки через поиск из списка слов, потом собираю информацию во вложенных ссылках, затем иду к другой странице. Вот основной код: https://gist.github.com/b5y/ed769e347ff635d9f0753292580d92a8

проблема в том что он не собирает все объявления со страницы

я прежде не работал со scrapy, поэтому не обессудьте за глупые вопросы)

IRC канал scrapy мертвый, там особо никто не отвечает

проблема в том что он не собирает все объявления со страницы

например?

собирает только первые несколько

потом переходит к другой странице

начиная со 2-й страницы объявление вообще не собираются

*объявления

собирает только первые несколько

url = title.xpath('./div[@class="title"]/a/@href').extract_first()

Благодарствую, Сергей!

ребята, если вас спросят, чтобы такого почитать, чтобы изучить джангу

вы же к документации пошлете?)

Есть книги

Но дока актуальнее

а джангу точно надо изучать?

вы же к документации пошлете?)

Тутор там есть в доках

а джангу точно надо изучать?

это вроде необходимого минимума, судя по трудовому рынку

Тутор там есть в доках

спасибо

это вроде необходимого минимума, судя по трудовому рынку

есть опасность стать джангистом

есть опасность стать джангистом

подразумевается, изучить джангу и успокоиться?

от человека зависит, наверное

ну да. а потом вакансии с опыотм 5 лет на джанге и вот это все

рынок диктует свои условия

а джангу точно надо изучать?

а что надо?