Ivan
Выяснили, написали в тп, показали логи, трассировки и вообще все что могли. Нам сказали “У нас все ок”. Техдир пригорел.
Ivan
Еще через пол часа в заявке “да, вы правы, у нас связность между дц пропала!"
Ivan
Егор
Еще через пол часа в заявке “да, вы правы, у нас связность между дц пропала!"
Я недавно два дня селектелам в Питере доказывал что они сетку не подняли локальную на новых серверах. И тем же занимался прошлый закуп месяц назад. Сюрриализм
bebebe
не до конца понятно, почему не брать EKS от AWS в той же Европе (Голандия,Германия,Франция), разве что PING реально важен до последний миллиекунды
bebebe
у AWS факапы конечно то же есть, но подход к этому у них другой (с)
Rainbow
не до конца понятно, почему не брать EKS от AWS в той же Европе (Голандия,Германия,Франция), разве что PING реально важен до последний миллиекунды
Нестабильный канал во время выборов. Больше пинг. Нас очень радует пинг мск- мск
bebebe
кстати, тут экспуалитрую k8s от AKS (Azure) вплоне достойно, после GA, разве что раз в день (два) ловлю TSL handshae timeout у kubectl
bebebe
Нестабильный канал во время выборов. Больше пинг. Нас очень радует пинг мск- мск
Алексей, будьте любезны, поясните отсылку к выборам, это что означает на практике?
Rainbow
Алексей, будьте любезны, поясните отсылку к выборам, это что означает на практике?
Три года назад в январе у нас пару дней через раз все открывалось пару дней. Что то там было из полит событий
Etki
забастовка пакетов
Егор
Три года назад в январе у нас пару дней через раз все открывалось пару дней. Что то там было из полит событий
А пинг мск-мск вам как? Радует?
bebebe
Три года назад в январе у нас пару дней через раз все открывалось пару дней. Что то там было из полит событий
ну у того же амазона и прочей алибабы есть "черные пятницы" и прочине "красные дни в календаре", когда они предпринимают определенные усилия (читай готовятся закупать ресурсы и скейлиться)
в вашем случае нельзя это предугадать и перед "красным" днем пеерезжать на другую площадку?
bebebe
хотя это наверное, из разряда фантастики или жирного ынтыпрайза (хотя единичные случаи знаю)
Rainbow
хотя это наверное, из разряда фантастики или жирного ынтыпрайза (хотя единичные случаи знаю)
Начальство помнит те дни до сих пор и «а может вернёмся в Европу» не рассматривает.
Rainbow
Я с удовольствием бы сидел в DO
bebebe
Rainbow
Тут 90% кажется сидят в aws. Всем завидую
Ivan
и мы
Etki
DO - @DevOps_ru? 🤔🤔🤔
Rainbow
Я рассказывал вроде как-то про сплитбрейн между 2 дц в Москве стабильно в полночь. После такого сразу понятно, почему aws даже не думает сюда.
Ivan
потом мы переехали на GCP с горящей жопой, посидели целый день и наш пул тоже забанили
Ivan
И с совсем уже обгоревшей задницей мы приехали в селектел
Ivan
и вот страдаем, ждем Яндекса
bebebe
Тут 90% кажется сидят в aws. Всем завидую
эээ, у меня сложилось впечатление, что тут есть большая аудитория которая держит собственные k8s
Ivan
Ivan
Они вот сейчас ушли в переналивку своих мощностей и должны в конце сентября публично запусститься
Ivan
извините, просто очень смешно с банами
на самом деле грустно. Самое большое сообщество, где правят мудаки
bebebe
Они вот сейчас ушли в переналивку своих мощностей и должны в конце сентября публично запусститься
звучит обнадеживающе, если бы такое не было каждый месяц, начиная с 2017 июня 😉
bebebe
надеюсь конечно, запустят
Ivan
Я потыкал бету немножко
Ivan
а вот куба там появится ближе к зиме, емнип
bebebe
значит через годик можно будет пользоваться 😉
Ivan
значит через годик можно будет пользоваться 😉
У них очень крутая команда. Думаю, к ноябрю уже можно будет прод уносить туда
bebebe
У них очень крутая команда. Думаю, к ноябрю уже можно будет прод уносить туда
хехе 😉 у нас была возможность оказаться в этой команде, но в 2017 мы отказались
Vitaly
У них очень крутая команда. Думаю, к ноябрю уже можно будет прод уносить туда
Рисковые вы. Они только запустились(если), вы уже прод туда тащите
bebebe
они хотели в прод уже в декабре прошлого года запуститься в прод, отсюда и скепсис
Vitaly
Ivan
Рисковые вы. Они только запустились(если), вы уже прод туда тащите
1. еще не запустились
2. мы уже обкатали там все, что нам нужно
3. мы еще пока ничего никуда не тащим. Ждем запуска
Ivan
они хотели в прод уже в декабре прошлого года запуститься в прод, отсюда и скепсис
я понял про что ты. Не, там уже все по-другому)
Vitaly
Расскажите что не так с mail.ru облаком-кубером то)
Ivan
амбиции vs сроки vs организация дела
Угу. У них там было понамешано. Вроде, ребята, все разрулили и вполне себе
Sebor▂▅▇█▓▒░
Rainbow
В общем ситуация "всё тлен" 😬
Vitaly
А предметно?) В саппорт писали?) Прост в соседнем чатике в слаке есть люди кто пользуется, да и мэйнтейнер
Vadim
А из мейла кто-то контрибутит в апстрим?
Eduard
Eduard
Воркеры зависли (не пришёл oom за nodejs) и всё, через две недели ответили "передаём заявку на 2-ую линию", перегрузили воркеры и всё.
Andrey
Ребят, а настраивал кто-нибудь Prometheus на мониторинг кастомных метрик подов?
Mikhail [azalio]
Andrey
Вопрос не ясен.
Есть кубер, в нем микросервисы которые отдают по /metrics метрики в формате Прометея.
Прометей умеет в сервис Дискавери кубера. Но у меня есть нюанс, сам прометей стоит на отдельной тачке, не в кубере.
Вопрос в том, какие тут есть варианты, ведь прямого доступа на поды у Прометея нет.
Konstantin
Есть кубер, в нем микросервисы которые отдают по /metrics метрики в формате Прометея.
Прометей умеет в сервис Дискавери кубера. Но у меня есть нюанс, сам прометей стоит на отдельной тачке, не в кубере.
Вопрос в том, какие тут есть варианты, ведь прямого доступа на поды у Прометея нет.
Так кастомные метрики или доступ к метрикам?
Andrey
Так кастомные метрики или доступ к метрикам?
Ну кастомные в том плане что не cpu/mem и тп. А так то они в формате прометея. Вопрос скорее по доступу. Потому что как выше говорил, прометей стоит на отдельной тачке без кубера.
Mikhail [azalio]
Есть кубер, в нем микросервисы которые отдают по /metrics метрики в формате Прометея.
Прометей умеет в сервис Дискавери кубера. Но у меня есть нюанс, сам прометей стоит на отдельной тачке, не в кубере.
Вопрос в том, какие тут есть варианты, ведь прямого доступа на поды у Прометея нет.
У меня прометей вне кубера. Находит поды и потом ходит на под ip за метриками. Сервисы мониторорит через proxy запрос через api кубера.
Konstantin
Ну кастомные в том плане что не cpu/mem и тп. А так то они в формате прометея. Вопрос скорее по доступу. Потому что как выше говорил, прометей стоит на отдельной тачке без кубера.
Да, там не важно какие метрики, он всё коллектит
Andrey
У меня прометей вне кубера. Находит поды и потом ходит на под ip за метриками. Сервисы мониторорит через proxy запрос через api кубера.
А как он ходит на ip кубера? Ведь если он на отдельной тачке, то ничего не знает про сеть кубера.
Andrey
Я из вариантов вижу 2 решения. Организовать доступ в сеть на сетевом уровне или задеплоить некий прокси в кластер.
Mikhail [azalio]
А как он ходит на ip кубера? Ведь если он на отдельной тачке, то ничего не знает про сеть кубера.
У меня сеть подов работает во всем дц.
Mikhail [azalio]
Как вариант- поставьте прометей в кубере и сделайте ноде порт сервис и ходите в этот прометей с другого прометея
Andrey
У меня сеть подов работает во всем дц.
А расскажи подробнее? У меня calico и там своя адресация.
Mikhail [azalio]
А расскажи подробнее? У меня calico и там своя адресация.
У меня тоже калико. Анонсит сеть по bgp на роутеры