Салтыдык
V 🏴‍☠️
я тоже поглядывал на hashicorp стек)
Я его активно внедрял и использовал. Очень нравилось. С кубом нет таких приятных ощущений, всё время думаешь, что кто то тебя ебёт
Салтыдык
ахах)
Andrey
https://m.habr.com/ru/company/lamoda/blog/451644/ Есть вот такое)
Lucky SB
Стоит 1.15.2 и helm 2.14.3, всё ок
устарело и все в дырках. срочно обновляйся до 1.15.5 ;)
V 🏴‍☠️
V 🏴‍☠️
Но к 1.16 я пока не готов
Andrey
1.15.5... в понедельник обновлялся, было 1.15.4 штампуют как пирожки
Andrey
пора на 1.16, а то 1.17 вот вот подступит :)
Марат
кажется Lucky SB иронизировал...
Andrey
да это я понял, что ирония. Но факт, что штампуют как пирожки. А на 1.16 стоит только из-за "наконец то решили впилить etcd client 3.3.15?"
Михаил
У кого-нибудь есть рабочий пример chart library из helm 3?
𝚔𝚟𝚊𝚙𝚜
@pjamm, а ты будешь свой доклад публиковать? - он очень крутой! ;)
Pavel
@pjamm, а ты будешь свой доклад публиковать? - он очень крутой! ;)
Да, мы сейчас делаем расшифровку на хабр. В ближайшее время выложим.
𝚔𝚟𝚊𝚙𝚜
А про что доклад был?
Про безопасность в кубе
Rainbow
https://m.habr.com/ru/company/lamoda/blog/451644/ Есть вот такое)
печальная статья, звучит как "мы ушли потому что не разобрались с zero downtime и не дошли до node drain".
Dmytro
Lamoda вроде бы не сильно продвинутая контора же
Sergei
довольно неплохо продвинутая 😉
Rainbow
В ру сенменте с инфой про nomad совсем все печально. Вакансий 0, коментов 2-3 штуки. А по факту - кривораскатанный левой ногой стабильно работает уже пол года, ровно 0 проблем. - нет CNI от чего я лично тащусь (нет заморочек iptables вообще, network mode host)
Yaroslav
довольно неплохо продвинутая 😉
шмотки для сотрудников по скидке 😉
Салтыдык
так, что за рекрутинг?
Anonymous
а ведь можно построить гибридное облако из k8s+nomad склеив их в сервис-меш да?
Rainbow
можно запустить nomad в kubernetes чтобы рулить чем-то вне сети куба (потому что nomad легкий и не нужно делать vpn). А так смысла не вижу больше.
Rainbow
github<com>kelseyhightower/nomad-on-kubernetes
Anonymous
ну вроде как у nomad оверхед поменьше или нет? я думал на чувствительное места его закинуть чтобы сделать сорт оф edge computing там где ресурсы и траффик важны
Anonymous
но кажется что проще без этого все делать тогда и просто vpn прокинуть до vm
Rainbow
оверхед на порядок меньше и нет требования плоской сетки, потому что это просто шедулер голый
Dmytro
довольно неплохо продвинутая 😉
Я бы не сказал > У нас принят такой подход, что каждая команда отвечает за docker images своих систем самостоятельно. Девопс же предоставляют общую инфраструктуру, необходимую для деплоя, то есть поддержку самого кластера, поддержку CI-системы и так далее. И на тот момент у нас более 60 систем переехали в Nomad, получилось порядка 2 тысяч контейнеров.
Vladyslav
Ребят, а кто-то деплоил через Кубернетис ларавель (пхп) приложение? Есть вопрос, как НЕ дублировать код в 3х местах - веб (пхпфпм), крон (cli) и очередь (cli). Как это правильно сделать все?
Dmytro
Собрал один образ, запускаешь с разными entry point
Vladyslav
Можно один и тот же образ использовать для всего жеж
Ага, его создавать как базовый, а потом из него делать уже конкретные(через FROM) ? Я верно понял?
Vladyslav
Собрал один образ, запускаешь с разными entry point
Собрать образ понял, а разные этнри поинты не понял как
Tamerlan
для cron'a вообще есть отдельная сущность в кубере
Vladyslav
запускать контйнер с разными значениями command
Ага, окей 👌🏻 Попробуем, спасибо 🙂
Vladyslav
а перед fpm еще nginx)
Угу, fpm и nginx в одном поде
Lucky SB
Из одного образа с кодом
Dima
Всем добрый вечер, второй день не могу решить проблемку: Использую microk8s на одном сервере. Поднял Deployments конфиг(порт 1883/tcp) + поднял сервис так же 1883 пор. На сервере если вводить ip clusterа deploymentsa то через клиент подключиться могу, а из внешней сети не получается, я думаю проблема в проброске портов. с помощью ufw открыл, но в netstat не вижу
Dima
Могу скинуть выводы с netstat
Dima
и ufw
Dima
Dima
Sergey
Кто нибуть гоняет istio на машинах не кубе? В проде в больших количествах?
CMy3u🐈
Чёт не вижу чтобы 1883 порт слушал
Евгений
> 127.0.0.1:1883
George
истио же под куб заточен
Dima
> 127.0.0.1:1883
а как под весь сервер сделать?)
Sergey
истио же под куб заточен
Ну есть способ его гонять на машинах еще в гугле. Даже работает, вопрос если кто то это серьезно гонял
George
на виртуалках? а зачем?
Sergey
на виртуалках? а зачем?
Когда нету куба везде
Sergey
Точнее почти нету
George
ну, понятно, что меш
George
просто как ты будешь инжектировать прокси энвоевский
George
в кубе понятно - сайдкарт + немного файрвольной магии
Nick
О, Рома привет ))
G72K
оверхед на порядок меньше и нет требования плоской сетки, потому что это просто шедулер голый
Ну так и пользуйтесь кубом с hostNetwork: true везде, тоже без CNI работает :)
Hankey
Доброе утро! Товарищи, может кто знает ответ на подобный вопрос. Когда создаешь новый деплоймент, указываю cpu limits, например, 200. Собственно вопрос в том, как посчитать, какому приложению сколько нужно cpu limits?
George
нагрузочное тестирование даст тебе ответ
George
200 - это мало. Насколько я помню, это 0.2 ядра
Hankey
да, это мало, но и приложения сами потребляют мало. Дело в том, что их порядоком 60 штук, и я исчерпал весь лимит CPU. При этом, нагрузка на CPU на рабочих нодах не превышает 15%
Sergey
Доброе утро! Товарищи, может кто знает ответ на подобный вопрос. Когда создаешь новый деплоймент, указываю cpu limits, например, 200. Собственно вопрос в том, как посчитать, какому приложению сколько нужно cpu limits?
Если ты указываешь только лимит он автоматом становится requests то есть гаранти. У тебя 0.2×60 сейчас требования не важно сколько жрет аппликации
Й
да, это мало, но и приложения сами потребляют мало. Дело в том, что их порядоком 60 штук, и я исчерпал весь лимит CPU. При этом, нагрузка на CPU на рабочих нодах не превышает 15%
Убрали лимиты по cpu. Для фичеров оно вносит только сложности. Потому что разраб задеплоил, потестил, и забил на этот фичер пока он по ттл не удалится. Так что там лимит особо не нужен (в нашем случае) (по памяти оставили)
Hankey
но все же надо как-то ограничивать контейнеры. Мб указывать cpu request?
George
норм практика limit = requests
Hankey
для запуска некоторых приложений, например на liferay или glassfish такое может не прокатить, т.к. им нужно больше ресурсов на запуск
Sergey
CPU limit иногда бьют по GC. Видел такое в ГО апликациях