Евгений
Но кубернетис не борг так-то. Контролплейн кубернетиса не масштабируется горизонтально и нажрать 80 ядер контроллер-менеджером не так уж и сложно
George
Я видел кубо кластера и на 1000 узлов
Sergei
и на том уровне внедрения о котором я говорю, разница между кубернетесом и номадом довольно мала
George
Есть у кого-то и на 5000
Sergei
это слёзы
Евгений
номад вполне себе масштабируется
А в какую базу он пишет? ;)
Антон [R13 🍆 Ivelok]
А в какую базу он пишет? ;)
Я точно не помню, но вроде там консул... Который пишет в etcd? 🌚
Евгений
И тоже не масштабируется горизонтально, как и etcd
George
А с чего
George
Ну, если там рафт под капотом - ну, очевидно, что больше узлов - хуже
George
Оптимум между 3-5
Евгений
Я к тому, что номад не скейлится, также как и кубернетис
George
Это чушь
George
Оно нормально скейлится на тысячи узлов и тысячи подов
Евгений
Тысячи подов это копейки
George
А сколько надо ? 10000? 100000?
Евгений
Ну, если у тебя тысяч нод, то адекватное число сто тысяч, понятно
George
Нет )
George
Может у меня по пять джава аппликух на узле
George
Зачем мне сотни подов, если жвм прекрасно на все ядра и так садится ?
Евгений
Ну ок, немасштабируемые средства контейнеризации подходят для компаний с монополитами. Очень впечатляющий результат. Но далёкий от того, чтобы заменить борг
George
А ты сам можешь объяснить - в чем, по твоему мнению, заключается разница между Боргом и кубером ?
Евгений
В том, что борг горизонтально масштабируется? А не от зависит от etcd, который сотней тысяч объектов убивается в кашу. И контроллер-менеджера, который глобальный лок берёт на обработку ресурсов одного типа. Ты вынужден держать сотню кубернетисов, а можно бы один борг
Евгений
Ну, по крайней мере это так для яндекс деплоя, но думаю в случае борга логика такая же.
George
Ну, я не уверен, что в борге решили проблему - у тебя все равно должен быть Глобал стейт с локами на его изменение
George
Или шардирование какое-то
George
Сотня куберов - опять ты преувеличиваешь
George
Ну, может единицы или десятки - зависит от типа нагрузок
George
И зря ты джаву помоечным монолитом назвал ) решает задачи бизнеса ? Решает. Поддерживаемо написано? Да
George
Как пример - у нас есть вмварь на 10000 виртуалок
George
И там тоже свой оркестратор под капотом и как-то работает 🤷‍♂️
Евгений
Ну вот посмотри на Яндекс. Мелкая контора так-то, шесть жалких датацентров по тысяче стоек в каждом. Умозрительно две сотни тысяч физических серверов. Как раз тебе придётся около сотни кластеров на такое держать.
George
200000 серверов. Ну, может быть и сотня кластеров. Но это уже лучше, чем 10000 кластеров ?
George
Или ты хотел бы все в один кластер запихнуть, а потом безуспешно пытаться его обновить, например
Евгений
Или ты хотел бы все в один кластер запихнуть, а потом безуспешно пытаться его обновить, например
Почему безуспешно? Ты не веришь в существование отказоустойчивых приложений, которые умеют кататься канареечно?
George
Это не относится к инфраструктурным решениям вроде вмвари и кубера
George
Я скорее верю в то, что можно строить ячеистую структуру и идеально, если ты сам пишешь софт, и сам задаёшь правила игры
George
Вечер ахуительных историй
А то! Гифку с котом!
Aleksey
George
Aleksey
Ой не то
George
Норм
Aleksey
Норм
Таки то ?
George
Вечер ахуительных историй
А ты сам что думаешь?
Aleksey
А ты сам что думаешь?
Я думаю что кубер в облаке сильно лучше баша в своей стойке
George
Я думаю что кубер в облаке сильно лучше баша в своей стойке
А кубер в своей стойке и с налаженными процессами в компании ?
Aleksey
А кубер в своей стойке и с налаженными процессами в компании ?
Смотря какую шапку надеть. Но облако выигрывает с большим отрывом
George
С отрывом по затратам?
George
Вот представь себе, что у тебя реальный хайлоад. Причём с постоянно большй нагрузкой. Облако тебе в копейку влетит
George
Тот же Дропбокс не просто так уехал в свои ДЦ
George
От размера узлов зависит
Антон [R13 🍆 Ivelok]
Ну вот +/- стандартное лезвие - 2 CPU по 28-36 ядер и 512ram
Антон [R13 🍆 Ivelok]
Конечно можно напихать и больше,а можно и меньше
George
Ну, такой узел вполне как и берметал нода может жить
George
100 подов макс прекрасно влезет
Aleksey
С отрывом по затратам?
С отрывом по колву шапок
Aleksey
Если ты в шапке прогера то облако лучше, если админа то облако лучше, если sre то облако лучше.
Aleksey
А вот когда начинается бюджет сильно зависит. Если у тя ml облако дешевле и так далее
Aleksey
Если сервить умеренно много файлов облако лучше. Если охулиард файлов не понятно. Не все дропбокс и нетфликс
Aleksey
Но делать плановые работы по обслуживанию дизель генератора лучше не самому
George
А вот когда начинается бюджет сильно зависит. Если у тя ml облако дешевле и так далее
От задач зависит. Постоянная нагрузка - железо лучше. Переменная - да, облако может даже дешевле выйти
Aleksey
Нет
Это всё депендс
George
Это всё депендс
Депендс, но точно не настолько безальтернативно, как у тебя написано
Aleksey
Но в целом лучше облако чем не облако по сумме шапок в которых я бы так сказал
Sebor▂▅▇█▓▒░
Нахера вам клустеры на десятки тысяч подов? Разбейте на несколько клустеров и делегируйте управление ими 😏 Разделяй и властвуй (с)
Евгений
Скажу как человек, управляющий тысячей :)
Sebor▂▅▇█▓▒░
Думать, как "отмасштабировать" десятки тысяч подов куда проще, да 😏
Sebor▂▅▇█▓▒░
Я поэтому и написал про делегирование