Евгений
Но кубернетис не борг так-то. Контролплейн кубернетиса не масштабируется горизонтально и нажрать 80 ядер контроллер-менеджером не так уж и сложно
George
George
Sergei
George
Я видел кубо кластера и на 1000 узлов
Sergei
и на том уровне внедрения о котором я говорю, разница между кубернетесом и номадом довольно мала
George
Есть у кого-то и на 5000
Sergei
это слёзы
Евгений
George
Евгений
И тоже не масштабируется горизонтально, как и etcd
George
А с чего
George
Ну, если там рафт под капотом - ну, очевидно, что больше узлов - хуже
George
Оптимум между 3-5
Евгений
Я к тому, что номад не скейлится, также как и кубернетис
George
Это чушь
George
Оно нормально скейлится на тысячи узлов и тысячи подов
Евгений
Тысячи подов это копейки
George
А сколько надо ? 10000? 100000?
Евгений
Ну, если у тебя тысяч нод, то адекватное число сто тысяч, понятно
George
Нет )
George
Может у меня по пять джава аппликух на узле
George
Зачем мне сотни подов, если жвм прекрасно на все ядра и так садится ?
Евгений
Ну ок, немасштабируемые средства контейнеризации подходят для компаний с монополитами. Очень впечатляющий результат. Но далёкий от того, чтобы заменить борг
George
А ты сам можешь объяснить - в чем, по твоему мнению, заключается разница между Боргом и кубером ?
Евгений
В том, что борг горизонтально масштабируется? А не от зависит от etcd, который сотней тысяч объектов убивается в кашу. И контроллер-менеджера, который глобальный лок берёт на обработку ресурсов одного типа.
Ты вынужден держать сотню кубернетисов, а можно бы один борг
Евгений
Ну, по крайней мере это так для яндекс деплоя, но думаю в случае борга логика такая же.
George
Ну, я не уверен, что в борге решили проблему - у тебя все равно должен быть Глобал стейт с локами на его изменение
George
Или шардирование какое-то
George
Сотня куберов - опять ты преувеличиваешь
George
Ну, может единицы или десятки - зависит от типа нагрузок
George
И зря ты джаву помоечным монолитом назвал ) решает задачи бизнеса ? Решает. Поддерживаемо написано? Да
George
Как пример - у нас есть вмварь на 10000 виртуалок
George
И там тоже свой оркестратор под капотом и как-то работает 🤷♂️
Евгений
Ну вот посмотри на Яндекс. Мелкая контора так-то, шесть жалких датацентров по тысяче стоек в каждом. Умозрительно две сотни тысяч физических серверов.
Как раз тебе придётся около сотни кластеров на такое держать.
George
200000 серверов. Ну, может быть и сотня кластеров. Но это уже лучше, чем 10000 кластеров ?
George
Или ты хотел бы все в один кластер запихнуть, а потом безуспешно пытаться его обновить, например
George
Это не относится к инфраструктурным решениям вроде вмвари и кубера
George
Я скорее верю в то, что можно строить ячеистую структуру и идеально, если ты сам пишешь софт, и сам задаёшь правила игры
Aleksey
George
Aleksey
George
Aleksey
Ой не то
George
Aleksey
George
George
С отрывом по затратам?
George
Вот представь себе, что у тебя реальный хайлоад. Причём с постоянно большй нагрузкой. Облако тебе в копейку влетит
George
Тот же Дропбокс не просто так уехал в свои ДЦ
Антон [R13 🍆 Ivelok]
George
От размера узлов зависит
Антон [R13 🍆 Ivelok]
Ну вот +/- стандартное лезвие - 2 CPU по 28-36 ядер и 512ram
Антон [R13 🍆 Ivelok]
Конечно можно напихать и больше,а можно и меньше
George
Ну, такой узел вполне как и берметал нода может жить
George
100 подов макс прекрасно влезет
Aleksey
Если ты в шапке прогера то облако лучше, если админа то облако лучше, если sre то облако лучше.
Aleksey
А вот когда начинается бюджет сильно зависит. Если у тя ml облако дешевле и так далее
Aleksey
Если сервить умеренно много файлов облако лучше. Если охулиард файлов не понятно. Не все дропбокс и нетфликс
Aleksey
Но делать плановые работы по обслуживанию дизель генератора лучше не самому
George
George
George
Aleksey
George
Это всё депендс
Депендс, но точно не настолько безальтернативно, как у тебя написано
Aleksey
Но в целом лучше облако чем не облако по сумме шапок в которых я бы так сказал
Sebor▂▅▇█▓▒░
Нахера вам клустеры на десятки тысяч подов? Разбейте на несколько клустеров и делегируйте управление ими 😏
Разделяй и властвуй (с)
Евгений
Евгений
Скажу как человек, управляющий тысячей :)
Sebor▂▅▇█▓▒░
Думать, как "отмасштабировать" десятки тысяч подов куда проще, да 😏
Sebor▂▅▇█▓▒░
Я поэтому и написал про делегирование
George
Sergei