George
ОЧЕНЬ КРУТОЙ ДОКЛАД
George
вопрос только один - есть ли РЕАЛЬНАЯ экономическая эффективность, потому что разработка и поддержка этого решения явно денег стоит @StanislavKhalup Ну, или сколько ФОТ сэкономили на ненужных инженерах ЦОД?
George
и не будет ли такого, что кубер будет слишком быстро меняться и не будете успевать подпиливать свои модули (здесь тогда рождается "гениальная" идея отдать их в опенсурс и попробовать пропихнуть в апстрим куба - меньше проблем на поддержке)
George
это раз
George
два - как такое отлаживать? Система сложная - можно попробовать все замокать, а потом оно пыщ-пыщ и в продакшене взорвется
George
но вообще. блин.. я очень завидую. Вы очень крутые.
George
всякие пост-хуки и адмишшен контроллеры свою мета добавляют - как ее в гите хранить
George
опять абстракция над абстракцией
Stas
Когда ты завис по объемам инфраструктуры где-то между очень большим энтерпрайзом и гиперскейлером и начинаешь двигаться в сторону гиперскейлера то приходится начинать думать по другому.
Stas
Никакой опеншифт не решит эти проблемы потому что он юзает апстримный metal3.
Stas
И его ключевой кастомер опеншифт а -. Жирный Энтерпрайз который перетаскивает Легаси по чуть чуть
Stas
Они не думают категориями 200 хостов в cell 800 в az
Stas
А вот мне пришло 500 хостов за раз и сколько я должен ждать недель пока их внесут в нетбокс, пока админы накатят роли, пока передадут записки с кредамт к bmc
George
это я понимаю. Просто я реально удивлен, что у Тинькофа такая большая инфра. Сколько я видел компаний (энтепрайз) - у всех есть легаси IT отдел, который вполне справляется с 1000-ми серверов. Не 10000. И все ОК.
George
И его ключевой кастомер опеншифт а -. Жирный Энтерпрайз который перетаскивает Легаси по чуть чуть
перетаскивает == переписывает? Ибо тот же опыт РГС - они не пихают в шифт не in-house разработку
George
@StanislavKhalup
George
https://t.me/docker_ru/163739
George
👍👍👍👍👏👏👏👏👏
Отделение Bereke Bank
Эхх а в нашем зажопинске нет крутых конференций 😒 только вот недавно слерм приезжал, рассказал базовые вещи про куб
Stas
George
Там на железе не экономят, но и ресурсов простаивает тоже прилично
зато они явно черную пятницу переживут 😂😂😂😂😂
Sebor▂▅▇█▓▒░
зато они явно черную пятницу переживут 😂😂😂😂😂
Ну с учётом, какие продукты они продают - конечно переживут
George
1. что делаете в случае если сервер глючит или вышел из строя? Как помечаете, что его нельзя использовать? Как потом его заменяют? Это делают инженеры ДЦ? А потом поставщику? Или в лабораторию для препарации? 2. что с хранилищем? Ну, ок, мы нарезали компьют ноды - но они все без дисков. Подключаете NFS? Ceph? Или вообще в этом кластере в принципе нет никакого персистентного хранения? И деплоите в него только эфемерные, стейтлес сущности?
Stas
2) выбираем сейчас. Nfs не будет точно - я против
Stas
Сефа не будет - это дорого
G72K
@kvaps https://youtu.be/QLzL-yPC-jo?t=5512 Во я отстрелялся
Очень крутой доклад. Я только не понял, историю с редисом, там хранится только инфа о железе, которая периодически обновляется постами с агента?
Stas
Угу
Stas
Это не персистентный кеш
Sebor▂▅▇█▓▒░
1) можно удалить bmh и выключить. Дальше инженер дц
А как давно появились инженеры ДЦ? В мою бытность этим занимались исключительно сисадмины
Stas
А как давно появились инженеры ДЦ? В мою бытность этим занимались исключительно сисадмины
Я не знаю. У нас вообще универсальных админов нет. У нас отделы по функционалу
Sebor▂▅▇█▓▒░
2) выбираем сейчас. Nfs не будет точно - я против
А почему нет? В тинькоффе его умеют готовить
George
иногда - это часть команды, иногда это именно ребята, которые работают в ДЦ и это сотрудники именно ЦОДа
Sebor▂▅▇█▓▒░
у нас они были всегда
А у вас - это где?)
Stas
А почему нет? В тинькоффе его умеют готовить
Вот потому что умеем худо бедно потому и знаем что как не приседай 5мс летенси лучший результат
George
А у вас - это где?)
тебя интересует название конторы? Все сложно, но на всех местах, где я был
Stas
А ну ещё мы же ворклойды в Кате собираемся гонять. Там только блочный снепшоттер и только быстрый диск под руты контейнеров. Боюсь на себе будет всё тормозить это
G72K
Это не персистентный кеш
Ваш matchbox потом эту инфу о железе использует как то для генерации ignition? Просто не совсем понятно, сервера же разные могут быть, а у вас из-за автодискавери везде как будто один ignition разливается
Stas
Вы и базы данных там крутить будете, как ваши SQL админы это восприняли?
Базы нет. Оверхеды большие. Базы на отдельных пулах но это не приоритетная задача
G72K
Базы нет. Оверхеды большие. Базы на отдельных пулах но это не приоритетная задача
А , вы через cluster API будете разливать ноды, которые потом ни в какой куб добавлены не будут?
Sn00part
опенсорсить будете? )
Sn00part
или уже?)
Stas
Ваш matchbox потом эту инфу о железе использует как то для генерации ignition? Просто не совсем понятно, сервера же разные могут быть, а у вас из-за автодискавери везде как будто один ignition разливается
Наш мэтчбокс вообще ниче не генерит он просто отдает контент секрета. А генерит секрет наш бутстрап провайдер, смешанный с системой генерации игнишена из темплейтоа. А там если надо можно по хв профайлу погенерить разное, но вообще задача унифицировать сервера
Sn00part
дижитал ребар есть, подобный, но он там полуплатный и траф гоняет через свои серваки, что отсекает сразу 90% клиентов
Stas
дижитал ребар есть, подобный, но он там полуплатный и траф гоняет через свои серваки, что отсекает сразу 90% клиентов
Смотрели, не понравилось плюс у них всё жёстко на дхцп повязано, плюс оно кубом не крутится через оператор
Sn00part
в банке СБ не пропустит все равно такой софт )
Sn00part
а они там хотят очень много денег все равно, ченить по 200 баксов за голову в год.
Stas
У меня началось отвращение на этапе того как сверстана документация. У людей нет вкуса банально. Как можно выбирать программный продукт у команды которого нет понимания того что такое красиво
G72K
дижитал ребар есть, подобный, но он там полуплатный и траф гоняет через свои серваки, что отсекает сразу 90% клиентов
Ну платность она такая :) система описанная в докладе на вид минимум месяца 3-5 командой 3-5 человек
Sn00part
опенсорснуть и монетизировать! )
G72K
3 и 3
И работа еще не закончена! :)
Stas
При учёте того что есть ci, отдельный режим для работы с виртуалками в опенстеке и покрытие тестами
Sn00part
Стас, так будете опенсорсить нет?)
Stas
Посмотрим. С опенсорсом же вопрос не жадности и ресурсов
Stas
Чтобы это влить в апстрим надо кучу времени потратить
Sn00part
да это я понимаю
Sn00part
у меня есть клиенты, которым это возможно интересно будет
George
а ты в аутсорс работаешь, что ли?
Sn00part
я да
Sn00part
есть контракт с конторой, все остальное время, пока не сплю, на себя все )
George
молодец
George
у тебя нет трех детей 😂😂😂😂😂
Sn00part
есть один, жена за второго ))
Sn00part
https://selectel.ru/events/cloud-evening/ селектел будет вещать про истио !