Andor
нет, не очень
Vladimir
@Andorka а окупаться оно начинает где-то от сотни хостов
Andor
ну хуй знает где у вас зарплата чувака занимающегося закупками железа будет ниже, чем оплата ещё пачки хостов в амазоне
Andor
возможно нет
Andor
возмоно у меня в голове доллар по 30 рублей
Andrey
ну хуй знает где у вас зарплата чувака занимающегося закупками железа будет ниже, чем оплата ещё пачки хостов в амазоне
У амазона есть калькулятор для сравнения. И он достаточно честно иногда показывает, что стоит остаться.
Andrey
в смысле остаться в DC
Andrey
и он учитывает траты на staff
Sergei
большие компании живут в амазоне только по причине технологической импотенции
Andor
да понятно что большие компании будут в дц жить
Vladimir
да понятно что большие компании будут в дц жить
бывают и обратные примеры - когда большие компании уезжают в Амазон и становятся счастливы. Впрочем адекватность таких контор и переездов я бы ставил под сомнение
Andrey
большие компании живут в амазоне только по причине технологической импотенции
либо слишком быстро развиваются, когда DC в новом регионе нужен вчера
Andor
вот на прошлой работе, @azalio не даст соврать, было 3-4 тыщи железных хостов в разных дц и с ними был постоянный геморрой
Andor
щас у меня меньше 100 хостов в амазоне и мне прекрасно :)
Sergei
ну так это больше о тебе говорит
Andor
(потому что только пришёл и нихуя не успел наломать конечно)
Andrey
в этот момент они ещё не считают деньги
или у них реально работает scaling, и они живут на spot-instances
Anton
облака это в первую очередь экономия на времени во-вторую - на специалистах дальше уже никакой экономии нет )
Sergei
а в чем гиморой был?
я тебе скажу в чем был геморрой на моей позапрошлой работе с 3-4 тыщами железных хостов
Sergei
всё вручную, блядь
Sergei
и всё надо вчера
Andor
ну как обычно с железом - то прошивка сетевухи заглючит, то диски сдохнут и менять надо
Vladimir
или у них реально работает scaling, и они живут на spot-instances
я видел контору которая прод держала на спотах
Vladimir
закончилось плачевно
Anton
я тебе скажу в чем был геморрой на моей позапрошлой работе с 3-4 тыщами железных хостов
при этом железные хосты тоже автоматизируются затраты только выше и требования к специалистам
Sergei
там в конечном счете автоматизировали
Sergei
но это стоило мне годового курса антидепрессантов после
Sergei
и +25 кг нажранного веса :)
Andor
ну вообще согласен, что большая часть без от недостатка автоматизации
Anton
ну как обычно с железом - то прошивка сетевухи заглючит, то диски сдохнут и менять надо
один локалхост админ и адекватные техработы в самом DC решают такие проблемы
Andor
и самому эту автоматизацию на уровне дц делать тот ещё гемор
Anton
при этом полно проектов на AWS без автоматизации вообще)
Anton
в каждом дц?
зависит от
Andor
automate all the things
Mikhail [azalio]
какие все тут продвинутые автоматизаторы!
Andrey
Дайте по теме задать: кто-нибудь встречался с тем, что Kubelet тратит очень много CPU sys времени на du, find и т.д. Есть способы борьбы, кроме более мощной машины или меньшего количества подов?
A
Народ, вот читаю я ваши проблемы и чем дальше в лес тем меньше мне хочется кубера ставить на свои сервера. Такое чувство что собственное облако запилить менее проблематично чем куберу отдать
A
О вот это позитивчик
A
Видимо все в рукам сводится
Vitalii
вспомнился доклад по теме https://www.youtube.com/watch?v=NElaNl1Kwkw&index=40&list=PLj6h78yzYM2P-3-xqvmWaZbbI1sW-ulZb
Andor
Ты полгода херачил круглые сутки чтобы все пробемы решить
Mikhail [azalio]
Vitalii
Кто-нибудь уже поставил coredns вместо kube-dns?:)
Anton
Дайте по теме задать: кто-нибудь встречался с тем, что Kubelet тратит очень много CPU sys времени на du, find и т.д. Есть способы борьбы, кроме более мощной машины или меньшего количества подов?
это похоже cadvisor из кубелета собирает инфу про хост. вероятно его можно ограничить немного. оригинальный cadvisor можно было попросить реже выполнять сбор статистики либо вовсе выключить некоторые
Andor
Была такая проблема с cadvisor и overlay драйвером
Andor
Не overlay2
Andor
Обновление тогда помогло, цадвизор был стендалон, не в кубелете
Andrey
Понял. Что-то нет параметров kubelet'у, чтобы как-то cAdvisor настроить.
Andrey
@Andorka А это не ты в баг Helm'а влетел? :) https://github.com/kubernetes/helm/issues/3322#issuecomment-364882315
Andor
вряд ли, я им не пользовался ни разу и на гитхабе у меня акк просто Andor
Andrey
А чем kubernetes_ru деплоит?
Andor
у нас самодельные костыли на питоне
Anonymous
Всем привет А кто-то в миникубе девелопит? Сейчас делаю все докер-компоузом, т.к. там просто примаунтить локальную директорию с кодом, базейки и кеши запустить. Потом докер-компоуз ран и запускаю командочки в контейнере. Но прод-то на к8с и хочется сразу в нем же и девелопить. Я так понимаю, что примаунтить локальные директории в к8с - это не так просто как в компоузе. Может быть кто-то подскажет возможно ли это и можно ли где-то посмотреть пример
Anonymous
Ах, да, представляюсь при входе в гпуппу. Работаю Infrastructure Lead-ом в zalando.de (Berlin), занимаюсь инфраструктурой платежей для Заландо, AWS, K8S, Jenkins, Terraform, Vault, Ansible, Docker
Anonymous
Это читал, но оно же не синхронизирует. Я после запуска менял файлы на хостовой ОС, а до контейнера оно не дошло
Anonymous
У кого-то в компаниях девелоперы занимаются разработкой и дебагом именно в миникубах?
Andor
у нас к сожалению пока тоже на докер композе
Maksim
у нас к сожалению пока тоже на докер композе
Это уже прогресс. Да и перевод композа в k8s не великая проблемма
Anonymous
Те же кубернетесовские стейтфулсеты и кронджобы в компоузе не проэмулируешь, а хочется
Andor
да понятно что невеликая, надо сесть и заняться
Anonymous
в компоузе можно docker-compose build && docker-compose run запустить. в миникубе же придетс отдельно контейнер билдить, а потом ранить
Andor
что так запускать ./build && ./run, что эдак
Anonymous
так я вот и думал, что может кто-то уже эти велосипеды изобрел
Anonymous
что б оно само проверяло при билде, какой именно контейнер надо перебилдить, а в каком нет изменений и можно просто запускать
G72K
еще момент, в отдельных странах всю полноту ответственности по хранению sensitive data несешь сам
У Experian увели вообще все что можно, и ничего - все еще в бизнесе, никаких последствий ) в реальном мире никто никакой ответственности не несет
G72K
умеет
Покажите