а какие , вроде тестил на разных в целом было все ок , сейчас юзаю на хетзнер клауд

в IBM если удалить VM из веб-интерфейса, то она может пометиться как "canceled", но еще некоторое время висеть. Если она была создана терраформом, то есть он трэкает ее состояние, то следующим шагом может последовать желание пересоздать ее, то есть просто сделать plan/apply. И вот, если она еще не исчезла, а висит как отмененная, то плагин провайдера крэшится. Сидишь, ждешь час, пока она исчезнет.

в IBM если удалить VM из веб-интерфейса, то она может пометиться как "canceled", но еще некоторое время висеть. Если она была создана терраформом, то есть он трэкает ее состояние, то следующим шагом может последовать желание пересоздать ее, то есть просто сделать plan/apply. И вот, если она еще не исчезла, а висит как отмененная, то плагин провайдера крэшится. Сидишь, ждешь час, пока она исчезнет.

Ну это из разряда сам выстрелил себе в ногу, тут либо все терраформом либо все руками

в IBM если удалить VM из веб-интерфейса, то она может пометиться как "canceled", но еще некоторое время висеть. Если она была создана терраформом, то есть он трэкает ее состояние, то следующим шагом может последовать желание пересоздать ее, то есть просто сделать plan/apply. И вот, если она еще не исчезла, а висит как отмененная, то плагин провайдера крэшится. Сидишь, ждешь час, пока она исчезнет.

К чести терраформа провайдеры все идут отдельными бинарниками и все используют единый crud фреймворк, так что поправить любую фигню в них можно относительно легко. Вот только обратно они даже очевидные фиксы не принимают :)

Ну это из разряда сам выстрелил себе в ногу, тут либо все терраформом либо все руками

на самом деле нет 1) он должен отследить текущее состояние и применить желаемое. Неважно как мы к этому состоянию пришли 2) я рассказал о кейсе через веб-интерфейс, потому что свежо в памяти, до этого был кейс, когда нода удалялась терраформом. Он отработал, сказал, что все готово, но нода просто пометилась как отмененная и висела. Следующая попытка создать приводила к крэшу до тех пор, пока нода совсем не исчезла.

К чести терраформа провайдеры все идут отдельными бинарниками и все используют единый crud фреймворк, так что поправить любую фигню в них можно относительно легко. Вот только обратно они даже очевидные фиксы не принимают :)

это понятно, вопрос был "какие проблемы". Как их фиксить — другой вопрос.

Ну это из разряда сам выстрелил себе в ногу, тут либо все терраформом либо все руками

Тут из разряда инструмент не работает

на самом деле нет 1) он должен отследить текущее состояние и применить желаемое. Неважно как мы к этому состоянию пришли 2) я рассказал о кейсе через веб-интерфейс, потому что свежо в памяти, до этого был кейс, когда нода удалялась терраформом. Он отработал, сказал, что все готово, но нода просто пометилась как отмененная и висела. Следующая попытка создать приводила к крэшу до тех пор, пока нода совсем не исчезла.

а почему так то ? на мой взгляд должно быть логично что все управляется из терраморфа и все ожидаемо, все что делается из вне не ожидаемо и угадать нельзя и работу гарантировать тоже нельзя , это на мой взгляд логично, магии же не существует

народ подскажите плиз какой механизм соединения кубернетеса и coredns

за счет аннотаций?

>1) он должен отследить текущее состояние и применить желаемое. Неважно как мы к этому состоянию пришли а вот и нет, здесь вам не ansible

а почему так то ? на мой взгляд должно быть логично что все управляется из терраморфа и все ожидаемо, все что делается из вне не ожидаемо и угадать нельзя и работу гарантировать тоже нельзя , это на мой взгляд логично, магии же не существует

потому что, как и кубернетес, терраформ управляет состоянием. Есть текущее и есть желаемое. Как вы попали в текущее — разницы нет. Важно, что если просят желаемое оно должно быть применено. Все верно, магии нет, есть грамотная инженерия (или неграмотная).

народ подскажите плиз какой механизм соединения кубернетеса и coredns

за счет Corefile, если я правильно угадал суть проблемы

а почему так то ? на мой взгляд должно быть логично что все управляется из терраморфа и все ожидаемо, все что делается из вне не ожидаемо и угадать нельзя и работу гарантировать тоже нельзя , это на мой взгляд логично, магии же не существует

к тому же, вас же не смущает, что в амазоне, пáкете, висфере, и еще много где оно работает именно так

потому что, как и кубернетес, терраформ управляет состоянием. Есть текущее и есть желаемое. Как вы попали в текущее — разницы нет. Важно, что если просят желаемое оно должно быть применено. Все верно, магии нет, есть грамотная инженерия (или неграмотная).

в кубере вообще так тоже не работает )))) как вы говорите

за счет Corefile, если я правильно угадал суть проблемы

вот мне просто не совсем понятно мы установили кластер через kubeadm, далее хотим сделать логирование fluentd и coredns, мне непонятно за счет какого примитива происходит service discovery именно в coredns

вот мне просто не совсем понятно мы установили кластер через kubeadm, далее хотим сделать логирование fluentd и coredns, мне непонятно за счет какого примитива происходит service discovery именно в coredns

> установили через kubeadm Понятно, читайте доку по плагину kubernetes для coredns

> установили через kubeadm Понятно, читайте доку по плагину kubernetes для coredns

в доке этого не написано

> установили через kubeadm Понятно, читайте доку по плагину kubernetes для coredns

там написано про аннотации

> установили через kubeadm Понятно, читайте доку по плагину kubernetes для coredns

там написано что за счет селектора и аннотации происходит запрос но я думаю может кто даст почитать более детально

там написано что за счет селектора и аннотации происходит запрос но я думаю может кто даст почитать более детально

https://github.com/kubernetes/dns/blob/master/docs/specification.md

https://github.com/kubernetes/dns/blob/master/docs/specification.md

спасибо

на эту же спеку дока и ссылается

господа, добрый день. расскажите у кого как elasticsearch развернут в кубике?

господа, добрый день. расскажите у кого как elasticsearch развернут в кубике?

https://github.com/upmc-enterprises/elasticsearch-operator с ванильными образами

https://github.com/upmc-enterprises/elasticsearch-operator с ванильными образами

а данные где лежат?

а данные где лежат?

aws ebs

aws ebs

а кластер кубернетиса тоже там?

а кластер кубернетиса тоже там?

ага

не eks

но будьте с этим оператором поосторожнее

я не могу так сделать, мне надо хоститься в рф

Вам в любом случае придется самим проверять, подходит ли вам производительность сетевых дисков\local volume\чего бы то ни было

привет. подскажите, как побороть проблему. после обновления куба не стартует waves, в логах: weave-cni: error removing interface "eth0" weave-cni: unable to release IP address в гугле пока что решения не нашёл

Вам в любом случае придется самим проверять, подходит ли вам производительность сетевых дисков\local volume\чего бы то ни было

я так вижу, что мне придётся таки развернуть что-нибудь типа ceph. хотя меня тут напугали, что это почти 100% путь в бездну

я так вижу, что мне придётся таки развернуть что-нибудь типа ceph. хотя меня тут напугали, что это почти 100% путь в бездну

вообще, не зря пугают

я так вижу, что мне придётся таки развернуть что-нибудь типа ceph. хотя меня тут напугали, что это почти 100% путь в бездну

и чтобы он управлялся rook'ом

ну а выход я вижу только на хост прокидывать и делать affinity, но тогда смысла вообще никакого от кубернетиса

попробовать то можно, но я бы рекомендовал отработать сценарий полной потери данных, переустановку и восстановление с бэкапов

зачем вообще эластик пихать в Кубер ?

попробовать то можно, но я бы рекомендовал отработать сценарий полной потери данных, переустановку и восстановление с бэкапов

ну это да, само собой

иначе это как-то несерьезно

зачем вообще эластик пихать в Кубер ?

чтобы делать его (кубер) лучше

зачем вообще эластик пихать в Кубер ?

да собственно за тем же, за чем вообще в принципе что-то пихать в кубер

какая вообще связь между эластик и "кубер стал лучше"

ну а выход я вижу только на хост прокидывать и делать affinity, но тогда смысла вообще никакого от кубернетиса

А хоститься вы где собираетесь-то?

какая вообще связь между эластик и "кубер стал лучше"

ну как же, оно не работает, постите ишью, их закрывают, куб становится лучше. Глядишь, и сторадж появится вменяемый через пару лет. Или нет.

А хоститься вы где собираетесь-то?

селектел

ну как же, оно не работает, постите ишью, их закрывают, куб становится лучше. Глядишь, и сторадж появится вменяемый через пару лет. Или нет.

А что не так с текущим стораджем?

А что не так с текущим стораджем?

ну вон человек не знает куда данные класть. Его бездной пугают.

селектел

У них же вроде опенстек и есть сетевые диски. может, вам их хватит?

У них же вроде опенстек и есть сетевые диски. может, вам их хватит?

ну тогда получится, что это local persistent volume и привязка экземпляра с данными к конкретной ноде кубера. ну или я не понял что вы имели в виду

ну тогда получится, что это local persistent volume и привязка экземпляра с данными к конкретной ноде кубера. ну или я не понял что вы имели в виду

Я имею ввиду сетевые блочные устройства

@badfin тебе нужен local volume provisioner, он сам все привяжет

@badfin тебе нужен local volume provisioner, он сам все привяжет

если не сетевые, то так

Емнип кибана сама умеет реплицироваться между несколькими экземплярами

Емнип кибана сама умеет реплицироваться между несколькими экземплярами

но не кроссдц?)

Кибана? Реплицироваться?

так

кибана это же морда

а емана, я про эластик подумал

кибана это же морда

Эластик, конечно

вот эластик лучше в кубер не пихать ) пихайте кибану )

иначе у вас будет кубер не про микросервисы, а про io ботлнэки

но это моё имхо, можете кидать в меня тухлыми томатами

но это моё имхо, можете кидать в меня тухлыми томатами

ну, опять же, зависит от кучи нюансов. у меня пока 30 гигов логов в день, например, полет нормальный, скоро пихну туда еще больше и посмотрю.

Это почему же ?

вот эластик лучше в кубер не пихать ) пихайте кибану )

Пихал, пихаю и буду пихать) Отлично работает, серьёзно )

Пихал, пихаю и буду пихать) Отлично работает, серьёзно )

поделитесь как пихали)

конкретно про диск интересует

конкретно про диск интересует

ща тебе скажут мол амазон и привет

Раньше была распределённая фс от dell, порядка 2тб в месяц. Сейчас прибиваю ноды просто на локал

!спам

вот эластик лучше в кубер не пихать ) пихайте кибану )

а еще лучше logstash в кубер, а кибана и еластик на отдельном хосте не в кубере

хз, кибана сама по себе норм сервис, почему бы ей не крутиться в кубере ?

Ребят, у меня вопрос Есть ли смысл организовывать k8s кластер в GKE для следующей задачи: есть например 5к ip адресов, я хочу просканировать на них порты с помощью nmap чтобы не грузить 1 в данном случае pod, я хочу распределить эти 5к ip адресов на 10 подов по 500 адресов Вопрос, имееет ли это смысл? ведь nmap потребляет в основном сетевые ресурсы, а они, насколько я понял, будут общие у некоторых подов Я только начинаю курить k8s, сильно не пинайте пожалуйста, если полный бред написал :)

rpc порты кошельков ищешь ?))

открытые дашборды кубернетеса )

не проще поднять 10 виртуалок - загрузить туда скрипт с адресами и nmap-ом и запустить одновременно на всех ансиблом? 🤔