Artem

и вообще, как будто вы докер-контейнеры под это не генерите аналогичным образом, которые потом так же очищаете

Для этого у нас https://github.com/spotify/docker-gc есть

Сергей

походу кто то грохнул апи. или etcd =) посмотри хоть что там поверх докера крутится

у меня rancher. да я чистил контейнеры остановленые в подах(

Vadim

чат, играем в игру "почему у меня сеть рвет коннект, никаких деталей"

Сергей

походу кто то грохнул апи. или etcd =) посмотри хоть что там поверх докера крутится

Помоги пожалуйста разобраться с этим( всё упало(

Andor

чат, играем в игру "почему у меня сеть рвет коннект, никаких деталей"

пиши тикет сетевикам

Gleb

чат, играем в игру "почему у меня сеть рвет коннект, никаких деталей"

потому что может

Max

Кто-нибудь настраивал OVH LoadBalancer (failover ip) для работы с Kubernetes Service type: LoadBalancer ? https://www.ovh.com/world/solutions/load-balancer/

Нет желающих написать такой контроллер для куба? Не за бесплатно, естессна

Max

и запушить его на гитхаб... я думаю не я один захостил куб в OVH

Михаил

у меня тоже есть мысли увозить в S3 всю статику. Только вот проблема, что статики на 50Гб и по несколько коммитов ежедневно. + несколько окружений с разными ветками. хз как разруливать эту порочность

не понял проблему со статикой

Салтыдык

не понял проблему со статикой

проблема в том, что переехав на S3 я теряю систему контроля версий. Есть статика и есть скрипты. Пока это всё находится в одном git-проекте.

Михаил

проблема в том, что переехав на S3 я теряю систему контроля версий. Есть статика и есть скрипты. Пока это всё находится в одном git-проекте.

в s3 было версионирование емнип

Artem

не понял проблему со статикой

Проблема со статикой в общем случае: есть приложение на ruby/python/nodejs/... Оно при сборке генерирует ассеты (html, css, fonts ...) очень желательно эту статику сервить отдельно от самого приложения

Михаил

Проблема со статикой в общем случае: есть приложение на ruby/python/nodejs/... Оно при сборке генерирует ассеты (html, css, fonts ...) очень желательно эту статику сервить отдельно от самого приложения

ну пусть плюёт в бакет поставьте на бакет TTL и оно будет умирать

Сергей

походу кто то грохнул апи. или etcd =) посмотри хоть что там поверх докера крутится

есть варианты спасения всего этого? потому что я уже и восстановил бекап и ничего(

Салтыдык

в s3 было версионирование емнип

на AWS есть. В моём случае речь о minio, в котором этого по дизайну нет

Михаил

на AWS есть. В моём случае речь о minio, в котором этого по дизайну нет

Придется ехать на ceph )

Салтыдык

Придется ехать на ceph )

ну уж нет) Всегда есть костыли: https://github.com/s3git/s3git

Сергей

помогите как с этим бороться, очень срочно This cluster is currently Updating; areas that interact directly with it will not be available until the API is ready. [controlPlane] Failed to bring up Control Plane: Failed to verify healthcheck: Failed to check https://localhost:6443/healthz for service [kube-apiserver] on host [95.213.204.90]: Get https://localhost:6443/healthz: read tcp [::1]:51996->[::1]:6443: read: connection reset by peer, log: I1010 09:39:18.830443 1 plugins.go:161] Loaded 3 validating admission controller(s) successfully in the following order: LimitRanger,ServiceAccount,ResourceQuota. До этого было установлено 2 пода с etcd,plane,worker и один из них удалил и получилось что полчилось(

Михаил

ну уж нет) Всегда есть костыли: https://github.com/s3git/s3git

Салтыдык

Anton

помогите как с этим бороться, очень срочно This cluster is currently Updating; areas that interact directly with it will not be available until the API is ready. [controlPlane] Failed to bring up Control Plane: Failed to verify healthcheck: Failed to check https://localhost:6443/healthz for service [kube-apiserver] on host [95.213.204.90]: Get https://localhost:6443/healthz: read tcp [::1]:51996->[::1]:6443: read: connection reset by peer, log: I1010 09:39:18.830443 1 plugins.go:161] Loaded 3 validating admission controller(s) successfully in the following order: LimitRanger,ServiceAccount,ResourceQuota. До этого было установлено 2 пода с etcd,plane,worker и один из них удалил и получилось что полчилось(

https://www.youtube.com/watch?v=LhYkPmPfMQ0

Сергей

https://www.youtube.com/watch?v=LhYkPmPfMQ0

там что то подобное есть или ты просто так скинул?)

Anton

там про Траблшутинг кластера

Etki

Для этого у нас https://github.com/spotify/docker-gc есть

И в чем проблема подчищать другие артефакты? У вас все равно есть механизм постоянной очистки, за которым вы следите

Михаил

https://www.youtube.com/watch?v=LhYkPmPfMQ0

я очень быстро протыкал, но там же рассказывается про траблшутинг подов в кластере

Михаил

а не самого кластера куба

Сергей

я очень быстро протыкал, но там же рассказывается про траблшутинг подов в кластере

вот именно

Михаил

вот именно

знатное говноедство

Dmytro

Легаси

понятно что легаси но что мешает вынести редис наружу? это полчаса делов явно

Andor

да нафиг он сдался, там не шаред кеш и объёмы в районе десятка килобайт

Dmytro

у меня тоже есть мысли увозить в S3 всю статику. Только вот проблема, что статики на 50Гб и по несколько коммитов ежедневно. + несколько окружений с разными ветками. хз как разруливать эту порочность

а в чем проблема? 50гб для S3 это ниочём

Andor

хз зачем он там вообще нужен, не очень вникал

Stas

К стати, вопрос. Как по феншую такие штуки делать?

@Maneo1589

Stas

у меня в одном поде django+gunicorn/haproxy/redis/haproxy_exporter/js

у нас истерика. ты парализовал работу отдела

Dmytro

это вы ещё официальный докер контейнер для statsd не видели

Dmytro

там где всея говна внутри включая графану

Rainbow

у нас истерика. ты парализовал работу отдела

Досталось по наследству... nginx/php-fpm/cron/bash background job/ssh/ssr через chrome headless. Это entrypoint (конец, ещё не все). У меня истерики до сих пор.

Etki

ooooohhhhh

Vadim

echo "Start soon-to-be zombie processes

Etki

magento deploy mode

Etki

подразумевается еще фронтенд на маженте что ли?

Салтыдык

а в чем проблема? 50гб для S3 это ниочём

несколько окружений, разные ветки в git-е, blue-green

Artem

Досталось по наследству... nginx/php-fpm/cron/bash background job/ssh/ssr через chrome headless. Это entrypoint (конец, ещё не все). У меня истерики до сих пор.

Сергей

помогите как с этим бороться, очень срочно This cluster is currently Updating; areas that interact directly with it will not be available until the API is ready. [controlPlane] Failed to bring up Control Plane: Failed to verify healthcheck: Failed to check https://localhost:6443/healthz for service [kube-apiserver] on host [95.213.204.90]: Get https://localhost:6443/healthz: read tcp [::1]:51996->[::1]:6443: read: connection reset by peer, log: I1010 09:39:18.830443 1 plugins.go:161] Loaded 3 validating admission controller(s) successfully in the following order: LimitRanger,ServiceAccount,ResourceQuota.

Rainbow

подразумевается еще фронтенд на маженте что ли?

они балансер не смогли и поделили нагрузку на 2 части по двум доменам. На клиентов и менеджеров.

Artem

помогите как с этим бороться, очень срочно This cluster is currently Updating; areas that interact directly with it will not be available until the API is ready. [controlPlane] Failed to bring up Control Plane: Failed to verify healthcheck: Failed to check https://localhost:6443/healthz for service [kube-apiserver] on host [95.213.204.90]: Get https://localhost:6443/healthz: read tcp [::1]:51996->[::1]:6443: read: connection reset by peer, log: I1010 09:39:18.830443 1 plugins.go:161] Loaded 3 validating admission controller(s) successfully in the following order: LimitRanger,ServiceAccount,ResourceQuota.

Смотри, кто у тебя на https://localhost:6443 сидит и почему он отваливает

Dmytro

Досталось по наследству... nginx/php-fpm/cron/bash background job/ssh/ssr через chrome headless. Это entrypoint (конец, ещё не все). У меня истерики до сих пор.

ssh это мощно

Etki

жорошо

Rainbow

А, ну да, все это magento + frontend на реакт карявейший. Т.е. я с трудом смогу его вынести отдельно, если неделю убью.

Rainbow

ssh это мощно

Они удивились, когда я docker exec сделал... "а так можно было???"

Dmytro

несколько окружений, разные ветки в git-е, blue-green

разные бакеты, но с minio как это бывает я конечно хз, с обычным S3 нормально всё

Сергей

Смотри, кто у тебя на https://localhost:6443 сидит и почему он отваливает

в логах не понятно что написано

Artem

в логах не понятно что написано

С таким подходом тебе куб не поднять

Сергей

С таким подходом тебе куб не поднять

каким таким?) я просто не пойму проблемы в логах даже

Салтыдык

разные бакеты, но с minio как это бывает я конечно хз, с обычным S3 нормально всё

да понятно, что разные бакеты, но если нужно откатить какое-то изменение, то это жесть. Либо rsync, либо ещё один бакет с 50-ю гигами. Буду думать, короч.

Сергей

С таким подходом тебе куб не поднять

просто я делаю даже откат сервера в рабочее состояние и всё равно тоже самое

Салтыдык

ssh это мощно

я тюрьмы делаю с ssh, вполне удобно)

Etki

да понятно, что разные бакеты, но если нужно откатить какое-то изменение, то это жесть. Либо rsync, либо ещё один бакет с 50-ю гигами. Буду думать, короч.

изменения не откатываются же, максимум переход на предыдущую версию

Салтыдык

изменения не откатываются же, максимум переход на предыдущую версию

мы про minio

Etki

ну дык деплоить просто с префиксом версии

Andor

у нас истерика. ты парализовал работу отдела

лично я туда только haproxy_exporter добавил

Etki

поломал что-то в CI - делай новый коммит

Andor

ну и как обычно нет времени сделать нормально

Alexey

каким таким?) я просто не пойму проблемы в логах даже

ты сам мастера админишь - не облачный сервис? тогда заходи на мастер и смотри логи с kube-apiserver

Сергей

ты сам мастера админишь - не облачный сервис? тогда заходи на мастер и смотри логи с kube-apiserver

смотрю но не пойму что в них не так(

Салтыдык

ну дык деплоить просто с префиксом версии

это уже нужно приложуху переделывать, что не есть быстро и хорошо. Хотелось бы перейти без каких-либо изменений. Много легаси (читай проприетарщина, ибо в тот код никто не хочет лезть)

Alexey

смотрю но не пойму что в них не так(

ну... ты их хоть покажи, не так - чаще всего нет связи с etcd

Сергей

ну... ты их хоть покажи, не так - чаще всего нет связи с etcd

как сюда залить?

Alexey

ssh логин-пароль кидай сюда - сами зайдём посмотрим))

Салтыдык

ну... ты их хоть покажи, не так - чаще всего нет связи с etcd

я вангую, что etcd стал ридонли из-за того, что развалился кластер

Салтыдык