Kubeadm reset - что бы пробовать Kubeadm init заново

ничего не понимаю, создал кластер через kops, а кол-во nodes 0 of 2 уже минут 30

а мастер завелся

AWS limits?

Посмотри в asg

Там же есть логи

окей, спасибо

Кубаны, а какие есть хорошие и простые решения для того, чтобы шарить volumes в кубах. Мы сидим в гугл клауде и нам нужно, чтобы один контейнер/хост писал, а остальные читали. Пробовал google PD, но он не поддерживает rwmany, readmany +writeonce не дают сделать механизмы кубов. GCS бакеты не подходят из за невозможности быстро писать много файлов за один раз. Может есть ещё что-то, кроме gluster/ceph/nfs, что могло бы решить проблему?

может лучше pub\sub ?

Самое простое NFS

Но оно же и самое не надёжное

кто нибудь использует ceph с гигабитной сетью ? поделитесь впечатлениями

я использую в другом кластере.

Херово ему, но живет. и Ооочень медлено

Кубаны, а какие есть хорошие и простые решения для того, чтобы шарить volumes в кубах. Мы сидим в гугл клауде и нам нужно, чтобы один контейнер/хост писал, а остальные читали. Пробовал google PD, но он не поддерживает rwmany, readmany +writeonce не дают сделать механизмы кубов. GCS бакеты не подходят из за невозможности быстро писать много файлов за один раз. Может есть ещё что-то, кроме gluster/ceph/nfs, что могло бы решить проблему?

Так контейнер или хост? Можно два контейнера засунуть в под и шарить как обычную fs

@gurinderu увы, мне нужно расшаривать данные, которые пишутся извне в большое кол-во контейнеров на ридонли. Схема типа writer -> shared storage <- pod reader1 \ pod readern

@gurinderu увы, мне нужно расшаривать данные, которые пишутся извне в большое кол-во контейнеров на ридонли. Схема типа writer -> shared storage <- pod reader1 \ pod readern

Нельзя врайтера в том же поде поднять?

Нельзя врайтера в том же поде поднять?

Ноуп. Самый лучший вариант, конечно, с cephfs, но мне пока нужно узнать, есть ли ещё варианты.

У тебя там именно файлы или что?

Файлы

Коллеги, подскажите в чем разница между сервисом который ExternalIP и LoadBalanser? уже много почитал но так и не понял.

Лоад балансер опирается на инфраструктуру хостинга, в авс создаст этот самый лоадбалансер

ну а external ip управляются админом, если трафик на кластер приходит по этим адресам, можно заставить сервис принимать трафик на этом адресе

https://kubernetes.io/docs/concepts/services-networking/service/#external-ips тут же описано

кто нибудь использует ceph с гигабитной сетью ? поделитесь впечатлениями

я использую, нагрузка минимальная – ему хватает

Файлы

ну тут тогда нужно fs смотреть без вариантов, можешь сравнить ceph,gluster и самый крутой hdfs)

ну тут тогда нужно fs смотреть без вариантов, можешь сравнить ceph,gluster и самый крутой hdfs)

не используйте gluster. никогда.

я лишь предлагаю сравнить, а не использовать

я бы скорее к себе hdfs конечно затащил

Кубаны, а какие есть хорошие и простые решения для того, чтобы шарить volumes в кубах. Мы сидим в гугл клауде и нам нужно, чтобы один контейнер/хост писал, а остальные читали. Пробовал google PD, но он не поддерживает rwmany, readmany +writeonce не дают сделать механизмы кубов. GCS бакеты не подходят из за невозможности быстро писать много файлов за один раз. Может есть ещё что-то, кроме gluster/ceph/nfs, что могло бы решить проблему?

Если есть желание можете потестить Lustre вместе со мной :) https://github.com/kvaps/kube-lustre

Всем привет! Столкнулся с проблемой на Centos7: При запуске kubeadm init —pod-network-cidr=10.244.0.0/16 получаю ошибку в jounalctl: Unable to update cni config: No networks found in /etc/cni/net.d

В общем проблема похоже была не в cni, но в чем конкретно, я так и не разобрался. Решил все установкой kubctl, kubeadm, kubelet версии 1.8.6 (вместо 1.9.1)

Всем привет! Столкнулся с проблемой на Centos7: При запуске kubeadm init —pod-network-cidr=10.244.0.0/16 получаю ошибку в jounalctl: Unable to update cni config: No networks found in /etc/cni/net.d

а сеть установили? в каталоге /etc/cni/net.d появился конфиг?

Да, появился файл # cat /etc/cni/net.d/10-flannel.conf { "name": "cbr0", "type": "flannel", "delegate": { "isDefaultGateway": true } }

Но после того как я сделал apply)

не используйте gluster. никогда.

почему?

Но после того как я сделал apply)

так и должно быть, в мане же так и написанно: https://kubernetes.io/docs/setup/independent/create-cluster-kubeadm/

Да, так и должно быть, как оказалось) Но вот версия 1.9.1 на centos7 не завелась

Да, так и должно быть, как оказалось) Но вот версия 1.9.1 на centos7 не завелась

У меня завелась-) Правда у меня он контейнеризирован

у меня тоже все завелось, но ставлю через rpm )

привет! Сталкивались с ситуацией, когда endpoint удаляется из service и не возвращается обратно? Поды при этом в состоянии Ready, selector правильный. Пересоздание service проблему чинит.

похоже на это https://github.com/kubernetes/kubernetes/issues/57897

проблема возникает абсолютно случайно и как такое повторить непонятно. По метрикам видно, что удаляет endpoint-controller. Пока включил —v=2 логи на apiserver, scheduler, controller-manager

проблема возникает абсолютно случайно и как такое повторить непонятно. По метрикам видно, что удаляет endpoint-controller. Пока включил —v=2 логи на apiserver, scheduler, controller-manager

controller manager как запущен? Как под?

controller manager как запущен? Как под?

Да, static pod. Из 3 шт

Да, static pod. Из 3 шт

Остальные сервисы/эндпоинты нормально появляются удаляются?

камрады, порекомендуйте мануал по развертыванию небольшого кластера на кубернетис. и вообще чтонить почитать для новичка. перехожу с докер сворма на кубер, кое что не совсем понятно..

https://github.com/kelseyhightower/kubernetes-the-hard-way

https://coreos.com/tectonic/docs/latest/tutorials/kubernetes/getting-started.html

Привет! А у кого нибудь есть проблема с Docker 1.12.6 что при большом потоке логов в STDOUT отжирается дохрена памяти?

а что он должен делать. занули потоки

У нас схема что мы пишем в STDOUT в JSON, потом fluentd все это забирает

а что он должен делать. занули потоки

всмысле? Он же в файл их должен аппендить

значит не в stdout а в пайп наверное..

покажи команду

ERROR: S client not available

https://github.com/kelseyhightower/kubernetes-the-hard-way

спасибо

От чего в кубернетисе связка nfs+pv+pvc такое нестабильная? Ставлю реплику 1-10, и часть контейнеров не может примаунтиться

конфиг бы посмотреть

вот конфиг https://www.evernote.com/l/ABH1gzJC9QtOv74ay461iMR40o4cWORBeto

а успешные маунты были? похоже что проблема в nfs а не в кубере

(но я в кубере начинающий)

были, там на скрине 5 успешных, 5 неуспешных

и при чем куб не пытается даже прибить поды, а ждет уже сутки..

были, там на скрине 5 успешных, 5 неуспешных

А с нод на которых неуспешно руками маунтится?

и при чем куб не пытается даже прибить поды, а ждет уже сутки..

по идее он не должен их прибивать, а рестартить контейнеры постепенно увеличивая таймаут

А с нод на которых неуспешно руками маунтится?

ааа точно, со второй ноды не иог примаунтиться ?

Если у кого-нибуть повториться, фикс: dpkg -l cifs-utils dpkg -l nfs-common dpkg-query: no packages found matching cifs-utils sudo apt-get install cifs-utils sudo apt-get install nfs-common

А для nfs cifs-utils нужен что ли?

Нет, конечно.

нет по идее

не, на первом сервере без него работает, написал лишнее

а кто есть с опытом для консультации по кубику?

ну только без развода

а почему здесь не спросить?

а почему здесь не спросить?

нужно сделать кластер из 3 серверов

на кубике

в 3 датацентрах

для автоскелинга внутри

и вот мне бы хотелось узнать + и - этих приколов

а почему здесь не спросить?

ну вот и тишина