Sn00part
вот еще фикс есть
Sn00part
https://github.com/kubernetes/kubernetes/issues/38923#issuecomment-315255075
Sn00part
у меня работает, потому что у меня есть rbd-provisioner
Sn00part
но подключить все через CSI - это хорошая идея,
Petr
у меня работает, потому что у меня есть rbd-provisioner
А вы учли то, что внутри этого провижинереа легаси версия сеф-комон?
Petr
я такими костылями как рбд-провижинер не очень горю желанием пользоваться
Petr
там 10я версия цефа если что
Sn00part
какая версия в епеле, такая и в провижионере
Sn00part
https://github.com/kubernetes-incubator/external-storage/blob/master/ceph/rbd/Dockerfile
Sn00part
там мимик, 13 версия, сейчас 14 самая новая, не вижу проблем )
Sn00part
ну и можно ее пересобрать, это проще, чем курочить кишки кубера, потом удивляться
Sn00part
если по какой-то причине не подойдет CSI вариант, вот можно воркэраундом сделать
Sn00part
на самом деле все по плану, они как раз в мае говорили о том, что нахер в in-tree все это, вот вам CSI, пишите к нему плагины.
Sn00part
CNI, CSI все должно по одной методике работать, вот вам контролплейн, пишите плагины, но внутрь не пустим )
Petr
вообще в эту сторону не думал
Petr
А что может означать Status: GA в статусе проекта ceph-csi?
Sn00part
Globally available, релиз
Sn00part
точнее Generally available
Sn00part
gone live
Petr
т.е. можно для прода использовать?
Sn00part
да
Sn00part
но это же хипстеры, могут быть баги да )
Petr
долбаные хипстеры со своими дурацкими сокращениями.....)))
Lucky SB
Petr
Используй образ hyperkube
как раз сейчас его и использую, но он вроде как легаси и сыпит в логи кучу странных ошибок
Lucky SB
Ну хз, а можно пример ошибок ?
Petr
Ну хз, а можно пример ошибок ?
message E1124 14:16:01.078619 1 goroutinemap.go:150] Operation for "delete-pvc-33eb6fb4-8c86-483c-acad-9776d8c792c9[2fffa79e-1b71-4d0d-82e4-71b3850aef24]" failed. No retries permitted until 2019-11-24 14:18:03.078576595 +0000 UTC m=+197865.636750660 (durationBeforeRetry 2m2s). Error: "error exit status 2, rbd output: 2019-11-24 14:16:01.051716 7f6bbd819100 -1 did not load config file, using default settings.\n2019-11-24 14:16:01.057479 7f6bbd819100 -1 auth: unable to find a keyring on /etc/ceph/ceph.client.kube.keyring,/etc/ceph/ceph.keyring,/etc/ceph/keyring,/etc/ceph/keyring.bin: (2) No such file or directory\nrbd: error opening image kubernetes-dynamic-pvc-c6758c00-a53b-467f-9bcc-9bf91bcddbb9: (2) No such file or directory\n"
Petr
message E1124 05:08:24.707001 1 reflector.go:123] k8s.io/client-go/metadata/metadatainformer/informer.go:89: Failed to list *v1.PartialObjectMetadata: the server could not find the requested resource
Petr
вторая ошибка постоянно сыпется
George
все правильно говорят
Petr
Начал смотреть ceph-csi: как я обожаю докер-файлы внутри которых большая простыня в виде баш-скрипта))) https://quay.io/repository/cephcsi/cephcsi/manifest/sha256:c1aa8bbca88cd4f42574b58eb7b3bbd11ca3a28c6101d52b1448d0c27f6e3a1d
Anton
Товарищи, кто нить расширенно тестил loki? Они на днях 1.0 зарелизили, утверждают что у них все на нем теперь
George
думаю, что к трейтьей версии стабилизируются
Anton
В релизе пишут что как апликуху и на уровне http посторатся не менять сильно
George
инфлакс тож думали... что не будут радикально меняться
George
и где они?
Anton
Эх, хочется выкинуть эластик (
George
а как же APM?
George
или истио с егерем будете отдельно прикручивать?
Anton
эластик юзается по минимому, фул текст серч не нужен, возможностей локи за глаза
Anton
На 0.3 когда гоняли там иногда вставал раком, когда в сети затык был, хотелось узнать есть улучшения или нет
Alexey
На 0.3 когда гоняли там иногда вставал раком, когда в сети затык был, хотелось узнать есть улучшения или нет
Если попробуете под нагрузкой, то напиши, плиз результат. Немного офтом конечно, но интересно. Ну и вообще они типа околокуберовские :)))
Petr
По поводу логирования: что скажете про такую связку: DaemonSet из fluent-bit смотрят на центральный fluentd, который отправляет по gelf в graylog
Petr
А зачем тут fluentd?
Ставил fluent-bit из хелм-чарта, в котором из коробки нет конфига для gelf и пока руки не дошли конфиг поменять. А потом подумал, что может быть такая конфигурация снимет нагрузку с нод по парсингу логов? Собственно поэтому и спрашиваю как лучше?
Petr
Немного перепутал: вместо fluentd пересылка идёт на центральный fluent-bit
George
Немного перепутал: вместо fluentd пересылка идёт на центральный fluent-bit
Не уверен, что есть ценность в центральном бите
George
Но, да, такой конфиг возможен.
George
Почему нет
The
Можно ли как то заставить работать параллельно два куб контроллера?
The
с leader-elect по факту работает только один - мастер. но если он отвалится, то на инит нового мастера уходит 20 сек. пока он не проинициализируется, всё стоит раком.
The
был обещан HA
Solyar
Пусть у тебя 10 мастеров переключение очень болезненное
Andrey
коллеги, есть кто использует nginx ingress controller в GKE? Были проблемы с периодическим "пропаданием" вебсайтов? У нас сторонние healthcheck'и по несколько раз в неделю репортят недоступность, при этом при переключении на гугловый ингресс проблемы пропадают
Andrey
в логах nginx ничего не видно, то есть как-будто до него не доходят запросы
The
Пусть у тебя 10 мастеров переключение очень болезненное
а мертвые эндпоинты для сервисов кто будет в это время обновлять? под сервисмэшом, допустим, сами разберутся, а сами ингрессы пограничные?
Andrei
обновил helm до 3 сейчас делаю helm list и пусто и без ошибок, что нужно сделать чтоб новая версия видела tiller
Dmitry
Она без тиллера должна работать
Dmitry
Тиллер капут
Andrey
тьфу, блин, там же только клиент и остался
Max
Тиллер капут
ну неужели)
Andrei
а клиента обновил?
что есть клиент? я на своем компе обновил с которого управляю кластером
Anton
если удалил тиллера нет
Anton
релизы теперь в своих ns
Andrei
по какой инструкции делал?
ни по какой прост сделал brew upgrade и он мне helm обновил с helm 2.14.3 -> 3.0.0
Anton