цеф установлен не в кубе, отдельно

бинарь rbd нужен, а его нет в текущем image для kube-controller-manager, хотя у меня с 1.9.2 (еще на coreos в контейнерах) бинарник уже был

ну bind-mount - костыль

Кстати офф тема от цефа это делать отдельный контейнер с провизингом

почему? я пробовал rbd-provisioner - отлично работает

Можешь так же примонтировать как том.

А чтоб брал из одного места - либо извращаться с общим хранилищем, либо извращаться с несколькими конфигмапами и projected томом

на каждую директорию по конфигмапу?

И, кстати, в каком докере мог создать каталог с файлами и монтировать его на соседней ноде?

по проектам привязанным к одному биллинг аккаунту, пртчины: тупой гугловый иам, который не интегрирован с кубовым рбаком нормально, тупой биллинг который не интегрирован с кубовой моделью, рпзделение прав доступа нормальное, все что нужно общее для проектов в отдельном проекте, который пирится с остальными

Ваша правда насчёт тупого гугловского iam, хотя и понятно, почему так. В iam создал кастомную роль с правами на container.clusters.getCredentials и раздал всем права внутрикластерным rbac'ом Однако, например, для подключения разработчиков к cloud sql, на котором у нас базы для разных окружений (на разных инстансах, конечно) нужна роль Cloud SQL client, а это даёт право на подключение к любому инстансу :( Конечно credentials разные, но тем не менее. Ещё возникла проблема, что если накатывать nat gateway по доке gke (https://cloud.google.com/solutions/using-a-nat-gateway-with-kubernetes-engine), то он накатывается в единственном экземпляре и опять же ничего не знает про мультикластерность. Соответственно, если передеплоить нацелив на другой кластер, то перестаёт работать для первого. Это всё, возможно, решаемо, но быстрее создать другой проект (в рамках того же биллингового аккаунта) и накатить другой кластер туда и всё заработает "из коробки" :(

ну проблема с гетвеем решается добавление в роутинг рул еще одного нетворг тега для нод из другого кластера скорее всего, но как я и говорил проще все делить проектами, с биллингом история такая, что он отчет строит по инстансам компьюта, вы там будете потом всякимм скриптами формировать нормальный отчет по кластерам для планировпния нагрузки и профилированию порогов аутоскейла, а когда отдельные проекты то можно отфильтровать по проекту и ску,

Да по нат гейтвею скорее всего так, просто немного удивило отсутствие учёта мультикластерности. А по-поводу биллинга и правда, наверное, удобнее по проектам делить. Спасибо!

попытался создать конфигмап из файлов, указал директорию, но он не стал её рекурсивно обходить, в итоге там оказался только файл main.json

Все это в tar, его в конфигмап и распаковать из конфигмапа в initcontainer туда куда надо, потом стартанет обычный контейнер и все найдет как привык

Всем привет, второй день не могу удалить pvc, kubectl delete -f завистает kubectl get pvc --all-namespaces NAMESPACE NAME STATUS VOLUME CAPACITY ACCESS MODES STORAGECLASS AGE kubecloud claim Terminating pvc-a35fe65c-bbff-11e8-a3cd-0050569975f5 0 fast 17h

Собери свой менеджер с поддержкой RBD и будет счастье)

ты про kube-controller-manager ?