тогда зайду с другой стороны. допустим у меня есть виртуалка со 100 гигабайтами диска. как сказать куберу - вот тебе тачка, хости все на ней?

как кубернетесу угадать на котором из дисков это хостить?

О или нет, daemonset + контроллер, контроллер следит за PVC и когда нужно создать новый, в цикле обходит демонсеты проверяя на свобоное место, и когда находит, создает там volume, затем PV в кубере

"вчера" он не мог установить докер а сейчас говорит про провижнинг О _о

"вчера" он не мог установить докер а сейчас говорит про провижнинг О _о

у меня тут дедлайны просто(

так то я джава девелопер

зачем тебе k8s

у нас сисадмин не справляется

тогда зайду с другой стороны. допустим у меня есть виртуалка со 100 гигабайтами диска. как сказать куберу - вот тебе тачка, хости все на ней?

Вообще логика localvolumов такая: нагенерил PV где нужно, а дальше они автоматически ассигнятся по запросу

Вообще логика localvolumов такая: нагенерил PV где нужно, а дальше они автоматически ассигнятся по запросу

я хочу чтоб он их динамически генерил из общего стораджа

тогда пилить свой провижионер, других вариантов нет

я писал что-то подобное на shell, но если ты java-девелопер, тебе наверное с какми-нибудь java-api будет проще

если интересно могу скинуть пример

да не в апи дело, мне надо сделать так чтоб потом вообще в кубер не лазить

я не хочу каждый раз руками вольюмы создавать

ща какой нить StorageOs посмотрю

динамические тома пока боль в k8s

ща какой нить StorageOs посмотрю

посмотри на linstor еще

посмотри на linstor еще

окей спс

в данном случае всё же PEBKAC и отсутствие архитектора как класса виновато, нет? k8s не станет за вас думать

и openebs

в данном случае всё же PEBKAC и отсутствие архитектора как класса виновато, нет? k8s не станет за вас думать

?

мне казалось динамик провиженинг как раз и нужен чтоб не думать про вольюмы каждый раз. в чем проблема то, при чем тут PEBKAC?

мне казалось динамик провиженинг как раз и нужен чтоб не думать про вольюмы каждый раз. в чем проблема то, при чем тут PEBKAC?

у вас aws/google/do или baremetal?

пока - baremetal

Вся динамика нужна, если облако резиновое. Иначе ненужные сложности.

дальше - скорее всего селектел какой нибудь

И эта динамика нужна на неожиданный рост и экономию ресурсов. А не чтобы дить было проще.

И эта динамика нужна на неожиданный рост и экономию ресурсов. А не чтобы дить было проще.

все это будет

на это и рассчет

одно другому не мешает

дальше - скорее всего селектел какой нибудь

Если будете брать виртуалки сразу обратите внимание на MTU. Я много времени убил пока понял в чем причина того поведения которое у меня было.

Если будете брать виртуалки сразу обратите внимание на MTU. Я много времени убил пока понял в чем причина того поведения которое у меня было.

окей, спасибо. вроде (пока) планируем брать OpenStack с Магнусом

жаль что наверное под NDA, я бы с удовольствием прочитал бы всю историю такого старта

возможно, у них есть кубер из коробки

жаль что наверное под NDA, я бы с удовольствием прочитал бы всю историю такого старта

какую именно историю?)

окей, спасибо. вроде (пока) планируем брать OpenStack с Магнусом

Вот оно вроде с опенстеком и связано.

какую именно историю?)

вашего старта. Не обижатесь, если что, я не злорадствую, а исключительно в целях самообразования

вашего старта. Не обижатесь, если что, я не злорадствую, а исключительно в целях самообразования

че тут читать. Spring Cloud Stack + Kubernertes

сейчас внедряем операторы для критических частей инфраструктуры (монга, кафка, etc)

Он про планируемый быстрый рост

в смысле? autoscaling прометеусом

Автоскейл на baremetal не работает ?

я про "давайте сделаем сейчас локально, а потом подумаем"

@e_fedorov ну кстати тебе как java-девелоперу linstor должен хорошо зайти, но учти что оно пока сыроватое и требует установки drbd kernel-модуля на storage ноды. Еще я их провижионер пока не пробовал, я PV ансиблом генерю.

Добрый день, подскажите при запуске крманды kubectl create -f.. Выходит ошибка The connection to the server localhost:8080 was refused - did you specify the right host or port? kubernetes установлен через snap install microk8s --classic --beta в чем причина?

я про "давайте сделаем сейчас локально, а потом подумаем"

щас надо MVP выкатить

у нас сейчас вообще NFS, лол

Всем привет, меня зовут - Сергей.

Привет, Сергей

Всем привет, меня зовут - Сергей.

??

Мож кто знает, пытаюсь поставить кубернетис через kubespray, все пакеты из requirements поставил, при попытки настройки мастер ноды ансибл падает с ошибкой ansible-playbook -u centos -b -i inventory/mycluster/hosts.ini cluster.yml ERROR! no action detected in task. This often indicates a misspelled module name, or incorrect module path. The error appears to have been in '/opt/ansible/kubespray/roles/vault/handlers/main.yml': line 44, column 3, but may be elsewhere in the file depending on the exact syntax problem. The offending line appears to be: - name: unseal vault ^ here не пойму какая еще зависимость ему нужна

https://docs.ansible.com/ansible/devel/plugins/lookup/hashi_vault.html ?

declare -a IPS=(....) CONFIG_FILE=inventory/mycluster/hosts.ini python3 contrib/inventory_builder/inventory.py ${IPS[@]} сделал ?

Добрый день, подскажите при запуске крманды kubectl create -f.. Выходит ошибка The connection to the server localhost:8080 was refused - did you specify the right host or port? kubernetes установлен через snap install microk8s --classic --beta в чем причина?

Проверь корректно ли выглядит твои файл ~/.kube/config

Добрый день, подскажите при запуске крманды kubectl create -f.. Выходит ошибка The connection to the server localhost:8080 was refused - did you specify the right host or port? kubernetes установлен через snap install microk8s --classic --beta в чем причина?

у тебя судя по всему не прописан admin.conf в глобальную переменную: "export KUBECONFIG=admin.conf" - так делал? естественно путь у тебя до файла свой

https://docs.ansible.com/ansible/devel/plugins/lookup/hashi_vault.html ?

Человек хочет при помощи kubespray раскатать k8s. А тут это получает

у тебя судя по всему не прописан admin.conf в глобальную переменную: "export KUBECONFIG=admin.conf" - так делал? естественно путь у тебя до файла свой

нет, попробую

https://docs.ansible.com/ansible/devel/plugins/lookup/hashi_vault.html ?

pip install hvac Requirement already satisfied: hvac in /opt/venv/lib/python2.7/site-packages (0.6.4)

что-то я не догоняю есть кубер в вагранте, ставлю дэшборды, стартую прокси, в настройках VM есть форвард порта 8001 захожу по урлу дэшбордов из доки - ничего не загружается подскажите куда копать?

или надо ingress сервис какой настроить?

что-то я не догоняю есть кубер в вагранте, ставлю дэшборды, стартую прокси, в настройках VM есть форвард порта 8001 захожу по урлу дэшбордов из доки - ничего не загружается подскажите куда копать?

Я вот прометей иногда открываю что бы метрики продебажить: kubectl port-forward -n monitoring prometheus-core-5474684f79-ppks7 9090:9090

что-то я не догоняю есть кубер в вагранте, ставлю дэшборды, стартую прокси, в настройках VM есть форвард порта 8001 захожу по урлу дэшбордов из доки - ничего не загружается подскажите куда копать?

По этому примеру и открывай свой дажборд. Измени неймспейс, имя пода и порты

так вроде офдоку и беру )

или надо ingress сервис какой настроить?

потом к примеру localhost:8080

так вроде офдоку и беру )

?‍♂

GlusterFS или StorageOS? ?

GlusterFS или StorageOS? ?

точно не GlusterFS

будет еще хуже чем с nfs

>StorageOS а что там под капотом? iSCSI?

>StorageOS а что там под капотом? iSCSI?

StorageOS ебанись

кто-нибудь может посмотреть вывод describe pod с рабочими http livenessProbe и readinessProbe?

по мойму что-то пошло не так: Liveness: http-get http://:http/login delay=90s timeout=120s period=30s #success=1 #failure=12 Readiness: http-get http://:http/login delay=60s timeout=60s period=15s #success=1 #failure=3

динамические тома пока боль в k8s

StorageOs завелся отлично тремя командами

эти пробы очень не многословны

по мойму что-то пошло не так: Liveness: http-get http://:http/login delay=90s timeout=120s period=30s #success=1 #failure=12 Readiness: http-get http://:http/login delay=60s timeout=60s period=15s #success=1 #failure=3

боюсь тебе мало чем поможет Readiness: exec [bash -c /usr/local/bin/healthcheck.sh] delay=60s timeout=1s period=600s #success=1 #failure=40

по мойму что-то пошло не так: Liveness: http-get http://:http/login delay=90s timeout=120s period=30s #success=1 #failure=12 Readiness: http-get http://:http/login delay=60s timeout=60s period=15s #success=1 #failure=3

Покажи yaml как их задаешь, похоже на проблему с урлом

Покажи yaml как их задаешь, похоже на проблему с урлом

"ports": [ { "name": "http", "containerPort": 8080, "protocol": "TCP" }, { "name": "slavelistener", "containerPort": 50000, "protocol": "TCP" } ],

"livenessProbe": { "httpGet": { "path": "/login", "port": "http", "scheme": "HTTP" }, "initialDelaySeconds": 90, "timeoutSeconds": 120, "periodSeconds": 30, "successThreshold": 1, "failureThreshold": 12 }, "readinessProbe": { "httpGet": { "path": "/login", "port": "http", "scheme": "HTTP" }, "initialDelaySeconds": 60, "timeoutSeconds": 60, "periodSeconds": 15, "successThreshold": 1, "failureThreshold": 3 },

рандомно вылетают Readiness probe failed:net/http: request canceled

чем меня бесят до невозможности

а вы уверены что приложение может на протяжении времени отвечать с заданными таймаутом на этот запрос ? может там какой-нибудь стоит /ping сделать с быстрым ответом (без опроса внешних датасорсов), что все ок ?

Там бегает jenkins, практически без никто. По идее должен успевать.

судя по Type Status Initialized True Ready True PodScheduled True на протяжении 40 минут - обе две пробы работают

StorageOs завелся отлично тремя командами

что у него в качестве backend?

idk, работает и ладно

Привет! Как отрубить переменные окружения в поде, которые генерятся на основе сервисов? Например, есть сервис db

Они мешают. Особенно DB_PORT=tcp://10.111.62.106:5432

Привет! Как отрубить переменные окружения в поде, которые генерятся на основе сервисов? Например, есть сервис db

Как-то так теперь. https://github.com/kubernetes/kubernetes/pull/68754/files#diff-9ce7ea8441086bf1902b4f936f4601d0R83061 А вообще, можно по олдовому, через shell entrypoint сначала unset делать, а потом из него приложулю запускать.

что у него в качестве backend?

а хз, она не опенсорсная

Как-то так теперь. https://github.com/kubernetes/kubernetes/pull/68754/files#diff-9ce7ea8441086bf1902b4f936f4601d0R83061 А вообще, можно по олдовому, через shell entrypoint сначала unset делать, а потом из него приложулю запускать.

Если я правильно понял, то в 1.12 в спеке пода будет enableServiceLinks?