Alexander Morozov - один из коре-девелоперов доскера

с ним сложно спорить

а в чем разница между overlay и overlay2?

один из костылей, другой - из ядра

т.е. рекомендуется overlay2. ок. записал.

висячему docker’у можно сделать kill -USR1, он тогда свой стектрейс в логи срыгнёт

многовато сругнул

Агада, про это я тоже уже писал

Давай я это Морозову отдам

Фигачь гист

тут товарищи тоже нарвались на проблемку с докером, пока дебажим. В основном goroutine 1758792 [semacquire, 61 minutes]: sync.runtime_Semacquire(0xc82044f574) /usr/local/go/src/runtime/sema.go:47 +0x26 sync.(*Mutex).Lock(0xc82044f570) /usr/local/go/src/sync/mutex.go:83 +0x1c4 github.com/docker/docker/daemon.(*Daemon).reducePsContainer(0xc8200ac000, 0xc8215e5c20, 0xc8212c5d40, 0xc823f6d3d0, 0x0, 0x0, 0x0) /usr/src/docker/.gopath/src/github.com/docker/docker/daemon/list.go:187 +0x49 github.com/docker/docker/daemon.(*Daemon).reduceContainers(0xc8200ac000, 0xc82272a800, 0xc823f6d3d0, 0x0, 0x0, 0x0, 0x0, 0x0) /usr/src/docker/.gopath/src/github.com/docker/docker/daemon/list.go:170 +0x1a5 github.com/docker/docker/daemon.(*Daemon).Containers(0xc8200ac000, 0xc82272a800, 0x0, 0x0, 0x0, 0x0, 0x0) /usr/src/docker/.gopath/src/github.com/docker/docker/daemon/list.go:91 +0x76 github.com/docker/docker/api/server/router/container.(*containerRouter).getContainersJSON(0xc82082c880, 0x7f08bc72a080, 0xc824082f90, 0x7f08c094aa88, 0xc8239db5f0, 0xc824375ce0, 0xc824082f00, 0x0, 0x0) …

понять надо кто первым этот container.Lock() сделал

@pipopolam скинул в личку

передал

ждем, пока в этой ихней калифорнии утро наступит

эвоночто. голый дистр не содержит linux-image-extra. а там как раз aufs сидит. не найдя этот модуль, docker решает использовать devicemapper

агада

мне тут чтобы вместо devicemapper’а overlay заюзать пришлось добавить --storage-driver=overlay2 в опции докера

ну да

это expected behaviour ;)

@kay_rus а ты для ноде_експортер'а юзаешь hostNetwork?

да

чорт

ну извиняй =)

гггг

блин, чот у меня ENV не работает

env: - name: HOST_IP valueFrom: fieldRef: apiVersion: v1 fieldPath: status.hostIP ... args: - -web.listen-address=${HOSTIP}:9100

HOST_IP != HOSTIP

да это я криво начепятал

там в манифесте все совпадает

The following information is available to a Pod through the downward API: The pod’s name The pod’s namespace The pod’s IP A container’s cpu limit A container’s cpu request A container’s memory limit A container’s memory request

nodeip там нет

если честно, когда в последний раз пробовал valueFrom (в 1.3.5, кажется), они не заполнялись (по крайней мере в UI, не помню, долез ли я до конкретного контейнера)

The following information is available to a Pod through the downward API: The pod’s name The pod’s namespace The pod’s IP A container’s cpu limit A container’s cpu request A container’s memory limit A container’s memory request

все там есть: $ kubectl get po --namespace=blog blog-4154525675-68dig -o jsonpath='{.status.hostIP}' 10.83.8.200%

;)

есть то оно есть

но dawnard не поддерживет

щасм покажу почему

ты меня заинтриговал.

кажется это оно https://github.com/kubernetes/kubernetes/blob/6a9a93d46954f69c8736a51cf6a8f073a962ad25/pkg/api/validation/validation.go#L1320

попробуй spec.nodeName

я тут недавно похожей ерундой занимался. нужно было передавать информацию о pod'е в flexvolume https://github.com/kubernetes/kubernetes/pull/30694

хехе

с моим пасом: * spec.template.spec.containers[0].env[0].valueFrom.fieldRef.fieldPath: Invalid value: "status.hostIP": error converting fieldPath: field label not supported: status.hostIP

с твоим: * spec.template.spec.containers[0].env[0].valueFrom.fieldRef.fieldPath: Unsupported value: "spec.nodeName": supported values: metadata.name, metadata.namespace, status.podIP

supported values прям богат :(

ну оно берется как раз отсюда: https://github.com/kubernetes/kubernetes/blob/6a9a93d46954f69c8736a51cf6a8f073a962ad25/pkg/api/validation/validation.go#L1320

вот жеж

а в чем суть кастрации-то?..

вот либо так. запускаешь внутри контейнера: curl -s $(ip addr show dev eth0 | grep -o '[0-9]\+\.[0-9]\+\.[0-9]\+\.' | sed 's/$/1/'):10255/stats/summary/ | awk -F'[: "]' '/nodeName/ {print $9}'

оно тебе скажет имя ноды

как ip получить - хз

hostname -I

и отгрепать нужный ;)

но это чот херня какая-то

hostname скажет IP пода

можно конечно вместо ip addr show dev eth0 использовать hostname -I

кстати overlay2 мне не помог. тоже висит

о, Морозов очнулся

сказал, что получил трейс

могу новый прислать с overlay2

давай

а я пока насрал сюда: https://github.com/kubernetes/kubernetes/issues/24657

@ivan4th, а скажи, в чем такая большая проблема отдавать побольше данных в downward API?

@pipopolam а ты в какой версии пытаешься этот status.hostIP использовать?

1.3.7

странно. spec.nodeName должен работать

очень странно.

https://github.com/kubernetes/kubernetes/blob/v1.3.7/pkg/api/validation/validation.go#L1098 - здесь нет. это tag 1.3.7

а здесь есть. это branch 1.3.7 https://github.com/kubernetes/kubernetes/blob/1.3.7/pkg/api/validation/validation.go#L1320

ну сборка-то по тегу делалась скорее всего

@ivan4th, а скажи, в чем такая большая проблема отдавать побольше данных в downward API?

там вроде в коментах уже написали, node name доступен в 1.4. резолвишь и вот тебе IP. а так “It is sometimes useful for a container to have information about itself, but we want to be careful not to over-couple containers to Kubernetes.” (via http://kubernetes.io/docs/user-guide/downward-api/)

а резолвить в пре-ините?

можно init containers заюзать, чтобы получить ip и положить куда надо, да

ну да, я про init-container

ну да, там. или если сам image собираешь, то можешь уже и в нём самом

вот блин Hockin тролль, а...

Это thockin-то троль? До smarterclayton’а ему как до луны

ггг

ну я спросил "а чобы нет", он ответил "чтобы нет"