Andor

lol

𝚔𝚟𝚊𝚙𝚜

согласен, надеюсь допилят скоро

Andor

насколько мне известно, kube-spray юзает kubeadm

Anton

Можно и так

𝚔𝚟𝚊𝚙𝚜

вон, раньше ha - не умел, теперь умеет

𝚔𝚟𝚊𝚙𝚜

насколько мне известно, kube-spray юзает kubeadm

кстати да

Anton

вон, раньше ha - не умел, теперь умеет

Это серьезное улучшение, я от него отказался по большей части из-за этого

Anton

А cni все ещё самому нужно деплоить?

𝚔𝚟𝚊𝚙𝚜

а че его деплоить то?

Andor

"самому деплоить" это "накатить один манифест"?

Vadim

так а tls bootstrapping он умеет?

𝚔𝚟𝚊𝚙𝚜

так а tls bootstrapping он умеет?

умеет

Terry

где же ты раньше был ? я успел пропахать все сторадж драйвера за два месяца 😄

полезный опыт, стоит изложить на медиуме

𝚔𝚟𝚊𝚙𝚜

генеришь токен, затем ноду добавляешь таким образом: kubeadm join 10.28.36.157:6443 --token vrrush.nwiko64mcjwxn7e8 --discovery-token-ca-cert-hash sha256:d9418e5f6d14cde2c2895df72337ca0db646701429aa2e3ae95833c170b6d749

gh

полезный опыт, стоит изложить на медиуме

кстати да, это печально, но ничего кроме local-volume не подходит, последнее что я сегодня попробовал был GCE, и нигде в доках не найти, только в панели управления, что чем меньше ты делаешь диск, тем меньше скорость записи и IOPS, т.е. если в доках написано 200-400мб/с, то на деле оказалось что если делаешь диск ссд на 20гб то скорость 9мб/с

gh

и например тот же StorageOS, который себя позиционирует как enterprise grade, а на деле скорость записи 80мб/с при одном потоке, и 5-10мб при 8 потоках

gh

единственное что я не попробовал это rook, но его даже в stable хелм чартах нету, и если openebs полный отстой, при том что у него столько разрабов и комьюнити, то явно роок ио будет еще хуже

Stas

кстати да, это печально, но ничего кроме local-volume не подходит, последнее что я сегодня попробовал был GCE, и нигде в доках не найти, только в панели управления, что чем меньше ты делаешь диск, тем меньше скорость записи и IOPS, т.е. если в доках написано 200-400мб/с, то на деле оказалось что если делаешь диск ссд на 20гб то скорость 9мб/с

господи ну хватит гнать. ну подробнейшим образом в документации описано https://cloud.google.com/compute/docs/disks/performance#type_comparison

𝚔𝚟𝚊𝚙𝚜

единственное что я не попробовал это rook, но его даже в stable хелм чартах нету, и если openebs полный отстой, при том что у него столько разрабов и комьюнити, то явно роок ио будет еще хуже

linstor не пробовал :)

gh

господи ну хватит гнать. ну подробнейшим образом в документации описано https://cloud.google.com/compute/docs/disks/performance#type_comparison

я вижу там 240 - 400*

gh

т.е. я если у меня 25 микросервисор, мне что 50 тарабайтов сделать надо ?

Andor

единственное что я не попробовал это rook, но его даже в stable хелм чартах нету, и если openebs полный отстой, при том что у него столько разрабов и комьюнити, то явно роок ио будет еще хуже

rook это ceph, если чо

gh

rook это ceph, если чо

ну NFS оказался самым быстрым из всех, вот он единственный кто уперсья в сетку виртуальную, т.е. 125мб/с

Andor

т.е. я если у меня 25 микросервисор, мне что 50 тарабайтов сделать надо ?

ты который из 6 видов дисков пробовал-то?

Andor

и ещё интересно каким образом ты измерял

gh

ты который из 6 видов дисков пробовал-то?

я пробовал standard и ssd, тот который google persistent disk

𝚔𝚟𝚊𝚙𝚜

> уперсья в сетку виртуальную, т.е. 125мб/с забудь про сетевые фс :)

Andor

короче пиши статью, иначе тебе никто не верит

gh

> уперсья в сетку виртуальную, т.е. 125мб/с забудь про сетевые фс :)

уже сделал локально, только проблема то что похоже драйвер игнорирует название дисков/папок и берет первый попавшийся и маунтит его, но это еще проверяю

gh

ты который из 6 видов дисков пробовал-то?

time sh -c "dd if=/dev/zero of=$th bs=100k count=10k && sync" либо так, либо 8 таких потоков

Stas

я вижу там 240 - 400*

что является пределом хоста где границы зависят от цпу на инстансе, а пер гигабайтные значения йопсов приведены в табличке на строчку ниже

𝚔𝚟𝚊𝚙𝚜

уже сделал локально, только проблема то что похоже драйвер игнорирует название дисков/папок и берет первый попавшийся и маунтит его, но это еще проверяю

так он тебе любой свободный PV и баундит к твоему PVC

gh

так он тебе любой свободный PV и баундит к твоему PVC

это никак не изменить ? просто я хочю сделать сразу 50 дисков, и чтобы PVC брал по названию диска, иначе придеться по порядку сначала делать один диск и поднимать 1 под

Andor

в амазоне например та же фигня, что если диск маленький, то он медленный

Stas

давайте перед тем как че то мерить почитаем все https://m.habr.com/post/154235/

𝚔𝚟𝚊𝚙𝚜

это никак не изменить ? просто я хочю сделать сразу 50 дисков, и чтобы PVC брал по названию диска, иначе придеться по порядку сначала делать один диск и поднимать 1 под

Ну это как бы и не нужно менять добавь volumeBindingMode: WaitForFirstConsumerв свой storageclass, затем куб сам все разрулит