Pavel
нифакт
Михаил
при этом на ноде
free -m
total used free shared buff/cache available
Mem: 257846 81501 168809 1507 7535 172556
Pavel
а где дургие цифры?
Михаил
Больше, чем по факту
Pavel
а qemu из воздуха чтоли память берет
Михаил
то есть там у вас запускаются и останавливаются инстансы, но значение всё равно не корректно?
не, там запустилось 2 инстанса, но потом перестало туда уезжать
Михаил
я же правильно помню, что при рестарте сервиса nova-compute тачки остаются на месте и ничего не происходит?
Я и твой кот
Михаил
Так. Что-то я где-то загнался. Завтра еще подебагаю
ndaemonv
всем привет
ndaemonv
пришел позадавать дибильных вопросов
ndaemonv
а в частности, что делать с cinder-volume LVM на NVME и фиговой скоростью?)
Yura
тоже тестил и не придумал ничего хорошего - узкое горло в виде сетевого стека вроде было. при этом я даже ставил nvme в компьют, где сетапил cinder-volume и по iSCSI отвадал через 127.0.0.1
ndaemonv
и как с этим жить?) у меня в тесте хорошая sata ssd показывает резельтаты лучше чем nvme
ndaemonv
ну я впринципе сюда то и пишу, тк ничо хорошего тоже не придумал. возможно ктот нашел решение)
ndaemonv
есть у меня впечатление что cinder.volume.drivers.lvm.LVMVolumeDriver не адекватно работает с nvme
Andrey
внезапно
Artemy
есть у меня впечатление что cinder.volume.drivers.lvm.LVMVolumeDriver не адекватно работает с nvme
У тебя неправильное впечатление
ndaemonv
я на нем не настаиваю)
ndaemonv
но работает через жопу
ndaemonv
помимо SPDK NVMe-oF есть варианты как его раскачигарить можно?
Timur
ironic, делается на ура
Решил тут кучку бареметалов накатитьи вспомнил про ironic, а он нынче то только внутри опенстека живёт ?
Dmitry
Не обязательно
Dmitry
https://docs.openstack.org/bifrost/latest/ там всякий
Timur
Хмм.. ненагуглил
Dmitry
ну и http://metal3.io/ (довольно сырое)
Timur
MAAS говорят модно
J
Решил тут кучку бареметалов накатитьи вспомнил про ironic, а он нынче то только внутри опенстека живёт ?
Я через openstack-ansible последний раз делал, собственно, с него и начиналась сборка нового облака.
glance+keystone+ironic+ironic-inspector
Dmitry
есличо, glance не обязателен
Dmitry
(как и keystone, если аутентификация не нужна)
Dmitry
Главное, сразу в продакшн!
Dmitry
Угу. Полноценный конструктор :)
Timur
Ну да.
Не слушай советы, кароч. Пробуй сам и бери чо понравится.
Ленивый стал :) вдруг что-то родилось вменяемое.
J
Ленивый стал :) вдруг что-то родилось вменяемое.
Ну можешь не пробовать, а прочитать как чо работает.
J
Если кому интересно я разозлился в итоге и openstack-ansible взял stable/train, хоть он и не допилен, с ним гораздо проще из кастомных репозиториев собирать venv.
ndaemonv
Все всегда сразу в продакшн а там потом разберемся
ndaemonv
Но это не точно
ndaemonv
А я взял квинс, но я уверен что нафиг никому не интересно 😂
ndaemonv
Надо его в продакшн быстрее ато он чот залежался
ndaemonv
Так юзает кто нить nvmeof?)
ndaemonv
Скажите хоть что нить ободряющего, типа не лезь туда, сломаешь се глаза, руки и вывихнишь мозг 😂
Timur
И много приходилось дебажить ansible, прежде чем проинсталили бареметалы через bifrost или openstack-ansible ? Чет не верится, что взлетает искаробки :)
J
Так юзает кто нить nvmeof?)
bifrost из коробки работает.
openstack-ansible тоже если делать все по документации.
Поскольку мне нужны не типовые конфигурации и свежие версии сервисов приходится повозиться.
Например, оказалось что некоторые таски в плейбуках написаны криво и расчитаны только на выполнение от рута. become не прокатывает.
Ну или намертво прибитые конфигурации когда у тебя mysql и haproxy не могут быть на одном хосте.
J
Но это больше придирки все, потому что мне по кайфу, да и по душе (читай, легче работать), когда сделано как мне нужно, а не как задумали ансибль хипстуры.
Если б не выебывался, все бы отлично само работало.
ndaemonv
А в качестве схд ты что юзаешь?
J
ndaemonv
Когда сделано как те нужно всем легче работать, не все могут этого добиться, некоторые и не особо хотят
ndaemonv
У них и скрипты в репозиториях кривые бывают
ndaemonv
Поставил горизонт не пашет
J
Там так то все заточено на штабильность, отсюда и лапша вся эта с жесткими ограничениями по версиям разных библиотек и даже самого ансибля.
ndaemonv
В скрипте ошибки
ndaemonv
Не, обычно, ставил я ансибл не юзаю
ndaemonv
Через какое то время смотрю нормальный скрипт положили
J
Через какое то время смотрю нормальный скрипт положили
Ну так я потому от пакетов и отказался что мейнтейнеры нихуя не следят за выходящими фиксами и не обновляют пакеты месяцами.
ndaemonv
У меня тоже цеф и лвм и всё бы ничего. Но с нвме у меня слезы сплошные кэшн
J
Это значит, разбираться надо. Там не вина самого софта, а с конфигурацией у тебя чо-то не то значит.
J
У тебя неправильное впечатление
ndaemonv
Ну как я понял это не ток у меня. Все ведёт меня к nvmeof. ТК за иопсами это всё-таки не в цеф
ndaemonv
Имеется ввиду проблемы с нвме через лвм не ток у меня
ndaemonv
тоже тестил и не придумал ничего хорошего - узкое горло в виде сетевого стека вроде было. при этом я даже ставил nvme в компьют, где сетапил cinder-volume и по iSCSI отвадал через 127.0.0.1
ndaemonv
Например вот)
ndaemonv
Ток вся фигня в том, что сата ссд ведёт ся вменяемо. А нвме нет, оба диска на одном хосте
J
Например вот)
https://ruffell.nz/programming/writeups/2019/07/20/resolving-nvme-performance-degradation.html
ndaemonv
Насколько я понял у него проблема с диском локально, хотя в моем случае, локально на хосте где синдер валум проблем нет, проблема внутри виртуалки уже.
ndaemonv
Версию ядра я конечно не помню на которой у меня щас развернуто, но ради любопытства посмотрю
J
Версию ядра я конечно не помню на которой у меня щас развернуто, но ради любопытства посмотрю
Ну а ты посмотри и на гипервизоре и на хранилище. А заодно и флейм графы и все прочее чо в статье есть.
И может статься что найдешь решение проблемы.
ndaemonv
Попробую спасибо
NS 🇷🇺
OpenStack умер говорили они - а люди все шли и шли в этот чатик =)
Sergei
Аааа а живые люди
Aleksey
OpenStack умер говорили они - а люди все шли и шли в этот чатик =)
Они с опеншифтом просто перепутали