С сетевыми хранилищами cinder-volume перестают играть какую бы то ни было важную роль. Они по сути ваще становятся ненужны и выполняют часть функций api. Просто в силу того что такая сейчас архитектура. Сдох один - на его место встал второй.
А хранение локов и маунт к компьют нодам?
gwaewion
J
А хранение локов и маунт к компьют нодам?
Монтирование не нужно с сетевыми хранилищами же.
А локи хранятся локально в текущем активном cinder-volume. СОбственно, поэтому то пока несколько активных и не используют.
gwaewion
Монтирование не нужно с сетевыми хранилищами же.
А локи хранятся локально в текущем активном cinder-volume. СОбственно, поэтому то пока несколько активных и не используют.
В смысле не нужно? Отдаётся напрямую с хранилки в компьют?
J
В смысле не нужно? Отдаётся напрямую с хранилки в компьют?
Конечно.
Так ceph и sheepdog работают, по крайней мере.
gwaewion
Окей, но отдаются же они либо файлом (нфс), либо блоком? Нет?
gwaewion
Например в драйвере zfssa все класс работы с нфс наследуется с референсного. Это значит наличие тех же проблем с нфс как в случае с просто референсным нфс драйвером?
J
Например в драйвере zfssa все класс работы с нфс наследуется с референсного. Это значит наличие тех же проблем с нфс как в случае с просто референсным нфс драйвером?
Ну отдаются они объектами, qemu-kvm (ну, как самый распространенный пример) прямо через librbd в юзерспейсе обращается к хранилищу. А cinder-volume ему нужен только чтобы получить ключ для доступа к хранилищу.
Ты не разбирался чтоль с Ceph и всякими другими новомодными хранилищами? Если не, почитай, пожалуйста, там классные штуки происходят)
gwaewion
Ну отдаются они объектами, qemu-kvm (ну, как самый распространенный пример) прямо через librbd в юзерспейсе обращается к хранилищу. А cinder-volume ему нужен только чтобы получить ключ для доступа к хранилищу.
Ты не разбирался чтоль с Ceph и всякими другими новомодными хранилищами? Если не, почитай, пожалуйста, там классные штуки происходят)
Цепх руководство не хотит в связи с известными факапами
J
Цепх руководство не хотит в связи с известными факапами
Известных факапов там нету, которые препятствовали бы аккуратной эксплуатации.
Эт выдумки криворуких мудаков и всяких там техникал пресейл менеджеров производителей хранилщ, по большей части) Но эт так, к слову.
И странно) Опенстек хочет а цеф не хочет)
Поглядите чтоль вместе с начальством на ScaleIO, Scality тогда и на подобное. А то лвмы эти все равно не дело.
gwaewion
В продакшн предполагаются фасы нетаповские. Опять же нфсом отдавать
gwaewion
Отчего я эту тему и педалирую
J
Аааа.
J
Ну я тогда даже боюсь чот советовать. У меня прям отторжение такие решения вызывают что-то. Есть же вот поддерживаемые прям в qemu хранилища. Бери и пользуйся! Не хочу! Хочу нетапы с нфс экспортом(
J
https://www.youtube.com/watch?v=5pDy-wCmYAw
Извините)
J
Отчего я эту тему и педалирую
По теме тогда тебе и правда надо смотреть в каком состоянии там tooz + zookeeper или tooz + redis. Чтоб несколько активных cinder-volume держать.
J
Но все равно схема говенненькая.
Aidar
добрый день.
Danila
Aidar
При создании вм с копированием образа в вольюм циндера, имя диска пишется как /dev/vda при этом он подцепляется как virtio-scsi и в системе видится как /dev/sda
Aidar
это нормально или может привести к проблемам?
Aidar
при подключении второго диска в опенстек пишет подключен как /dev/sda а в системе виден как /dev/sdb
Andrey
Наблюдали подобную проблему. Кажется это баг, но лучше спросить у @nsuvorov
NS 🇷🇺
Добро пожаловать в мир Жопенстека :D
Aidar
virsh тоже возвращает что подключено два диска vda и sda
NS 🇷🇺
я не нашел как побороть
NS 🇷🇺
надо патчить код, вроде даже баг заведен на эту тему
Aidar
когда давно еще для либерти или митаки видел баг и патчи к нему правда найти не могу теперь
Aidar
Ок сейчас поищу еще
NS 🇷🇺
патчи для либерти у меня не взлетели
Aidar
https://bugs.launchpad.net/nova/+bug/1560965
Aidar
похоже оно
Aidar
и похоже так и не полечили
Maksim
Кто-то сталкивался с нерабочими фильтрами для nova-scheduler?
В фильтрах указан AggregateCoreFilter чтобы убрать гипервизоры где уже исчерпан лимит VCPU, но scheduler почему-то всеравно туда пытается закинуть инстанс. Настройка
enabled_filters=AvailabilityZoneFilter,RamFilter,NUMATopologyFilter,DiskFilter,ComputeFilter,ComputeCapabilitiesFilter,ImagePropertiesFilter,ServerGroupAntiAffinityFilter,ServerGroupAffinityFilter,CoreFilter,AggregateCoreFilter,RetryFilter
Maksim
Может как-то иначе надо фильтровать?
✠ FLASh ✠
а какой опенстек?
Maksim
ocata
✠ FLASh ✠
я не сталкивался с таким
✠ FLASh ✠
но выглядит странно на самом деле
Maksim
судя по
https://docs.openstack.org/nova/ocata/filter_scheduler.html
должно работать, но не работает
NS 🇷🇺
судя по
https://docs.openstack.org/nova/ocata/filter_scheduler.html
должно работать, но не работает
эм... тебе нужен CoreFilter
Maksim
Он тоже есть
Andrey
Может быть проблема не в фильтре, а в коэффициенте переподписки?
Andrey
В любом случае стоит включить дебаг и посмотреть на лог скедулера при создании вм - он покажет какие фильтры применяются
Maksim
ServerGroupAffinityFilter,CoreFilter,AggregateCoreFilter,RetryFilter
вот же =)
Maksim
третий с конца
Andrey
Что все таки с коэффициентом переподписки? Мне кажется тут собака зарыта.
NS 🇷🇺
Igor
не, проблема по видимому в том, что высокая конкуренция размещения инстансов на гипервизоре и, если cpu_allication_ratio подбирается близко к пределу, то шедулер может запланировать размещение, а когда инстанс будет создаваться - уже не будет ресурсов?
Igor
кто то сталкивался с таким?
Igor
есть еще ExactCoreFilter, но он не учитывает cpu_allocation_ratio
https://review.openstack.org/#/c/273154/
Igor
неужели только увеличивать ретраи?)
Anonymous
@MikhailSo будет жить. Поприветствуем!
gwaewion
никто такую беду не ловил при попытке ретайпа тома? https://pastebin.com/740kdLXJ
NS 🇷🇺
не nfs случаем?
gwaewion
не nfs случаем?
Ну... На нфс такая же беда при попытке снятия снапшота. Но это iscsi для lvm и netapp
Aleksey
Господа, в horizon есть возможность создавать ВМ на volume и при этом указывается удалять ли диск в ВМ или нет.
Кто-нибудь может подсказать, есть ли этот флаг в CLI и где хранится этот флаг/параметр?
J
Господа, в horizon есть возможность создавать ВМ на volume и при этом указывается удалять ли диск в ВМ или нет.
Кто-нибудь может подсказать, есть ли этот флаг в CLI и где хранится этот флаг/параметр?
Нету. Это хранится в БД horizon, вроде.
В cli же вообще, кажется, нет ключей чтобы вот так создавать. Там просто создаешь сначала диск, а уж потом из него виртуалку, в два этапа типа.
gwaewion
Крч, от циндера в кистон приходит пост запрос без указания домена
Aleksey
Нету. Это хранится в БД horizon, вроде.
В cli же вообще, кажется, нет ключей чтобы вот так создавать. Там просто создаешь сначала диск, а уж потом из него виртуалку, в два этапа типа.
у меня нету БД хорайзена
+--------------------+
| Database |
+--------------------+
| cinder |
| glance |
| information_schema |
| keystone |
| mysql |
| neutron |
| nova |
| nova_api |
| nova_cell0 |
| performance_schema |
+--------------------+
J
J
Но хотя там только джанговская херота.
Aleksey
Вот те на)
В пайке смотрю и есть базюлька horizon.
а зачем она вам? ( зачем вам столько галапередола?)
Aleksey
Откуда ж я знаю)
Оно само)
насколько я понял, в основном она пользуется для хранения сессий, если к мемкеше не хранить конечно
J
насколько я понял, в основном она пользуется для хранения сессий, если к мемкеше не хранить конечно
Ну да, так и используется.
Правда, и мемкэш есть.
J
Ну, я без понятия как там openstack-ansible все это накрутил. Я ж не настоящий сварщик.
J
А и правда интересно, где ж тогда хранится.
Aleksey
Ну, я без понятия как там openstack-ansible все это накрутил. Я ж не настоящий сварщик.
ок, тогда вопрос остаётся открытым, где искать «сраный» параметр?
Aleksey
ок, тогда вопрос остаётся открытым, где искать «сраный» параметр?
ибо как понять, где его ставил, а где нет?
Dmitry
в бд новы хранится
Dmitry
в блок девайс мапипинг помоему
Dmitry
есть даже блюпринт на добавление этой ручки в апи
J
Спасибо.