И да zVirt+nova это действительно инновационный продукт, такого на рынке к счастью более нет.

В этой компании работаешь?

Ростелеком?

нет

Romtelecom?

Nien

А кто умеет хорошо конструировать защищённые, критические инфраструктуры?

А вам зачем?

На работе нужно/

Не простая организация у нас

Кучно пошло…

Кучно пошло…

всем привет. подскажите в синдере вроде появилась поддержка для драйвера lvm nvme over tcp. кто нибудь пробовал завести его?

работает

А подскажите пожалуйста где доку почитать. Или поправьте если я ошибаюсь. Пробовал на 22 и 24 убунте, релизы антилопа и последний. На блочном хранилище есть нвме, ставлю модули для nvme_tcp, создаю порты, нэймспэсы и сабсистем. Проверяю отдает по сети, все ок. Для синдера, настраиваю бэкэнд lvm, прописываю: [nvme1] volume_driver=cinder.volume.drivers.lvm.LVMVolumeDriver,volume_group = cinder-nvme1 target_protocol = nvmet_tcp,nvmet_ns_id = 1,nvmet_port_id = 1,target_helper = nvmet В логах ошибки модуля nvmet нету, не находит. Доставил nvmetools питонячий и там куча ошибок на всякие типы данных и тд.

volume_group = cinder-volumes volume_driver = cinder.volume.drivers.lvm.LVMVolumeDriver volume_backend_name = lvm-2 target_helper = nvmet target_protocol = nvmet_tcp

а с самой nvme что делать? просто vg создать? у меня вот на этом моменте все рушится: ERROR cinder.cmd.volume [None req-3bc07b4d-1762-4690-b478-bf0c8282f894 - - - - - -] Volume service block2@nvme1 failed to start.: ModuleNotFoundError: No module named 'nvmet'

modinfo nvmet ?

А чем это лучше nfs? Такая же медленная сеть, такие же тормоза по io timeout

присутствует вроде, ну я модули nvmet и nvme_tcp подгружаю modinfo nvmet filename: /lib/modules/6.8.0-39-generic/kernel/drivers/nvme/target/nvmet.ko.zst license: GPL v2 description: NVMe target core framework import_ns: NVME_TARGET_PASSTHRU srcversion: B97F72F7E142D28429D83EF depends: nvme-auth,nvme-core,nvme-keyring retpoline: Y intree: Y name: nvmet vermagic: 6.8.0-39-generic SMP preempt mod_unload modversions sig_id: PKCS#7

nvme_core 212992 6 nvmet,nvme_tcp,nvme,nvme_fabrics

хм, а оно в контейнере запускается у вас?

присутствует вроде, ну я модули nvmet и nvme_tcp подгружаю modinfo nvmet filename: /lib/modules/6.8.0-39-generic/kernel/drivers/nvme/target/nvmet.ko.zst license: GPL v2 description: NVMe target core framework import_ns: NVME_TARGET_PASSTHRU srcversion: B97F72F7E142D28429D83EF depends: nvme-auth,nvme-core,nvme-keyring retpoline: Y intree: Y name: nvmet vermagic: 6.8.0-39-generic SMP preempt mod_unload modversions sig_id: PKCS#7

из пакетов ставил

а если не контейнер?

оо это же совсем другое) вы что)

А чем это лучше nfs? Такая же медленная сеть, такие же тормоза по io timeout

Хм - берём Феррари и что бы она возила - сзади тонар крепим. Теперь быстро не может и нам как бы хватило бы нивы, но модно молодежно

там даже multipath можно сделать при желании, да и доступ к fs vs доступ к блочному девайсу совсем разные ощущения

Питоновского модуля нет, а не модуля ядра.

присутствует вроде, ну я модули nvmet и nvme_tcp подгружаю modinfo nvmet filename: /lib/modules/6.8.0-39-generic/kernel/drivers/nvme/target/nvmet.ko.zst license: GPL v2 description: NVMe target core framework import_ns: NVME_TARGET_PASSTHRU srcversion: B97F72F7E142D28429D83EF depends: nvme-auth,nvme-core,nvme-keyring retpoline: Y intree: Y name: nvmet vermagic: 6.8.0-39-generic SMP preempt mod_unload modversions sig_id: PKCS#7

Ок, получается забыли nfs - аналог iscsi?

Питоновского модуля нет, а не модуля ядра.

https://pypi.org/search/?q=nvmet не слышал о таком, это какой-то кастомный модуль?

Вот этот не может найти. https://docs.openstack.org/cinder/latest/contributor/api/cinder.volume.targets.nvmet.html

но этот модуль вроде бы как не nvmet )

https://pypi.org/search/?q=nvmet не слышал о таком, это какой-то кастомный модуль?

from cinder.privsep.targets import nvmet отоночо михалыч

Это nvme target драйвер для cinder-volume. https://opendev.org/openstack/cinder/src/commit/30cdc86784bc211c6ac3071b20460436699dd217/cinder/volume/targets/nvmet.py

https://pypi.org/search/?q=nvmet не слышал о таком, это какой-то кастомный модуль?

в ней вот так делают

https://opendev.org/openstack/cinder/src/commit/30cdc86784bc211c6ac3071b20460436699dd217/cinder/privsep/targets/nvmet.py кажется вот эта штуковина нужна

pip install git+https://github.com/JunxiongGuan/nvmetcli но я не знаю что это за тип ваще)))) а в коммитах cinder, где добавляют nvmet не видно, чтобы трогали requirements.txt, очень странно как все устанавливается

вот доставил, легче не стало) File "/usr/lib/python3/dist-packages/cinder/privsep/targets/nvmet.py", line 179, in <module> ANAGroup = nvmet.ANAGroup AttributeError: module 'nvmet' has no attribute 'ANAGroup'

Ну так либа левая жеж🙈🙈

авось взлетит

вот доставил, легче не стало) File "/usr/lib/python3/dist-packages/cinder/privsep/targets/nvmet.py", line 179, in <module> ANAGroup = nvmet.ANAGroup AttributeError: module 'nvmet' has no attribute 'ANAGroup'