nvmeof/rdma, из вм гостевой больше 120к не выжимается, на хосте 850к
@mixroot где же вопрос 'при чем тут опенстек' ?
Mr
Mr
nvmeof/rdma, из вм гостевой больше 120к не выжимается, на хосте 850к
Davg/ kavg и их аналоги смотрели ?
Andrew
Davg/ kavg и их аналоги смотрели ?
Не смотрели, пытались оптимизировать всяко разно в надежде что стандартный драйвер сможет
Andrew
Прям ванильный линукс из исходников?
Дебиан, но вопрос общего характера, у кого то есть показатели иопсов сравнимые с таковыми на хосте, то есть издержки в 10-20% еще объяснимы, но не в 8 раз
J
Дебиан, но вопрос общего характера, у кого то есть показатели иопсов сравнимые с таковыми на хосте, то есть издержки в 10-20% еще объяснимы, но не в 8 раз
Да ну я думаю что реально может упираться в virtio.
Но не принципиальное ограничение, а чо-то надо крутить.
Mr
Дебиан, но вопрос общего характера, у кого то есть показатели иопсов сравнимые с таковыми на хосте, то есть издержки в 10-20% еще объяснимы, но не в 8 раз
Почему вы пишете 'на хосте' и при этом 'rdma' ? Пишите как есть, что и как вы испытываете и какие результаты ожидали и почему
J
Не смотрели, пытались оптимизировать всяко разно в надежде что стандартный драйвер сможет
А на локальном nvme не пробовали?
Mr
Да ну я думаю что реально может упираться в virtio.
Но не принципиальное ограничение, а чо-то надо крутить.
Не знаю как у него, а в нашем проприетарном мире есть kavg
J
Да, на опенстеке
Ну хотя не важно.
Там, думаю, в том затык что очередь одна и обрабатывается в один поток.
Только вот в девятом qemu появилась возможность multiqueue делать, а nova и glance не умеют пока через метаданные образов и флейворов делать для virtio-blk несколько очередей, только для virtio-net.
https://www.qemu.org/2024/04/23/qemu-9-0-0/
J
Косвенно можно это протестить отключив часть ядер, а на оставшихся отключить c-states чтобы тактовые частоты задрать до максимально возможных.
Если иопсов при этом чуть побольше увидишь, то это освенно подтвердит теорию.
Andrew
J
Да, отпишу, как проверим гипотезу
https://developers.redhat.com/articles/2024/09/05/scaling-virtio-blk-disk-io-iothread-virtqueue-mapping#configuration_tips
Вот еще забыл скинуть)
Stanley
Ну хотя не важно.
Там, думаю, в том затык что очередь одна и обрабатывается в один поток.
Только вот в девятом qemu появилась возможность multiqueue делать, а nova и glance не умеют пока через метаданные образов и флейворов делать для virtio-blk несколько очередей, только для virtio-net.
https://www.qemu.org/2024/04/23/qemu-9-0-0/
Давно не копал эту тему. Всё ещё в один поток?
Квм давно уже в мульти умеет
Leysan
Всем привет!
Можете подсказать?)
Тестирую openstack, на всех компонентах, где используется RabbitMQ:
[oslo_messaging_rabbit]
rabbit_quorum_queue = true
----
(heartbeat_in_pthread не указан)
Однако бывают проблемы:
1. Появляются ошибки у rabbit connection reset by peer.
2. Иногда неравномерное распределение нагрузки по хостам
Возникает вопрос: может ли быть причиной этих проблем то, что параметр heartbeat_in_pthread не указан и по умолчанию имеет значение false? Если запросы heartbeat выполняются в основном потоке, это может приводить к разрывам соединений с RabbitMQ?
Заранее спасибо
Илья | 😶☮️🐸
и там ещё и на лаунчпаде полировали
Leysan
понял, спасибо поищу сейчас
J
Давно не копал эту тему. Всё ещё в один поток?
Квм давно уже в мульти умеет
Ну как, с девятой версии)
NS 🇷🇺
Коллеги, потихонечку продолжаю возвращаться в этот увлекательный(нет) мир. Какую версию опенстека сейчас стоит рассматривать, как наиболее стабильную( если этот термин здесь вообще уместен 🤣)
J
J
Коллеги, потихонечку продолжаю возвращаться в этот увлекательный(нет) мир. Какую версию опенстека сейчас стоит рассматривать, как наиболее стабильную( если этот термин здесь вообще уместен 🤣)
Как в мафии или ЦРУ, ток вперед ногами можно из этого увлекательного мира уйти)
NS 🇷🇺
Как в мафии или ЦРУ, ток вперед ногами можно из этого увлекательного мира уйти)
Ну я смог 2 года погулять на стороне 🤣
icewolf
как там «Вася это не тот контейнер»🤣🤣🤣
Mikhail
Коллеги, потихонечку продолжаю возвращаться в этот увлекательный(нет) мир. Какую версию опенстека сейчас стоит рассматривать, как наиболее стабильную( если этот термин здесь вообще уместен 🤣)
Bobcat вполне уместен и стабилен. Брать что то из самого свежего- ИМХО идти по граблям, в основном свои и херово описанным
NS 🇷🇺
Bobcat вполне уместен и стабилен. Брать что то из самого свежего- ИМХО идти по граблям, в основном свои и херово описанным
Ну свежачок мы уже проходили. Черт не так страшен
Vyacheslav
icewolf
на одном из проекто у меня уже есть бобик, но там маленькая инсталяция ...
А ты ставь сразу большую на 1000 серверов, сразу в прод..
NS 🇷🇺
А ты ставь сразу большую на 1000 серверов, сразу в прод..
ты думаешь я так не умешь? я же могу еще и альфу накатить :D
Mikhail
угу что бы всю субботу и воскресенье сидеть и дебажить и чинить
Дорогой, чем ты занимаешься? Аммм...
icewolf
Дорогой, чем ты занимаешься? Аммм...
БДСМ практиками анального деплоя, аттестованных контуров по требованиям всяких ведомств добрых дел, openstack cloud war platform для целей командного управления дудыльной фабрикой
NS 🇷🇺
угу что бы всю субботу и воскресенье сидеть и дебажить и чинить
ну так мы выпиливали nuage да :D
icewolf
альтушки это не модно
icewolf
Ладно, стоп слово есть? Начинается на S
сберлинукс это для избранных.. он слишком мифический(от порошка Миф).
icewolf
в защищенном режиме графоний этой оси красный.
NS 🇷🇺
Ну там Вова и Дони уже перетерли, скоро заживем. Нормальная альтернатива появится, но это не точно
Vyacheslav
Ну там Вова и Дони уже перетерли, скоро заживем. Нормальная альтернатива появится, но это не точно
там же в МТС нормальная альтернатива была
Mikhail
icewolf