@openstack_ru - страница 344

Aleksandr

ам... а как же affinity прерываний и всё такое? c C0 вроде вопросов нет :)

В смысле можно ли прожить с affinity чтобы не доставать второй процессор из сервера?) когда у вас процесс скачет между разными процессорами это вообще тушите свет. (я сейчас про конкретные типы нагрузки а не про любые). В рамках одного CPU affinity тоже не лишний я думаю, система будет более стабильная.

Aleksandr

лучше всего это видно на роутерах построенных на обычном x86 железе.

Mikhail

В смысле можно ли прожить с affinity чтобы не доставать второй процессор из сервера?) когда у вас процесс скачет между разными процессорами это вообще тушите свет. (я сейчас про конкретные типы нагрузки а не про любые). В рамках одного CPU affinity тоже не лишний я думаю, система будет более стабильная.

так, step-back. почему 1 цпу лучше если io высокий, msix дофига - вот этот момент очень интересен

Mikhail

лучше всего это видно на роутерах построенных на обычном x86 железе.

в моих кейсах сетка редко загружена... 100-300kpps. а вот диски и cpu обычно и становятся узким местом. особенно бесит что пропускная способность дисков не доходит до их технических параметров, а iowait просто улетает в небеса. поэтому и заинтересовало отключений HT (по тестам становится стабильнее io).

Aleksandr

так, step-back. почему 1 цпу лучше если io высокий, msix дофига - вот этот момент очень интересен

Я не специалист по архитектурам и я лично знаком только с высоко-нагруженными серверами гоняющими трафик. Сейчас попробую найти доклад цефоводов где они предлагают данные по исследованиям на счет single cpu против dual и более. Все сетивики серьезные (Netflix) говорят про single cpu only (ставят себе хеоны по 40 ядер) и гонят 100гбит с одной ФрииБСД коробки

Aleksandr

в моих кейсах сетка редко загружена... 100-300kpps. а вот диски и cpu обычно и становятся узким местом. особенно бесит что пропускная способность дисков не доходит до их технических параметров, а iowait просто улетает в небеса. поэтому и заинтересовало отключений HT (по тестам становится стабильнее io).

HT это кусок коммерческого говна и не более. на 2-3 ситуации где он повысил общую производительность системы я слышал 20 кейсов где он не просто мешал а крашил системы (в том числе на обычной виртуализации)

Aleksandr

так, step-back. почему 1 цпу лучше если io высокий, msix дофига - вот этот момент очень интересен

короче если на пальцах (пока ищу доклад) - всегда 1 цпу на 20 ядер лучше чем 2х10 или даже 2х14. И если у вас 10 дисков то лучше 1 цпу на 10 ядер по 3GHZ чем 1 цпу 20 ядер 2GHZ

Mikhail

Я не специалист по архитектурам и я лично знаком только с высоко-нагруженными серверами гоняющими трафик. Сейчас попробую найти доклад цефоводов где они предлагают данные по исследованиям на счет single cpu против dual и более. Все сетивики серьезные (Netflix) говорят про single cpu only (ставят себе хеоны по 40 ядер) и гонят 100гбит с одной ФрииБСД коробки

буду признателен за ссылку на доклад. ))

Aleksandr

буду признателен за ссылку на доклад. ))

пока нахожу только это https://puu.sh/CSCF8/8e383cf69d.png

Mikhail

короче если на пальцах (пока ищу доклад) - всегда 1 цпу на 20 ядер лучше чем 2х10 или даже 2х14. И если у вас 10 дисков то лучше 1 цпу на 10 ядер по 3GHZ чем 1 цпу 20 ядер 2GHZ

дисков 20, висят они за sas 3516, сокетов 2 по 20 ядер.

Aleksandr

Это из этой книги https://books.google.ru/books?id=ync5DwAAQBAJ&pg=PA18&lpg=PA18&dq=ceph+single+socket+vs+dual&source=bl&ots=Qg2-c_SKZH&sig=ACfU3U0Z9Y7_78Oz8xNQmb66T3owZ3R6rg&hl=en&sa=X&ved=2ahUKEwjDipf_29zgAhUC3aQKHVi3Ds84ChDoATAAegQIBBAB#v=onepage&q=dual%20socket&f=false

Aleksandr

дисков 20, висят они за sas 3516, сокетов 2 по 20 ядер.

Ceph Storage Node NUMA Tuning In order to avoid latency, it is important to minimize inter-socket communication between NUMA nodes to service client IO as fast as possible and avoid latency penalty. Based on extensive set of experiments conducted in Intel, it is recommended to pin Ceph OSD processes on the same CPU socket that has NVMe SSDs, HBAs and NIC devices attached.

Aleksandr

Вам оно надо? или проще открыть крышку и просто достать цпу второй?

Aleksandr

source : http://tracker.ceph.com/projects/ceph/wiki/Tuning_for_All_Flash_Deployments

Aleksandr

бле, а мы же ceph обсуждаем да? Если да то почему на этом канале :Д

Aleksandr

Похоже что не ceph( пора отдыхать. Если у вас просто ВМ то отключение HT i C-States вам хватит. Если ceph - single socket

Anonymous

@AvdeevDenis будет жить. Поприветствуем!

Mr rang_a

бле, а мы же ceph обсуждаем да? Если да то почему на этом канале :Д

Anonymous

Сергей Будников будет жить. Поприветствуем!

Anonymous

@DimiDr0l будет жить. Поприветствуем!

ᴅⁱᵐⁱᴅʳ0ˡ

всем привет

ᴅⁱᵐⁱᴅʳ0ˡ

а нормально в опенстэке вин сервера разворачивать? какие могут возникнуть трудности?

Ascandar

Novnc сильно тормозит

NS 🇷🇺

Novnc сильно тормозит

исключительно в хромых браузерах, у FF все ок

Inna

а нормально в опенстэке вин сервера разворачивать? какие могут возникнуть трудности?

нужно в образ подкладывать virtio драйверы и устанавливать cloudbase-init

ᴅⁱᵐⁱᴅʳ0ˡ

Спасиб

NS 🇷🇺

нужно в образ подкладывать virtio драйверы и устанавливать cloudbase-init

Или взять уже готовый ен образ с сайта того же клаудбейса

Inna

Или взять уже готовый ен образ с сайта того же клаудбейса

там только один(

J

Или взять уже готовый ен образ с сайта того же клаудбейса

И образ тот собран криво.

NS 🇷🇺

И образ тот собран криво.

шта в нем кривого? =)

NS 🇷🇺

не пользую, просто интересно

J

шта в нем кривого? =)

Он требует ручной смены пароля администратора во время OOBE. То есть, чтоб получить готовый сервер там надо через консоль лезть и вводить новый пароль.

NS 🇷🇺

Так это можно же кастомизировать

J

Так это можно же кастомизировать

А для этого надо пересборать образ с другим Unattend.xml.

NS 🇷🇺

Ну тебе не угодить )

J

Ну тебе не угодить )

Ну я к тому веду что "готовый образ от cloudbase" это лукавство то еще.

J

Лучше сразу свой делать.

NS 🇷🇺

Лучше сразу свой делать.

ну у нас валяется свои да... прада группа мелкософта долго тупила, как сделать так. чтобы не спрашивало ручного ввода пароля ... видать в клаудбейсе недотупили :D

J

ну у нас валяется свои да... прада группа мелкософта долго тупила, как сделать так. чтобы не спрашивало ручного ввода пароля ... видать в клаудбейсе недотупили :D

ну вот я как раз об этом)

Aleksandr

je vous prie de bien vouloir m'excuser

Ascandar

по какой причине может вызываться данная ошибка?

Ascandar

765b9] Setting instance to ERROR state.: NoValidHost_Remote: No valid host was found. 2019-02-28 19:01:27.097 25 ERROR nova.conductor.manager [req-df26d946-0341-43a2-860f-abc9a8343486 d18396ba2e9c4268b23ae36a7649c8b3 2983b1f9ac324769aa325926740ba85c - default default] Failed to schedule instances: NoValidHost_Remote: No valid host was found. Traceback (most recent call last): File "/var/lib/kolla/venv/lib/python2.7/site-packages/oslo_messaging/rpc/server.py", line 226, in inner return func(*args, **kwargs) File "/var/lib/kolla/venv/lib/python2.7/site-packages/nova/scheduler/manager.py", line 154, in select_destinations raise exception.NoValidHost(reason="")

✠ FLASh ✠

- по причине того, что на компьютах нет достаточно ресурсов для поднятия инстанса - нова фильтры не пропустили конфигурацию вм-ки и некуда ее спаунить

✠ FLASh ✠

для начала надо посмотреть - пропускает ли скедулер более мелкую вм-ку или нет

Annie

Ну, или компьют ноды не обнаружены от слова совсем.

✠ FLASh ✠

ну это да😃

✠ FLASh ✠

nova availability-zone-list что-то ваще показывает там?

Annie

openstack hypervisor list; openstack compute service list

Arkadiy

+ placement-api проверить