J
Все на что грешу это за 30 минут до скачка на графике поменял DHCP lease max time c 24 часов на 10 минут , но как то слабо вериться, что повлияло только через 30 минут
А, ну, конечно, странное предположение, но, как минимум, подумай вот о чем: Уменьшив время выдачи аренды с 24 часов до 10 минут ты, как минимум, увеличил объем DHCP трафика в 144 раза.
Evgeny
откатил минут 15 назад все взад на 24 часа, за 5 минут все клиенты получили новую аренду, но по нагрузке ничего не поменялось
J
Эх. Это на всех сетевых нодах - или она одна?
Evgeny
2 сетевых ноды - на обоих все аналогично
J
И на обеих высокий soft irq?
Evgeny
ага
J
Блин) Ну, собсно, надо б засесть за sysdig тогда, наверное.
Evgeny
J
Так. Ну, я б не сказал что это необычно)
Arkadiy
softirq на каждом ядре высокий? Что в sysctl (backlog и пр.)?
Evgeny
softirq на каждом ядре высокий? Что в sysctl (backlog и пр.)?
Высокий на ядрах 1-8 и 23-31 к которым прибиты очереди сетевой карты sysctl потюнен backlog в районе 1000
Evgeny
Посмотрел трафик iftop на интерфейсах насколько вижу обычный пользовательский трафик, уже склоняюсь к тому что просто 1gb карточек уже мало и нужны 10ки в них очередей 64
Evgeny
А сеть встроенная? Что за чип?
Intel Corporation I350 Gigabit Network Connection - двух портовая собран bonding
Evgeny
дамп увесистый за меньше минуты почти 1Гб )
Evgeny
Xmit policy l3+l4 или 1
J
Да что ж такое)
J
Пока грешить думаю или на какие-то проблемы в Open vSwitch или, что вероятнее, на какой-то аномальный трафик.
Fox
Тспдампом может трафик посмотреть...
Fox
Пардон выше уже писали)
Fox
А дропов в счетчиках нет?
Evgeny
статистика по траффику
Evgeny
Evgeny
Evgeny
это дропы - можно считать что их нет
Evgeny
Fox
Извинте конечно что не в тему
Fox
ктонибудь в NGINX разбирается?
sbog
Здесь спамеров не банят что ли?
Михаил
Здесь спамеров не банят что ли?
главный вахтёр в отпуске немного)
Михаил
Здесь спамеров не банят что ли?
главный вахтёр в отпуске немного)
Михаил
неть
Igor
всем привет! а что может быть, на одном l3 агенте qrouterы поднимаются, на другом - нет причем агент запускается без ошибок, в логах neutron-server виден обмен сообщениями с агентом, но поднимать виртуальные роутеры ни в какую. зона доступности у всех агентов одна и та же это же касается dhcp агента и lbvaas такое впечатление что в чем то стали различаться агенты( в списке агентов они все видны и живые
J
А что значит "не поднимаются роутеры?" netns создаются соответствующие?
Igor
нет) при старте l3 агента видно что он выполняет команду ip netns list дальше все и дальше периодически periodic_sync_routers_task successfully completed fetch_and_sync_all_ routers /usr/lib/python2.7/dist-packages/neutron/agent/l3/agent.py:625
Igor
это касается всех агентов, dhcp и lbvaas
J
Ну надо дебаг включить и смотреть в логи агента. Я бы еще и в сислог\dmesg заглянул.
Igor
там и так debug и ничего криминального https://pastebin.com/TxnBQT85
Igor
в dmesg тоже все спокойно вроде как
J
Ну, выглядит так будто роутеров нет попросту в базе нейтрона.
Igor
удалил агента, вроде теперь норм
Igor
он потом создался после рестарта в логах агента появились еще строчки 2017-10-23 00:55:10.659 24813 DEBUG oslo_concurrency.lockutils [-] Lock "_check_child_processes" acquired by "neutron.agent.linux.external_process._check_child_processes" :: waited 0.000s inner /usr/lib/python2.7/dist-packages/oslo_concurrency/lockutils.py:273 2017-10-23 00:55:10.660 24813 DEBUG oslo_concurrency.lockutils [-] Lock "_check_child_processes" released by "neutron.agent.linux.external_process._check_child_processes" :: held 0.002s inner /usr/lib/python2.7/dist-packages/oslo_concurrency/lockutils.py:285 2017-10-23 00:55:11.097 24813 DEBUG oslo_concurrency.lockutils [-] Lock "_check_child_processes" acquired by "neutron.agent.linux.external_process._check_child_processes" :: waited 0.000s inner /usr/lib/python2.7/dist-packages/oslo_concurrency/lockutils.py:273 2017-10-23 00:55:11.099 24813 DEBUG oslo_concurrency.lockutils [-] Lock "_check_child_processes" released by "neutron.agent.linux.external_process._check_child_processes" :: held 0.002s inner /usr/lib/python2.7/dist-packages/oslo_concurrency/lockutils.py:285 которых не было, когда он не работал
J
То есть, чо произошло то?) Был проблемный агент? Удалил его и добавил заново и все?
Igor
Да
Fox
Добрый день! подскажите как изменить пароль root в инстансе
Fox
есть упоминания что можно через Nova api
Fox
а примера найти немогу
✠ FLASh ✠
ты про nova root-password / nova set-password?
Fox
уууф
Fox
Просто походу клоуд имейдж кривой который на убунту лежит
Fox
айпишник у виртуалки не поднимается
Fox
#cloud-config user:root password:abc123 chpasswd:{expire: False} ssh_pwauth:True
Fox
прописал в инстанце
Fox
и не применилось при создании
Fox
придется свой образ собирать всетаки
Maksim
потому что password не должен быть plaintext
Maksim
читай документацию - все будет работать)
Maksim
#cloud-config ssh_pwauth: true users: - name: ubuntu groups: sudo shell: /bin/bash sudo: ['ALL=(ALL) NOPASSWD:ALL'] plain_text_passwd: 'ubuntu123' lock_passwd: false
Maksim
вот пример рабочий!
Fox
вот блин а какого фига интерфейс не создается интересно)
Maksim
по аналогии для рута сделаешь)
Fox
сейчас попробую
Maksim
и еще клауд-имаджи все разные
Fox
разные в плане?
Fox
отступы обязательно соблюдать?
Maksim
xenial с нормальным cloud-init это будет работать в trusty старый cloud-init там немного по другому надо писать, надо доку читать и баги на ланчпаде
Maksim
там точно нетворк был сломан помню
Maksim
насчет юзеров смотреть надо
Fox
блинн точно
Fox
недавно ансибл с джунипеом скрещивал
Fox
)))
J
Клауд нинт чот дрянь-дрянь)
Maksim
https://ru.wikipedia.org/wiki/YAML#.D0.A1.D0.B8.D0.BD.D1.82.D0.B0.D0.BA.D1.81.D0.B8.D1.87.D0.B5.D1.81.D0.BA.D0.B0.D1.8F_.D1.88.D0.BF.D0.B0.D1.80.D0.B3.D0.B0.D0.BB.D0.BA.D0.B0