Anonymous
@fredtz будет жить. Поприветствуем!
Aleksey
Вот еще какая дрянь.
https://specs.openstack.org/openstack/openstack-specs/specs/return-request-id.html
В glance осилили, а в cinder нет, похоже.
Что нарыл, проблема возникает, когда nova-compute пытается запихнуть два запроса в одну tcp-сессию, но cinder-api почему-то шлёт fin сразу после 1го
J
Что нарыл, проблема возникает, когда nova-compute пытается запихнуть два запроса в одну tcp-сессию, но cinder-api почему-то шлёт fin сразу после 1го
А как это?
Два запроса в одну сессию?
Вот если подумать в случае с http в api сервисах используются только короткоживущие сессии. Один запрос - одна сессия...
Aleksey
А как это?
Два запроса в одну сессию?
Вот если подумать в случае с http в api сервисах используются только короткоживущие сессии. Один запрос - одна сессия...
Ну вот видимо компьют научили, а циндер нет
J
J
Но это, в общем то, наверное нормальное поведение. Так быстрее закрывается соединение.
Aleksey
Тут нормально все на вид за исключением того что cinder не дожидается ack в ответ на fin ack и шлет rst.
Всё так, по мне именно в этом и проблема. Так как ошибка в компьют именно на рст
Aleksey
Но это, в общем то, наверное нормальное поведение. Так быстрее закрывается соединение.
Только почему нова компьют падает от этого рст при создании ВМ?
J
Только почему нова компьют падает от этого рст при создании ВМ?
Экзотично, но объяснить можно тем, что питоновская библиотека отвечающая за http (хз чо там, к своему стыду), ждет что соединение будет закрыто классическим способом.
Ваще rst для быстрого закрытия соединения используют обычно именно клиенты, вроде.
Aleksey
Экзотично, но объяснить можно тем, что питоновская библиотека отвечающая за http (хз чо там, к своему стыду), ждет что соединение будет закрыто классическим способом.
Ваще rst для быстрого закрытия соединения используют обычно именно клиенты, вроде.
вот я думаю, а не может ли быть проблема в питоновских либах, а не в циндере и новые? Ведь у нас они все по контейнерам
J
вот я думаю, а не может ли быть проблема в питоновских либах, а не в циндере и новые? Ведь у нас они все по контейнерам
Ну я про это и написал)
Да, может быть в них дело.
NS 🇷🇺
ну, у меня дома, не в продакшене, для личных проектов. могу такое позволить )))
хотя ругнулся только neutron, не были указаны некоторые параметры в конфиге
Попробуйте такое с Либерти митаки проделать ) там много чего ругается
Evgeny Demin
отбой, я плюнул на всё и обновился до rocky, там все пакеты есть =) спасибо.
Кстати, а какой порядок обновления, есть годный гайд?
Slava
Попробуйте такое с Либерти митаки проделать ) там много чего ругается
Да я даже не сомневаюсь :)
NS 🇷🇺
Какие камни подводные есть?
Там их вагон.. В тесте я с Либерти до Ньютона дошёл. На след неделе в прод несу. А потом с Ньютона до роки наверное
Slava
Кстати, а какой порядок обновления, есть годный гайд?
Я один хост станала обновил, посмотреть как отваливаться будет. К счастью, я на предыдущей версии все устаревшие настройки выпилил. В итоже только нейтрон рухнул. Ну а на остальных я это предусмотрел.
Evgeny Demin
Там их вагон.. В тесте я с Либерти до Ньютона дошёл. На след неделе в прод несу. А потом с Ньютона до роки наверное
А какой хоть порядок или без даунтайма никак не обновиться. Т.е если у меня 14 версия, то мне надо обновляться раз 5 или 4 скока там уже релизов было?
Slava
Я один хост станала обновил, посмотреть как отваливаться будет. К счастью, я на предыдущей версии все устаревшие настройки выпилил. В итоже только нейтрон рухнул. Ну а на остальных я это предусмотрел.
Стоит отметить, домашняя установка не шибко навороченая. Да и всего шесть железок.
Evgeny Demin
Или 14 это и есть newton
Evgeny Demin
Стоит отметить, домашняя установка не шибко навороченая. Да и всего шесть железок.
Ну интересен хотя бы примерный порядок что за чем обновлять, типа тупо демонов переустановить и рестартить? Или таки еще какое шаманство есть?
Dmitry
Slava
Ну интересен хотя бы примерный порядок что за чем обновлять, типа тупо демонов переустановить и рестартить? Или таки еще какое шаманство есть?
я обновлял последовательно, версия за версией. Т.к заметил что в проектах объединяют миграции баз данных. И если обновлять через одну версию, то может возникнуть такая проблема, что бд будет кривой.
NS 🇷🇺
А какой хоть порядок или без даунтайма никак не обновиться. Т.е если у меня 14 версия, то мне надо обновляться раз 5 или 4 скока там уже релизов было?
Это долго писать ) даунтайма для уже работающих вм не будет
NS 🇷🇺
я обновлял последовательно, версия за версией. Т.к заметил что в проектах объединяют миграции баз данных. И если обновлять через одну версию, то может возникнуть такая проблема, что бд будет кривой.
с либерти на ньютон этим можно пренебречь, я стрелял сразу... а вот начиная дальше пришлось идти по версиям... ибо разносило базу то синдера то ньютона
NS 🇷🇺
и после ньютона очень меняются конфиги
Slava
Обычно, если производим обновление, то обновляем постепенно, хост за хостом. Обновляемый хост освобождается из всех хрупп и все виртуалки эвакуируются на соседний вост. После всего этого делаются все обновления и после всего хост тестируется и вводится в строй.
Тут хорошо когда есть хранилище виртуалки моментально переносятся, без него на хост уходит примерно несколько дней.
Arkadiy
Всем привет!
Версия – Queens, тестовый кластер, 2 "гипервизора", на каждом 20GB HDD, хочу Placement API сказать, что у меня есть shared storage и что он должен это учитывать, получается вот так: https://pastebin.com/JaSqjkKi
Что я делаю не так?
Arkadiy
Всем привет!
Версия – Queens, тестовый кластер, 2 "гипервизора", на каждом 20GB HDD, хочу Placement API сказать, что у меня есть shared storage и что он должен это учитывать, получается вот так: https://pastebin.com/JaSqjkKi
Что я делаю не так?
Отставить, разобрался сам, оказывается nova aggregate != placement api aggregate, вот тут неплохое объяснение: https://developer.openstack.org/api-ref/placement/#resource-provider-aggregates
Михаил
А Андрей Маркелов в этом чате есть же?) У меня есть вопрос: почему в 4м издании я вижу труп стюардессы(главу про nova-docker ))
Anonymous
Максим Мануйлов будет жить. Поприветствуем!
Анатолий
Добрый день подскажите как вывести из кластера ненужную osd
Анатолий
Анатолий
было у меня рабочих всего 7 из 7
но после перебоев кластер вновь думает что у него их 8
и не может некак завершить рекавери
Анатолий
Анатолий
я как бы удаление загуглил но это прод, на проде как то сыкотно выполнять вот и хочу проконсультироваться
Inna
я как бы удаление загуглил но это прод, на проде как то сыкотно выполнять вот и хочу проконсультироваться
Привет, имхо ничего страшного, он на 7 осд перебалансирует и будет health ok
Inna
А от того, что 8 выведешь тоже ничего плохого не должно случиться
Анатолий
А от того, что 8 выведешь тоже ничего плохого не должно случиться
Я сейчас вернусь в офис если что напишу ок?
Dmitry
@ceph_ru
Inna
так там хуями накормят и расскажут что на трех серверах нельзя)
Александр
зайди с такими вопросами в чат сефа, тебя там с говном смешают, прожуют, высрут и еще раз смешают :D
Анатолий
Я вообще помогаю всем если это в моих силах, не сру на людей, меня уже как то летом пытались накормить хуями.
Анатолий
Извините накипело просто
Анатолий
В итоге сделали все наоборот и кластер ожил, если бы я слушал то что мне там советовали, я бы остался без кластера и данных
Анатолий
Блин простите я перепутал группу и задал вопрос по ceph в openstack, надеюсь меня админы поймут
Anonymous
Max будет жить. Поприветствуем!
J
Блин простите я перепутал группу и задал вопрос по ceph в openstack, надеюсь меня админы поймут
Да ну все нормально.
Тебя ж вон припугнули даже выше тем что тебя может ждать в чате про цеф)
J
Тут многие тоже пользуются ведь цефом.
Dennis
зайди с такими вопросами в чат сефа, тебя там с говном смешают, прожуют, высрут и еще раз смешают :D
https://habr.com/company/croccloudteam/blog/422905/
Вот тут хорошо сравнивается нормальная СХД и ceph
😁
Александр
https://habr.com/company/croccloudteam/blog/422905/
Вот тут хорошо сравнивается нормальная СХД и ceph
😁
Там просто выводы одного человека, что плохого есть в цепхе
Александр
О каком сравнении речь?
Александр
Не читай, пиши - норм девиз
Slava
https://habr.com/company/croccloudteam/blog/422905/
Вот тут хорошо сравнивается нормальная СХД и ceph
😁
По своему скудному опыту могу сказать почему принимают решение в пользу сефа.
1. человеки для обслуживания всё равно нужны (СЕФ ЭТО ИЛИ ЖЕ СХД)
2. через некоторое время ценники на диски для конкретной схд начинают расти в геометрической прогрессии (вообще всё начинает расти после окончания гарантии)
3. на коленке собрать схд такой же ёмкости будет стоить примерно в 2-3 (мэйби больше) раза дешевле
4. косяки (из скудного опыта) случаются даже с схд (особенно, когда саппорт в ДЦ меняет не те диски и всё идёт по пи**е)
В статье есть правильная фраза "В общем всё нужно досконально проверять и перепроверять, ceph доверия нет.", на самом деле ни к чему нет доверия, всё нужно проверять и тестировать.
Slava
* там капс нечаяно запал, лень переписывать =)
Dennis
смысл в том - что если зажали купить СХД то приходиться страдать с кучей всяких прелестей., особенно радует нотифи ребаланса по ночам от заббикса т.к. статус меняется на дигрейдед ☹️
да и в целом сильно дешевле не получается т.к. приходится учитывать 10ж комутаторы
в общем аффтор давно занимается сексом с цефом и ему он уже как родной 😉
на сколько я понял это основная причина использования цефа
Dennis
я просто сравниваю свой опыт работы с ЕМС2 и сейчас с цефом
СХД мне больше нравилось ))
NS 🇷🇺
Коллеги, странный вопрос а никто не понмнит макс количество дисков у вм?
Andrey
В твоем случае - max количество устройств на pci шине
Andrey
За вычетом служебных и портов нетрона. Глянь в дампхмл - поймешь о чем я
Andrey
32 девайса на каждую шину. После превышения стек не потается создать новую шину и отдает ошибку емнип.
J
32 девайса на каждую шину. После превышения стек не потается создать новую шину и отдает ошибку емнип.
Но если SATA контроллеры эмулировать, то получится побольше же?
На каждый контроллер сколько можно повесить?
Andrey
Хз что из этого умеет стек. Ну и главное - зачем столько дисков?..
Dmitry
Лвм собрать из разных типов дисков :))
NS 🇷🇺
В твоем случае - max количество устройств на pci шине
А вдруг я на virtio-scsi за время твоё отсутствия перешёл ?)
Александр
По своему скудному опыту могу сказать почему принимают решение в пользу сефа.
1. человеки для обслуживания всё равно нужны (СЕФ ЭТО ИЛИ ЖЕ СХД)
2. через некоторое время ценники на диски для конкретной схд начинают расти в геометрической прогрессии (вообще всё начинает расти после окончания гарантии)
3. на коленке собрать схд такой же ёмкости будет стоить примерно в 2-3 (мэйби больше) раза дешевле
4. косяки (из скудного опыта) случаются даже с схд (особенно, когда саппорт в ДЦ меняет не те диски и всё идёт по пи**е)
В статье есть правильная фраза "В общем всё нужно досконально проверять и перепроверять, ceph доверия нет.", на самом деле ни к чему нет доверия, всё нужно проверять и тестировать.
3. Не фига не правда, собери 1-2Пб, выйдет примерно одинаковая цена, ну 10% разницы максимум
Dennis
3. Не фига не правда, собери 1-2Пб, выйдет примерно одинаковая цена, ну 10% разницы максимум
файлопомойку будет и правда дешевле
но если говорить о СХД с уровнями кешей как положено и т.д. то врядли получится 😉
Александр