Куда пихается сертификат dashboard
у нас радикально решили эти вопросы нджинксом перед всеми ендпоинтами и хорайзенами
Aleksey
NS 🇷🇺
у нас радикально решили эти вопросы нджинксом перед всеми ендпоинтами и хорайзенами
мы еще и апач при этом выпездили
NS 🇷🇺
да
Edouard
Есть же еще пользователи мирантиса, оказывается.
Pavel
Есть, они не могут не есть
NS 🇷🇺
Есть же еще пользователи мирантиса, оказывается.
у нас тоже присутствует, все никак не избавимся, соседний отдел динамит вопросы ликвидации
Edouard
Решение этой ситуации явно читается в этом ответе)
Дима
да, надо отказаться от этого старья, жаль решаю не я
Дима
пока не банк
NS 🇷🇺
ответ года :D
J
Вот чо-то сидел думал куда дальше свою инфраструктуру с Ironic развивать и задумался. Вот есть packet.net, которые айроник не осилили в своё время и написали свой кастомный софт.
И они ща рекламируют что сервер у них готов за десять секунд. Я сам не пробовал и хз правда это или нет. Но вопрос в принципе как это возможно. Одна инициализация железа секунд 15 минимум займет и это еще очень быстро. Может, они держат серверы с предустановленной ОС в режиме сна и как только заказ поступает нужный сервер будится? Тогда возможно)
Головоломка блин)
Gerc@
coreboot сообщает что за 3 секунды успевает
Gerc@
Но это рекорд.
Mr rang_a
J
Ну ладн, минута реально.
Aleksey
@nsuvorov помнится ты говорил что вы как-то в коде хорайзона спрятали создание инстансов с эфемерными дисками, случаем не направишь где это делается?
J
Ну ладн, минута реально.
Продолжу) Ребята, а как думаете, реально ли сервер из выключенного состояния с чистым диском до загруженной готовой системы подготовить за минуту?)
Nikolai
В общем случае скорее нет чем да: толстая серверная платформа до Биоса ходить может больше минуты. Пока рейд, пока карточки сетевые, пока память вся...
Pavel
это вы еще hp не видели. где загрузка до grub может до 15 минут доходить
Nikolai
15 минут ни разу не видел - это правда
минут 5 (не засекал) видел и тоже на HP
Арчихан
это вы еще hp не видели. где загрузка до grub может до 15 минут доходить
У меня почти 12 хп себя чекает до того, как обратится к загрузчику, но а сама загрузка конечно секунды.
Dmitry
это вы еще hp не видели. где загрузка до grub может до 15 минут доходить
Он паур тулы подгружает свои :) это все можно отрубить
Dmitry
Но бесит, да
J
Ну так то если все проверки чо можно отключить и брать nvme диски или быстрый http/iscsi, то может в пару минут можно уложиться.
Но если вернуться к packet.net я хз. То ли там кастомные биосы или вообще серверы то ли они держат в теплом резерве готовые, как я и писал. Очень уж это быстро.
Maxim
Ну так то если все проверки чо можно отключить и брать nvme диски или быстрый http/iscsi, то может в пару минут можно уложиться.
Но если вернуться к packet.net я хз. То ли там кастомные биосы или вообще серверы то ли они держат в теплом резерве готовые, как я и писал. Очень уж это быстро.
Скорее всего они делают как чуваки из чипкора
Maxim
Тачка включена и ждёт команды на деплой оси
Maxim
В режиме ожидания она висит на кастомной оси типа пхе
J
Тачка включена и ждёт команды на деплой оси
Не, после деплоя нужна перезагрузка все равно. Экономия времени минимальная.
J
Я б держал с уже задеплоенной системой и только cloud-init дергал какой-нибудь что ли.
J
Чтобы нужные метаданные подтянуть.
Maxim
Если я верно помню, то в том пхе есть команда бут фром нью бут драйв и все
Maxim
Ну у чипов так по крайней мере
Maxim
У них деплой оси тоже пара минут
Maxim
Но не бивиса не груба ты не увидишь сам
Maxim
А, вот чо)
Быстро перезагрузить можно через kexec
Там какая то ось, стоит на первом бут приорити
И на ней уже прикручены кнопки из лк
Но опять же, это наши рукоделы
За бугром думаю что то получше придумали но схема думаю примерно та же
Maxim
Тем более если гонятся за стартом
Maxim
Мне интересно если отправить машину в ребут, она тоже минуту апаться будет?
J
Там какая то ось, стоит на первом бут приорити
И на ней уже прикручены кнопки из лк
Но опять же, это наши рукоделы
За бугром думаю что то получше придумали но схема думаю примерно та же
Ну я б делал как:
1. На сервере в оперативную память загружен образ типа ironic-python-agent
2. Сервер в standby
3. Поступил заказ - сервер будится
4. Раскатывается образ новой системы
5. Происходит перезагрузка в новое ядро и initramfs через kexec
Первые три пропустить можно.
J
Мне интересно если отправить машину в ребут, она тоже минуту апаться будет?
Вот это больше всего вопросов вызывает)
Maxim
Я даж готов сервер взять на пару часов что бы проверить ребут хД
J
Может у них 60 секнд для ARM платформ) Там бы еще понял.
Maxim
Может у них 60 секнд для ARM платформ) Там бы еще понял.
Ну у меня кстати на scale way где то 60-90 сек на деплой барика арм выходит
Maxim
Он же Легкий , бистрий и вообще
Maxim
Пойду спать, доброй ночи:)
J
На него надо залить.
ну логично) А если держишь серверы с уже залитой системой? Или с образами которые локально лежат и потом просто раскатывается нужный?)
Mr rang_a
ну логично) А если держишь серверы с уже залитой системой? Или с образами которые локально лежат и потом просто раскатывается нужный?)
Чот сложно. Но с другой стороны если сервера плюс минус одинаковые, то по 10g образ нальёт быстро, но вот потом ребут жи
J
Чот сложно. Но с другой стороны если сервера плюс минус одинаковые, то по 10g образ нальёт быстро, но вот потом ребут жи
Ну я те и говорю что как налить быстро образ это меньшая проблема) Вот только перезагрузку через kexec и вижу из быстрого.
Dmitry
Ну я б делал как:
1. На сервере в оперативную память загружен образ типа ironic-python-agent
2. Сервер в standby
3. Поступил заказ - сервер будится
4. Раскатывается образ новой системы
5. Происходит перезагрузка в новое ядро и initramfs через kexec
Первые три пропустить можно.
Мы как раз такое обсуждали в Денвере с ребятами из Scientific SIG. В принципе, это ещё Rackspace делал для их OnMetal. Поддержка деплоя без ребута появилась в ironic stein, но kexec из коробки нет. Один чувак вроде хотел ramdisk deploy для этого подключить.
J
Мы как раз такое обсуждали в Денвере с ребятами из Scientific SIG. В принципе, это ещё Rackspace делал для их OnMetal. Поддержка деплоя без ребута появилась в ironic stein, но kexec из коробки нет. Один чувак вроде хотел ramdisk deploy для этого подключить.
А можешь сходу скинуть пару ссылок где почитать про поддержку деплоя без перезагрузки в Ironic?
Это в каких ваще интерфейсах и драйверах?)
Dmitry
Так, я неточно выразился: в финальной перезагрузкой надо ещё что-то делать. Что мы сделали, так это возможность держать ноды включёнными, например, после discovery или cleaning. Включается вот этой опцией https://docs.openstack.org/ironic/latest/configuration/config.html#deploy.fast_track (нормальные доки надо написать ещё).
Dmitry
Дальше есть вот такой зверь https://docs.openstack.org/ironic/latest/admin/interfaces/deploy.html#ramdisk-deploy. В теории, можно попробовать использовать его вместе с fast_track и как-нибудь сделать kexec в конечный instance.
Dmitry
Люди хотели всё это попробовать, но пока никто не отписался об успехе.
J
Дальше есть вот такой зверь https://docs.openstack.org/ironic/latest/admin/interfaces/deploy.html#ramdisk-deploy. В теории, можно попробовать использовать его вместе с fast_track и как-нибудь сделать kexec в конечный instance.
Ну у ramdisk деплоя существенный недостаток в том что он рамдиск)
А так да, я на него смотрю уже какое-то время, но пока не решился начать возиться.
Dmitry
Ну да. В принципе, надо поддержку kexec бы запилить, но ни у кого сейчас нет свободных рук :(
Dmitry
Но есть будешь пробовать - пиши. Есть немало людей, которым всё это интересно, можем разобраться.
Dmitry
И есть есть желание покодить - могу поменторить ;)
J
И есть есть желание покодить - могу поменторить ;)
Я чот не приучусь никак к irc, иначе бы на каналах сидел как минимум) Но спасибо за предложение, может созрею.
Dmitry
Короче, с fast_track можно держать ноды с включённым ironic-python-agent. Тогда останется только финальный ребут.
Dmitry
Я, кстати, спрашивал у людей в Денвере есть ли такая штука как "тёплый ребут", чтобы можно было скипнуть POST, если мы ребутались в прошлый раз 5 минут назад. Все пожимали плечами.
J
Я, кстати, спрашивал у людей в Денвере есть ли такая штука как "тёплый ребут", чтобы можно было скипнуть POST, если мы ребутались в прошлый раз 5 минут назад. Все пожимали плечами.
Принципиальных то препятствий для этого нет. kexec по сути это и делает.
Dmitry
Угу. Я бы хотел поддержку на уровне железа. Типа выгрузить операционку и заново войти в bootloader.
J
Угу. Я бы хотел поддержку на уровне железа. Типа выгрузить операционку и заново войти в bootloader.
А вот этого нету, кажись.
Хотя, казалось бы, такие навороченные UEFI прошивки щас, только что кофе не варят. Да и с обычными биосами можно реализовать. Но нет.
NS 🇷🇺
@nsuvorov помнится ты говорил что вы как-то в коде хорайзона спрятали создание инстансов с эфемерными дисками, случаем не направишь где это делается?
с митаки и выше https://docs.openstack.org/horizon/ocata/topics/settings.html#launch-instance-defaults
Aleksey
с митаки и выше https://docs.openstack.org/horizon/ocata/topics/settings.html#launch-instance-defaults
так это про сорсы, а я хочу чтобы не было возможность поставить «не создавать диск»
NS 🇷🇺
так это про сорсы, а я хочу чтобы не было возможность поставить «не создавать диск»
The disable_image setting disables Images as a valid boot source for launching instances. Image sources won’t show up in the Launch Instance modal.
Aleksey
The disable_image setting disables Images as a valid boot source for launching instances. Image sources won’t show up in the Launch Instance modal.
ну и что, так а как мне создавать ВМ без образов?
Aleksey
я хочу иметь все сорсы, но не хочу давать возможность создать ВМ с эфемерным диском
J
ну и что, так а как мне создавать ВМ без образов?
Так вм создаются из дисков технически, когда используешь циндер)
J
А Вот сами диски из образов.
Aleksey
А Вот сами диски из образов.
ну так вот мне же надо выбрать какой образ нужен, если не выбиру то и диск из образа не создастся
NS 🇷🇺
ну так вот мне же надо выбрать какой образ нужен, если не выбиру то и диск из образа не создастся
там должен остаться пункт создания диска из образа