Boriss
и прошло... тем не менее всёравно висит
Vladyslav
@boriszeblade все верно
Vladyslav
@boriszeblade у меня проблем с mariadb не было, но как траблшутить ее теоретически понятно
Boriss
а ты с их gate k8s-кластером ставил или свой выкатывал?
Vladyslav
поверх kubespray
Boriss
хм :/
Vladyslav
Формула рабочая. Восточные братья из SK telecom именно так и юзают.
Vladyslav
@boriszeblade а ты подтирал ручками PV после рестарта чарта, если они остались?
Boriss
япп
Vladyslav
Надо это проверять обязательно
Boriss
восточные...это Тако Плэй?
Boriss
думаю вот сейчас всё снести и попробовать скт )
Boriss
и я ... токо они корейцы )
Vladyslav
Виноват)
Vladyslav
Так и есть)
Boriss
ладно попробую подругому..
Vladyslav
@boriszeblade я бы посоветовал немного еще потраблшутить, если серьезно потом с этим собираешься работать, для понимания так сказать.
Vladyslav
Магии там никакой нет.
Vladyslav
знал бы как airship выкатывать, катал бы его ) но думал стоит начать с этой шаболды
Уже какую неделю воюю, а воз и ныне там, не так все просто с ним.
Vladyslav
Ну либо я чего-то не понимаю.
Jain
@boriszeblade яб посоветовал поставить стэк сперва бы из пакетов или сорцов в вручную. Потом заниматься всеми этими авто деплоями. Так хоть понятно будет что да как работет.
Vladyslav
@boriszeblade яб посоветовал поставить стэк сперва бы из пакетов или сорцов в вручную. Потом заниматься всеми этими авто деплоями. Так хоть понятно будет что да как работет.
Я думал это само собой разумеется. Врядли кто-то будет подходить к openstack-helm без понимания стека, правда? @boriszeblade
Pavel
а что тут есть люди которые знаю как работает опенстек? :)
Vladyslav
Хороший вопрос)
Михаил
Aleksandr
NS 🇷🇺
а что тут есть люди которые знаю как работает опенстек? :)
конечно, все знают что он работает с Божьей помощью
NS 🇷🇺
даже самый ярый атеист это знает =)
✠ FLASh ✠
я в который раз в этом убеждаюсь
Я и твой кот
OSH не только в SK Telekom работает
Aleksey
вот скажите мне, есть же тут кто БД в постгре держит? вы из бэкапов восстанавливались ?
Я и твой кот
Проект LOCI в OSH сейчас должны забрать.
Aleksey
что, бэкапы для слабых?
NS 🇷🇺
а не для просвященых, LOCI что такое?
Я и твой кот
вот скажите мне, есть же тут кто БД в постгре держит? вы из бэкапов восстанавливались ?
В OSH Infra есть чарт с поддержкой рестора.
Я и твой кот
Но вы не об этом, наврное.
Dmitry
а зачем нужен пгскуль под опенстэк? -)
Aleksey
Но вы не об этом, наврное.
вообще не про это, я сейчас wal-g на stolon натягиваю и после восстановления ошибки в логи летят про dublicated key
Aleksey
а зачем нужен пгскуль под опенстэк? -)
за тем же, зачем и MySQL, вот только мы в свое время выбрали именно его.
А выбрали так как не нашли нормального проекта по HA кластеру в k8s
Dmitry
Aleksey
рисковые ребята =)
ну мы же openstack не переписывам, так что нам по рискованности ещё далеко
Я и твой кот
кто-то говорил, что сырой
в продакшне года три или около того. два с половиной уж точно.
NS 🇷🇺
за тем же, зачем и MySQL, вот только мы в свое время выбрали именно его.
А выбрали так как не нашли нормального проекта по HA кластеру в k8s
галеру уже все копу не лень завернули в кубер
Dmitry
ну мы же openstack не переписывам, так что нам по рискованности ещё далеко
я про концепцию вытащить БД системы, в которой, по сути, только БД из себя ценность и представляет в нестандартный движок, в дополнительный слой абстракции из-за того, что нужен HA для нестандартного движка для дополнительного слоя абстракции 🙂
Dmitry
и по ходу эксплуатации задавать вопросы про восстановление из бэкапов 😉
NS 🇷🇺
Aleksey
и по ходу эксплуатации задавать вопросы про восстановление из бэкапов 😉
ну блеать, тут вопрос не в k8s, а в востановлении БД OpenStack в postgres. Так что если не можете не поддерживайте, а мы попробуем
Aleksey
галеру уже все копу не лень завернули в кубер
ну а ты эти решения тестировал на отказоустойчивость ? мы да
NS 🇷🇺
ну а ты эти решения тестировал на отказоустойчивость ? мы да
ты знаешь что я противник стека в кубере =)
Aleksey
ладно, давайте зайду по другому
У кого есть под рукой OpenStack на PostgreSQL ?
Я и твой кот
ни разу не слышал ни у кого.
Я и твой кот
я бы предложил сходить в чатик по пострге и там спросить об ошибке.
Aleksey
я бы предложил сходить в чатик по пострге и там спросить об ошибке.
я почти уверен что это специфика OpenStack, так как сервисы никаких ошибок не выдают, а ошибки я вижу только в постгре и вот у меня есть ощущение что они уникальность через эксепшены проверяют, типа заинсертилась, значит уникально, а если нет, то значит следующее значение
Я и твой кот
я почти уверен что это специфика OpenStack, так как сервисы никаких ошибок не выдают, а ошибки я вижу только в постгре и вот у меня есть ощущение что они уникальность через эксепшены проверяют, типа заинсертилась, значит уникально, а если нет, то значит следующее значение
прикольно. я бы не додумался до такой странности. а нельзя было уникальными ключами в таблицах пользоваться, как все нормальные люди? риторический вопрос.
Pavel
а они ими и пользуются
Tamerlan
я почти уверен что это специфика OpenStack, так как сервисы никаких ошибок не выдают, а ошибки я вижу только в постгре и вот у меня есть ощущение что они уникальность через эксепшены проверяют, типа заинсертилась, значит уникально, а если нет, то значит следующее значение
вообще может проще на новую базу развернуть и дельту руками перенести?
Jain
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager Traceback (most recent call last):
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager File "/var/lib/kolla/venv/lib/python2.7/site-packages/nova/compute/manager.py", line 8673, in _update_available_resource_for_node
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager startup=startup)
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager File "/var/lib/kolla/venv/lib/python2.7/site-packages/nova/compute/resource_tracker.py", line 871, in update_available_resource
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager resources = self.driver.get_available_resource(nodename)
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager File "/var/lib/kolla/venv/lib/python2.7/site-packages/nova/virt/libvirt/driver.py", line 7881, in get_available_resource
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager disk_info_dict = self._get_local_gb_info()
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager File "/var/lib/kolla/venv/lib/python2.7/site-packages/nova/virt/libvirt/driver.py", line 6342, in _get_local_gb_info
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager info = rbd_utils.RBDDriver().get_pool_info()
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager File "/var/lib/kolla/venv/lib/python2.7/site-packages/nova/virt/libvirt/storage/rbd_utils.py", line 382, in get_pool_info
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager out, _ = processutils.execute(*args)
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager File "/var/lib/kolla/venv/lib/python2.7/site-packages/oslo_concurrency/processutils.py", line 424, in execute
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager cmd=sanitized_cmd)
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager ProcessExecutionError: Unexpected error while running command.
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager Command: ceph df --format=json --id nova --conf /etc/ceph/ceph.conf
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager Exit code: 1
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager Stdout: u''
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager Stderr: u'[errno 1] error connecting to the cluster\n'
2020-05-13 15:13:11.666 6 ERROR nova.compute.manager
2020-05-13 15:14:11.475 6 ERROR nova.compute.manager [req-f62df03c-ca79-4e67-b262-cbef75deeea5 - - - - -] No compute node record for host root8: ComputeHostNotFound_Remote: Compute host root8 could not be found.
2020-05-13 15:14:11.699 6 ERROR nova.compute.manager [req-f62df03c-ca79-4e67-b262-cbef75deeea5 - - - - -] Error updating resources for node root8.: ProcessExecutionError: Unexpected error while running command.
Command: ceph df --format=json --id nova --conf /etc/ceph/ceph.conf
Exit code: 13 это как я понимаю нова к сефу подключиться неможет?
Jain
на ключики права есть ... но как я понял мне не те ключики дали ...
Konstantin
А вот это про что?
Compute host root8 could not be found.
кто такой root8?
Konstantin
на ключики права есть ... но как я понял мне не те ключики дали ...
ну самый простой способ проверить ключики - сказать ceph -s от непривелигерованного пользователя, чеуштам
Jain
тож под вопросп что тамс compute host not found. он там неодин хост ненаходит. ... думаю что в сеф сходить неможет. хз ...
Nick
ребята, есть какие-нибудь решения по организации l2 мониторинга на уровне вланов?
сетевики что-то мутят, а гипервизоры в рандомные моменты времени теряют связь с контроллерами, при этом ошибок на интерфейсах по нулям.
Не понятно куда вообще копать
J
Andrey
Nick
рэббит отваливался, потому что сетевая связность с контроллером пропала, это да
Nick
мне нужно вообще понимать что у меня в сети происходит, потому что разок бывало что и левый траффик на ноду приходил и сетевики не могли сами понять откуда