Всмысле, оно поддерживает, но надо настроить

10г сеть лучше сделай на интерконнект цефа

10г сеть лучше сделай на интерконнект цефа

На гигабите даже не пытаться?

На гигабите даже не пытаться?

Лабу можно. Интерконнект к проду тоже можно попробовать, но вдумчиво, понимая тип нагрузки. А вот интерконнект между нодами цефа нужен 10г. Иначе ребаланс будет долгим и печальным

Лучше просто взять и посчитать, сколько будет ребаланс и сколько будет потолок между цефом и клиентом

Если устраивает - велкам

Коллеги, я понимаю, что это чятег про openstack, но всё же отважусь задать вопрос. Можно ли в openstack создать attacheable volume без cinder? Volume же создаётся под каждую виртуалку без cinder, значит должна быть возможность создавать его без отдельного хранилища. Пока у меня только вот такой результат: $ cinder list +--------------------------------------+--------+-------------+------+-------------+----------+-------------+ | ID | Status | Name | Size | Volume Type | Bootable | Attached to | +--------------------------------------+--------+-------------+------+-------------+----------+-------------+ | ae59dee1-e889-48bb-963d-1dfd904784ad | error | test | 10 | - | false | | +--------------------------------------+--------+-------------+------+-------------+----------+-------------+

Итак, контролер упал, зато все компьют ноды остались рабочими. Но, все инстансы потеряли сеть. Сеть с инстансами вернулась когда контролер вернули. Что это может быть? Почему такая надобность в контролере для работы сети?

А на чем сеть? Linux bridge?

Да

Пока седим на Митаке

если сеть легаси, то это нормально поведение, если DVR то надо разбираться

Что такое сеть легаси?

А шлюзом что является? Не сам контроллер?

Когда все подымали, то подымали по официальным докам митаки + self service

Что такое сеть легаси?

тупые сеточки, когда весь трафик течет наружный через нетворк ноду

А шлюзом что является? Не сам контроллер?

Сейчас с сетевой командой проверю

Походу да, он на контролере

Подскажите тогда как все настроить тогда

Буду благодарен

Вроде нашел: https://wiki.openstack.org/wiki/Neutron/DVR

Оно?

http://docs.openstack.org/liberty/networking-guide/scenario-dvr-ovs.html

хоть ссылка и на либерти, но на митаке тоже проверялось

В общем если контроллер шлюз и различные подсети для виртуалок, соответственно при отключении контроллера они не будут друг друга видеть. Если в одной подсети, то пофигу

Как вариант несколько контроллеров и HA роутеры

По volume у кого-нибудь есть соображения?

По volume у кого-нибудь есть соображения?

не понимаю вопроса- по сути ты на cinder можешь скормить локальную lvm vg и она по iscsi будет подключаться на compute ноды(хранилка не отдельная- все в рамказ ноды, где стоит cinder-volume)

у меня нет cinder host'а

у меня кактус под названием rackspace private cloud

Это нормально в нашем не нормальном мире

что есть cinder host? у тбея есть где запутсить cinder-volume и где будет lvm vg, которую можно пользовать как хочется?

* но естественно, если этот хост с cinder-volume упадет- то все виртуалки лягут по отвалу диска

@saamich ты предлагаешь запустить cinder-volume в кластере openstack и зарегистрировать его в openstack?

кстати на хабре статья про сеть https://habrahabr.ru/post/321442/

@saamich ты предлагаешь запустить cinder-volume в кластере openstack и зарегистрировать его в openstack?

ну теоритически это можно сделать- если скорость работы не критична, но я предлагал запутсить вышеозвуечнные сервисы на любой ноде, где есть такая возможность

@saamich доступа к compute node нет. могу лишь только сервисы зарегистрировать через keystone service-create. сейчас вот запустил виртуалку со 100Gb root partition. И сразу же наткнулся на проблему. Ubuntu cloud image по умолчанию ресайзит partition до максимального размера. Сейчас пытаюсь понять как ужать текущий раздел.

* загрузиться в rescue cd? не понял как... вроде как можно только создать instance, который будет грузиться с ISO, но не перезагрузить текущий instance в ISO * запретить cloudinit ресайзить диск? тоже пока не понятно. * ресайзить диск наживую?

* загрузиться в rescue cd? не понял как... вроде как можно только создать instance, который будет грузиться с ISO, но не перезагрузить текущий instance в ISO * запретить cloudinit ресайзить диск? тоже пока не понятно. * ресайзить диск наживую?

это только через фмниы ушами и ручной/virsh правкой конфигов ВМ

@saamich запилил конфиг: #cloud-config growpart: mode: {{ grow_partition }} теперь при деплое виртуалка не ресайзит диск.

@saamich что-то не могу найти ман как cinder volume настраивать

и как его регистрировать в openstack service

http://docs.openstack.org/mitaka/install-guide-rdo/cinder-storage-install.html

и как его регистрировать в openstack service

он не регистрируется, как понимаю регается api сервис

openstack compute service list | grep cinder пусто

openstack compute service list | grep cinder пусто

http://docs.openstack.org/mitaka/install-guide-rdo/cinder-controller-install.html - примеры как зарегать там есть

но регается api

настраиваю сижу.

а обязательно использовать oslo_messaging_rabbit ? или его как-то отключить можно?

[DEFAULT] rpc_backend = fake

openstack service create --name cinder --description "OpenStack Block Storage" volume Could not find requested endpoint in Service Catalog.

Засада. Rackspace чтоли отключил специально

Или может я что-то не так делаю?

не скажу

не скажу

что бы это значило? знаешь, но не скажешь или не знаешь и не скажешь?

не знаю и разбираться сейчас нет ни времени - ни желания

Для особо смелых есть новость CEPH v12.0.0 Luminous (dev) released

слабоумие и отвага

вот кстати о первом: я тут ошибся немного с количеством нулей и попытался создать image размером почти в петабайт, ceph начал генерить объекты и на 20+ млн, часов через 12 ноды tier пула стали падать из-за нехватки памяти, на них было по 4гб озу, разделы диска по 500 гб

вот кстати о первом: я тут ошибся немного с количеством нулей и попытался создать image размером почти в петабайт, ceph начал генерить объекты и на 20+ млн, часов через 12 ноды tier пула стали падать из-за нехватки памяти, на них было по 4гб озу, разделы диска по 500 гб

а дисков сколько в ноде ?

сама операция создания имиджа на этом сдохла, но 20 млн объектов-то в пуле остались, я добавил памяти нодам, благо они на виртуалках и они теперь кушают по 50 гб озу

а дисков сколько в ноде ?

в тиер пуле 4 ноды с разделами по 500 гб

вот мне интересно, это у меня что-то не так пошло или сколько ж им памяти надо на большом объеме пула?

50 Гб это овердохуя

погоди. а как ты увидел что он жрёт 50Г ? (без приколов)

так 5Г на осд

и на всех четырех примерно так же

фигня какаято. пид-файл одинаковый, а пиды разные

и это не треды.

у тредов tid

да нет, хтоп вполне показывает PID у тредов.

на экране одна и таже OSD

тогда почему пиды-то разные ?

не может быть что хтоп настолько тупой

тогда почему пиды-то разные ?

в колонке PID он пишет ID треда.

щас проверю

я проверил уже.

дебилы блять