Илья | 😶☮️🐸
вообще цеф не нужен, ящитаю
Илья | 😶☮️🐸
максимум для кубернетесов
Grundik
максимум для кубернетесов
сетевые диски? диски большого объема? их бекап?
Илья | 😶☮️🐸
Илья | 😶☮️🐸
у вас плейсмент занимается тем, что выбирает куда инстанс закинуть где диска побольше, вот и решение
Grundik
что диски большого объема?
ну например диски больше 2/3/4/5/6 Тер?
Илья | 😶☮️🐸
ну например диски больше 2/3/4/5/6 Тер?
с этими есть какие-то сложности?
Илья | 😶☮️🐸
а с этим?)
тут явно написано, что это сетевой диск
Илья | 😶☮️🐸
Но да, собрать рейд из тех же 18тб дисков- изи
Grundik
ну врятли ты будешь делать сервера с таким объемом локальных дисков
Илья | 😶☮️🐸
Если клиент готов платить- изи
Илья | 😶☮️🐸
С любым объемом
Grundik
если клиент готов платить можно и на 5 серверах опенстек поднять с с цефом)
Илья | 😶☮️🐸
ага, на 15к сасах
Grundik
ага, на 15к сасах
главное пусть платит)
icewolf
ага, на 15к сасах
ну слуш, если там минимальные нагрузки почему бы и да?
NS 🇷🇺
если клиент готов платить можно и на 5 серверах опенстек поднять с с цефом)
обычно там где есть такие инсталяции никто не платит, все хотят вмварю и за бесплатно :D
icewolf
с котом на аватарке
NS 🇷🇺
)) это вон к товарищу тому.
бесплатно делает что ли? =)
Илья | 😶☮️🐸
а потом говорят что опенстак никто в ру не держит, я начинаю догадываться что это потому что тут с ходу накидают в шапку, что уходят в слезах прокс ставить
icewolf
бесплатно делает что ли? =)
у меня так то жена, я не проверял.
NS 🇷🇺
проще проксмокс поднять в кластере тогда))
ну проксмокс не про облака =) под варей я тут понимаю клауд директор
NS 🇷🇺
заметь я редко накидываю, и стараюсь ну хоть как то помосщ
да ладно =) накидываешь ты от души и постоянно. Но это не отменяет стремления помочь, да
icewolf
тут из норм людей по 10 рукам посчитать можно.
icewolf
чет как то питерской тематикой запахло
Mr
т.е, там где роль control+compute, не ставить ceph? правильно понял?
Просто не надо этого делать. Вообще не надо
Mr
Да и полежать тоже в привычку войдет
Постоять. Как в игре про охотника в парке
Mr
ну врятли ты будешь делать сервера с таким объемом локальных дисков
Ну у меня локальных дисков было как то типа 400 Тб
Илья | 😶☮️🐸
Постоять. Как в игре про охотника в парке
Это который с плащом на голое тело?
Mr
в сумме? или один?
Ну физики было типа 40 по 10
icewolf
Это который с плащом на голое тело?
это их местные тайские жаргонизмы))) видимо)
Mr
в сумме? или один?
Два по 256 при 64 к блоке собрали и ок. Под бекап вообще отлично https://learn.microsoft.com/en-us/windows-server/storage/file-server/ntfs-overview
Mr
Если клиент готов платить- изи
Клиент явно не готов платить. На оперативке скроили, зато механику диски поставили
Mr
А как же ReFs?
Не под бекапы. Он хороший, но под другое.
icewolf
Не под бекапы. Он хороший, но под другое.
под 💩💩💩 хорош, как и все продукты M$
icewolf
в принципе M$ и 💩 это синонимы
Mr
почему ceph? потому что посчитали что так дешевле чем отдельная хранилка
С вас расчет по иопсам для ceph, модель 15к дисков , модель контроллера и расчет цены терабайта хранения на ceph и для сравнения msa 2050
Mr
А с задачей определились что хотите строить?
Да видно же. Какие то орлы начитались говна типа хабра, с такими же комментаторами, посчитали как смогли 'дешего!! Налетай' - и будут дальше строить аналоговнет
icewolf
HPE StoreVirtual 4530)
Raul
Это как считали ? Покажите расчет iops в ceph
iops не считали, говорю же, маркетологи рассказали руководству что можно продавать готовую платформу виртуализации, типа как цоды в контейнерах продают, вот это уменьшенный вариант, для небольших предприятий или хз для чего, пришили ко мне, сказали собери серваки пока из того что есть, попробуй без хранилки на ceph сделать, ОЗУ если надо дополнят, диски потом побыстрее купят, не в этом дело, необходимо проверить сможет ли такая конфигурация с совмещением ролей работать и насколько она будет плохой/хорошей, отельные сервера покупать для контролов это удорожание, надо максимально просто сделать чтобы 5, 6,7 серверов + свичи + ИБП и все )) если посмотрят что ceph непригоден, будут думать о дешевой хранилке, я не могу сказать что не надо так делать, задача стоит наглядно проверить, пощупать, а потом уже решать, мне надо работу работать )) решения принимают другие люди
J
iops не считали, говорю же, маркетологи рассказали руководству что можно продавать готовую платформу виртуализации, типа как цоды в контейнерах продают, вот это уменьшенный вариант, для небольших предприятий или хз для чего, пришили ко мне, сказали собери серваки пока из того что есть, попробуй без хранилки на ceph сделать, ОЗУ если надо дополнят, диски потом побыстрее купят, не в этом дело, необходимо проверить сможет ли такая конфигурация с совмещением ролей работать и насколько она будет плохой/хорошей, отельные сервера покупать для контролов это удорожание, надо максимально просто сделать чтобы 5, 6,7 серверов + свичи + ИБП и все )) если посмотрят что ceph непригоден, будут думать о дешевой хранилке, я не могу сказать что не надо так делать, задача стоит наглядно проверить, пощупать, а потом уже решать, мне надо работу работать )) решения принимают другие люди
Ахахахахахах)
J
Всё ясно)
J
iops не считали, говорю же, маркетологи рассказали руководству что можно продавать готовую платформу виртуализации, типа как цоды в контейнерах продают, вот это уменьшенный вариант, для небольших предприятий или хз для чего, пришили ко мне, сказали собери серваки пока из того что есть, попробуй без хранилки на ceph сделать, ОЗУ если надо дополнят, диски потом побыстрее купят, не в этом дело, необходимо проверить сможет ли такая конфигурация с совмещением ролей работать и насколько она будет плохой/хорошей, отельные сервера покупать для контролов это удорожание, надо максимально просто сделать чтобы 5, 6,7 серверов + свичи + ИБП и все )) если посмотрят что ceph непригоден, будут думать о дешевой хранилке, я не могу сказать что не надо так делать, задача стоит наглядно проверить, пощупать, а потом уже решать, мне надо работу работать )) решения принимают другие люди
Будет вонючее собачье говно. Реально не завидую тебе потому что мало контор где инженер может тех руководству или маркетологам сказать что они мудаки и долбоёбы. Но в твоём случае вот как раз надо бы сказать. Пускай проведут чтоль исследование на тему того как другие такие же мудаки придумали "продукты" на базе опенстека и цефа.
J
iops не считали, говорю же, маркетологи рассказали руководству что можно продавать готовую платформу виртуализации, типа как цоды в контейнерах продают, вот это уменьшенный вариант, для небольших предприятий или хз для чего, пришили ко мне, сказали собери серваки пока из того что есть, попробуй без хранилки на ceph сделать, ОЗУ если надо дополнят, диски потом побыстрее купят, не в этом дело, необходимо проверить сможет ли такая конфигурация с совмещением ролей работать и насколько она будет плохой/хорошей, отельные сервера покупать для контролов это удорожание, надо максимально просто сделать чтобы 5, 6,7 серверов + свичи + ИБП и все )) если посмотрят что ceph непригоден, будут думать о дешевой хранилке, я не могу сказать что не надо так делать, задача стоит наглядно проверить, пощупать, а потом уже решать, мне надо работу работать )) решения принимают другие люди
5-6-7 серверов эт вон есть конторы которые у Proxmox слегка перепиливают веб интерфейс и продают.
Mr
iops не считали, говорю же, маркетологи рассказали руководству что можно продавать готовую платформу виртуализации, типа как цоды в контейнерах продают, вот это уменьшенный вариант, для небольших предприятий или хз для чего, пришили ко мне, сказали собери серваки пока из того что есть, попробуй без хранилки на ceph сделать, ОЗУ если надо дополнят, диски потом побыстрее купят, не в этом дело, необходимо проверить сможет ли такая конфигурация с совмещением ролей работать и насколько она будет плохой/хорошей, отельные сервера покупать для контролов это удорожание, надо максимально просто сделать чтобы 5, 6,7 серверов + свичи + ИБП и все )) если посмотрят что ceph непригоден, будут думать о дешевой хранилке, я не могу сказать что не надо так делать, задача стоит наглядно проверить, пощупать, а потом уже решать, мне надо работу работать )) решения принимают другие люди
А, ну я угадал. Маркетинговое говно. Ну собери, потом покажи diskspd или SQL hammer с 4 нод, как там будет САСАТ САСАТ
J
iops не считали, говорю же, маркетологи рассказали руководству что можно продавать готовую платформу виртуализации, типа как цоды в контейнерах продают, вот это уменьшенный вариант, для небольших предприятий или хз для чего, пришили ко мне, сказали собери серваки пока из того что есть, попробуй без хранилки на ceph сделать, ОЗУ если надо дополнят, диски потом побыстрее купят, не в этом дело, необходимо проверить сможет ли такая конфигурация с совмещением ролей работать и насколько она будет плохой/хорошей, отельные сервера покупать для контролов это удорожание, надо максимально просто сделать чтобы 5, 6,7 серверов + свичи + ИБП и все )) если посмотрят что ceph непригоден, будут думать о дешевой хранилке, я не могу сказать что не надо так делать, задача стоит наглядно проверить, пощупать, а потом уже решать, мне надо работу работать )) решения принимают другие люди
Кароч, план такой. Забей на всё что говорят про "не взлетит", "так нельзя" и всё прочее. Делай что просят, поразбирайся с опенстеком и беги скорее от таких маркетологов куда-нибудь опенстеком заниматься)
Raul
А, ну я угадал. Маркетинговое говно. Ну собери, потом покажи diskspd или SQL hammer с 4 нод, как там будет САСАТ САСАТ
Вот в этой сборке и прошу помощи, в global.yaml колы есть некоторые непонятные ключи, как их выставить неясно
Raul
Может есть какой-то рабочий док по которому можно собрать колу с совмещением ролей
icewolf
Может есть какой-то рабочий док по которому можно собрать колу с совмещением ролей
вы в очередной раз пытаетесь согнуть ложку, ложки не существует.
Stanley
с этими есть какие-то сложности?
Это большие диски. Это проблема.
icewolf
попытка решить задачу в лоб, без подробной декомпозиции не даст вам результата Рауль
Denis
Не под бекапы. Он хороший, но под другое.
Да вроде как раз под бекапы использовали, там и размеры файла бОльшие, чем к NTFS(16тб)... Но тут кому как.
Raul
Так пиши, вот ключ, вот документация которую смотрел
вот конфиг multinode [control] # These hostname must be resolvable from your deployment host control01 control02 control03 # The above can also be specified as follows: #control[01:03] ansible_user=kolla # The network nodes are where your l3-agent and loadbalancers will run # This can be the same as a host in the control group [network] control01 control02 control03 [compute] control01 control02 control03 compute01 compute02 [monitoring] control01 control02 control03 # When compute nodes and control nodes use different interfaces, # you need to comment out "api_interface" and other interfaces from the globals.yml # and specify like below: #compute01 neutron_external_interface=eth0 api_interface=em1 tunnel_interface=em1 [storage] control01 control02 control03 compute01 compute02 [deployment] localhost ansible_connection=local
Raul
под описанную конфигурацию подходит, или в [network] надо добалять compute01 compute02 ?
Raul
вот ключи из global.yml #=================================================================== keepalived_virtual_router_id: "222" workaround_ansible_issue_8743: yes kolla_internal_vip_address: "192.168.1.111" neutron_external_interface: "enp0s3" что на этом интерфейсе работает? network_interface: "enp0s8" docker_registry_insecure: "yes" enable_haproxy: "no" этот ключ в yes или no? enable_keepalived: "no" этот ключ в yes или no? enable_mariadb_clustercheck: "yes" этот ключ в yes или no? nova_compute_registration_fatal: true эти ключи надо устанавливать или нет kolla_internal_fqdn: "front.openstack.testcloud" kolla_external_vip_address: "192.168.1.150" для чего этот адрес? kolla_external_fqdn: "front.openstack.testcloud" haproxy_single_external_frontend: true надо выставлять этот ключ? nova_external_fqdn: "nova.{{ freeipa_domain }}" надо выставлять этот ключ? neutron_external_fqdn: "neutron.{{ freeipa_domain }}" надо выставлять этот ключ? horizon_external_fqdn: "horizon.{{ freeipa_domain }}" надо выставлять этот ключ? opensearch_external_fqdn: "opensearch.{{ freeipa_domain }}" надо выставлять этот ключ? grafana_external_fqdn: "grafana.{{ freeipa_domain }}" надо выставлять этот ключ? haproxy_host_ipv4_tcp_retries2: 6
Raul
под описанную конфигурацию они подходят?
Mr
вот ключи из global.yml #=================================================================== keepalived_virtual_router_id: "222" workaround_ansible_issue_8743: yes kolla_internal_vip_address: "192.168.1.111" neutron_external_interface: "enp0s3" что на этом интерфейсе работает? network_interface: "enp0s8" docker_registry_insecure: "yes" enable_haproxy: "no" этот ключ в yes или no? enable_keepalived: "no" этот ключ в yes или no? enable_mariadb_clustercheck: "yes" этот ключ в yes или no? nova_compute_registration_fatal: true эти ключи надо устанавливать или нет kolla_internal_fqdn: "front.openstack.testcloud" kolla_external_vip_address: "192.168.1.150" для чего этот адрес? kolla_external_fqdn: "front.openstack.testcloud" haproxy_single_external_frontend: true надо выставлять этот ключ? nova_external_fqdn: "nova.{{ freeipa_domain }}" надо выставлять этот ключ? neutron_external_fqdn: "neutron.{{ freeipa_domain }}" надо выставлять этот ключ? horizon_external_fqdn: "horizon.{{ freeipa_domain }}" надо выставлять этот ключ? opensearch_external_fqdn: "opensearch.{{ freeipa_domain }}" надо выставлять этот ключ? grafana_external_fqdn: "grafana.{{ freeipa_domain }}" надо выставлять этот ключ? haproxy_host_ipv4_tcp_retries2: 6
Ещё можно открыть для себя Pastebin.com
Mr
под описанную конфигурацию они подходят?
Теперь вторая часть вопроса. Душная. 'вот документация которую посмотрел'
Raul
https://blog.rhysgoodwin.com/it/openstack-ceph-hyperconverged/ https://kb.brightcomputing.com/knowledge-base/how-to-install-openstack-kolla-ansible-on-top-of-a-bright-cluster/ https://www.roksblog.de/deploying-openstack-with-kolla-ansible/ https://docs.huihoo.com/openstack/docs.openstack.org/ha-guide/HAGuide.pdf https://github.com/alfredcs/3-node-HA-OpenStack-Cluster-Installation/tree/master/compute-install3.latest https://programmersought.com/article/11406188666/ https://kdinesh.in/openstackhacluster/ https://docs.openstack.org/kolla-ansible/latest/reference/high-availability/haproxy-guide.html https://docs.openstack.org/install-guide/InstallGuide.pdf https://docs.openstack.org/project-deploy-guide/charm-deployment-guide/rocky/config-openstack.html