@pro_openstack
ptchol14.12.2016
10:34:06
10:34:06
это знаете как? вот LVM — там есть снапшоты. но чтобы поняимать хули они так тормозят (не thin provisioning) надо сцуко понимать как оно работает. прям до devicemapper tables
Боюсь с цефом это будет очень сложной задачей, вы встретите исходники длиной в 4к строк сишного кода, и пока вы разбираетесь, половину переделают.
Марк ☢14.12.2016
13:48:16
13:48:16
ну лвм до уровня исходников я не копал
кстати сейчас добавляю физические ноды в кластер
чтобы потестить уже более по-серьёзке
Googleptchol14.12.2016
13:55:05
13:55:05
не прошло и года )
Марк ☢14.12.2016
14:13:37
14:13:37
узнал что у нас дохера дисков с бэдами. ну вот реально говно и палки. сегодня вскрыл и загнул молотком блины у 4 дисков
один из них SAS
Старый14.12.2016
15:04:26
15:04:26
это анекдот?
Sergey14.12.2016
15:48:42
15:48:42
Диски заработали ?
Sergey14.12.2016
16:07:45
16:07:45
Эти. Зачем гнул?
узнал что у нас дохера дисков с бэдами. ну вот реально говно и палки. сегодня вскрыл и загнул молотком блины у 4 дисков
Зеркальца же прикольные
Марк ☢14.12.2016
16:08:24
16:08:24
Ну типа уменьшить вероятность что бомж-хакер достанет его из помойки и увидит там корпоративное порно
Ну и злость вывести из себя
Sergey14.12.2016
16:09:19
16:09:19
А бедов прямо так много ?
GoogleМарк ☢14.12.2016
16:09:35
16:09:35
300 ремапов. И еще куррент пендинг секторы
Смарт тест полный не прошли
Фпезду
На некоторых меньше. Не стал искушать судьбу
Лежали в тумбочке. Ну типа запасные. Убил бы
Sergey14.12.2016
16:12:16
16:12:16
Достал из заводской фальги новый винт года два лежал. А скатина головкой стучит как чечетку отбивает
Марк ☢14.12.2016
16:12:43
16:12:43
Может это он смартом самотестится?
Марк ☢14.12.2016
16:18:41
16:18:41
Да блин еще поднимал 10г. Обрадовался портам sfp+ в свиче. А сука 1 гигабит всеравно. Хотя трансиверы на 10
Пришлось два нода напрямую соединить
Ну три нода подниму. Треугольником. Там двухпортовые карты
Wild One14.12.2016
16:19:30
16:19:30
а кто-нибудь знает, почему в Ceph иногда нельзя создать OSD с журналом?
и зачем нужен ceph-osd —check-allows-journal
Марк ☢14.12.2016
16:20:13
16:20:13
Синтезоид, запеееееевай!
Старый14.12.2016
16:20:27
16:20:27
?
Марк ☢14.12.2016
16:22:04
16:22:04
Уменя прикольнее проблема. Любые команды ceph зависают
После добавления второго монитора началось
Wild One14.12.2016
16:22:31
16:22:31
У меня прикольнее. Сегодня создал баг в трекере, что ceph-osd валятся массово с cannot allocate memory
оказалось - добрый коллега все OSD засунул в cgroup с лимитом на память! )
GoogleWild One14.12.2016
16:23:13
16:23:13
После добавления второго монитора началось
mon hosts в ceph.conf прописаны? м.б. цеф идет первым на новый монитор и там обламывается?хотя в таком случае через 5 секунд пойдет уже на соседний
Марк ☢14.12.2016
16:23:44
16:23:44
mon hosts в ceph.conf прописаны? м.б. цеф идет первым на новый монитор и там обламывается?
Я еблан по ходу. Но я через цеф деплой делал. Он по идее должен прописатьЩас в машине. Проверю чуть позже
Wild One14.12.2016
16:24:18
16:24:18
mon_initial_members, mon_host еще
все, поползу спать >..<
скорее бы уже пятница
Михаил14.12.2016
16:46:44
16:46:44
Я еблан по ходу. Но я через цеф деплой делал. Он по идее должен прописать
Он берёт конфиг, который ты ему даешьМарк ☢14.12.2016
16:53:56
16:53:56
Он берёт конфиг, который ты ему даешь
Но при деплойе тоесть добавлении монитора он разве не добавляет в локальный конфиг энтот мониторр ?Через час проверю
Михаил14.12.2016
16:59:56
16:59:56
Pavel14.12.2016
17:00:24
17:00:24
Нет
Марк ☢14.12.2016
17:09:08
17:09:08
да, не добавляет.
сука
поправил конфиг на обоих серваках через ceph deploy config push
получаю:
что происходит....(главное не угадать, а узнать как это дебажить)
(вот. смотрю....)
GoogleМарк ☢14.12.2016
17:28:55
17:28:55
поднял второй монитор и сразу заработало
он почему-то не запустился после ребута....
ну блин... нельзя было написать что мол не хватает для минимума
Итак. У меня всё завлось. но теперь я хочу поделить сути на пабли и сторадж
с точки зрения проводов и айпишников всё готово
какие будут ценные указания как это сделать?
http://docs.ceph.com/docs/kraken/rados/configuration/network-config-ref/
пока до конца не понятно
[osd.0]
мне что, КАЖДЫЙ osd нужно в конфигу прописывать?
у меня там ни одного сейчас нет.
[Anonymous]14.12.2016
21:30:57
21:30:57
Как много ценных указаний
Xeniya MTS14.12.2016
22:19:22
22:19:22
А какие есть способы снизить нагрузку на сеть? SSD сравнительно дешёвые, в отличие от 10g карт и коммутаторов
Александр14.12.2016
22:23:05
22:23:05
Ssd стоит дороже или столько же как и 10гб
Xeniya MTS14.12.2016
22:24:43
22:24:43
Просто есть дешёвый способ иметь реплицированную object storage - swift
Ceph нужен для cinder,
Он тут действительно очень удобен
Pavel14.12.2016
22:25:37
22:25:37
Для новы тоже вариант
Xeniya MTS14.12.2016
22:25:52
22:25:52
Но не так уж нужны большие объёмы, если разработчики свои, то все можно писать в object storage тяжёлое
GoogleXeniya MTS14.12.2016
22:26:23
22:26:23
Это для хостинга какого разве, если публичное облако
Pavel14.12.2016
22:26:48
22:26:48
Ну да, но я бы не юзала, зачем?
Например чтобы получить более дешевое место и не тратить более дорогоеXeniya MTS14.12.2016
22:26:55
22:26:55
Все равно ha лучше делать на софтовом уровне
Pavel14.12.2016
22:27:08
22:27:08
Ну и есть вариант когда бэкенд вообще один - цеф
Xeniya MTS14.12.2016
22:27:21
22:27:21
Я не понимаю, нафига? Swift не такой прожорливый
Xeniya MTS14.12.2016
22:28:30
22:28:30
Очень хочется заюзать ceph у нас, но для cinder, что бы drbd выкинуть
Если у тебя не хостинг
Pavel14.12.2016
22:29:26
22:29:26
Да
Xeniya MTS14.12.2016
22:29:47
22:29:47
А то, что fuel предлагает юзать ceph в качестве бэкэнда для swift, ужасно
Мирантис делают класмную штуку, красивую, которая действительно почти работает из коропки и без напильника, и тут такой писец
Открыть в Telegram