Artem
Перейдем в практическое русло. 1) Сколько стоит Ваша консультация в виде развернутой рекомендации, которая сработает? 2) Сколько стоит тюнинг пула под нагрузку (включая твикинг ОС)?
Лично я не админю чужие незнакомые серваки. Мне своих хватает. Но попробуй еще кого-нибудь поспрашивать, только я бы рекомендовал бюджет озвучить и ТЗ вменяемо написать
Artem
По прежнему какой дедик не купишь - там mdadm и xfs. ZFS ниразу не встретил. Хостеры что то не уверены
На дедик ставишь то, что тебе надо. Хостеры странным точно заморачиваться не будут
Dexex
На дедик ставишь то, что тебе надо. Хостеры странным точно заморачиваться не будут
Да там нормально. Я брал дедик для GETH ETH, там нормально так по данным на nvme и по нагрузке. XFS стояла и зеркало. Нет проблем за год. Диск сдох потом - поменяли его и сказали ребилд сделать. Все на лету.
Pavel
Лично я не админю чужие незнакомые серваки. Мне своих хватает. Но попробуй еще кого-нибудь поспрашивать, только я бы рекомендовал бюджет озвучить и ТЗ вменяемо написать
Хорошо, сколько стоит час вашего времени, я думаю это вполне достаточно для развернутой консультации? Мы тут наверное уже больше дискутируем, что нет проблем все настроить, просто нужно знать, а некоторые не знают и не читают и хотят халявы. Ну и какие гарантии, если Ваша консультация окажется рабочей?
Pavel
Так не работает ))
Ну как я не видел еще никаких других оценок работы, кроме повременной. Давайте начнем со стоимости часа.
Artem
Ну как я не видел еще никаких других оценок работы, кроме повременной. Давайте начнем со стоимости часа.
Еще раз - лично я этим не занимаюсь, мне это неинтересно. Поищите другого консультанта
Pavel
Еще раз - лично я этим не занимаюсь, мне это неинтересно. Поищите другого консультанта
Жаль, "Да лень просто всем. Тыж денег не платишь, а хочешь халявы" звучало, как предложение :)
Artem
Жаль, "Да лень просто всем. Тыж денег не платишь, а хочешь халявы" звучало, как предложение :)
Это было написано Dexex на вопль обиды "вы нихера не знаете и не помогаете". А что, разве должны?
Khajiit
Это было написано Dexex на вопль обиды "вы нихера не знаете и не помогаете". А что, разве должны?
Кажется, я его вспомнил… Месяц назад был тут один гой, не сумел сказать, что у него proxmox и thick zvol — пришлось догадываться. На вопрос, выключил ли он свою снепшотилку он тоже не смог ответить. Зато много, часто и громко невменяемо орал и матерился как сапожник, пока не схватил мьют
Khajiit
Это сообщество очень терпеливо...
Nik
Я потестил и не увидел никакого особого буста в сравнении с qcow. relink на xfs работает замечательно. Сжатие оказалось бесполезной херней - 5, 10% максимум.
Не знаю, тестовые базы 1с 1.9tb сжаты до 1.1 tb при размере блока 32k вроде прилично... На 128 еще больше бы дал, на сколько помню база с 500+ была 140 примерно. Еще кстати вам предлагали решение вашей проблемы, просто добавлением временно диска, с последующим его удалением... Специально протестил на виртуалках этот метод, все работало.
Nik
Снапшотом можно ту же базу 1с для тестов восстанавливать за секунды
Pavel
Снапшотом можно ту же базу 1с для тестов восстанавливать за секунды
Был момент, тоже использовал снапшоты для тестов БД, удобно.
Vladislav
Это вообще смешно даже. Прекрасная ФС. Прекрасная! Лучшая реклама.
Тебе ещё в прошлый раз сказали - используй lvm раз не в силах прочитать доку
Vladislav
Тут не кружок чтения вслух
Dexex
Тебе ещё в прошлый раз сказали - используй lvm раз не в силах прочитать доку
Да. Я помню и все я читал. В прошлый раз я указал баг и причем тут чтение документации? Решения найдено не было.
Sergio
Опять двадцать пять...
Pavel
в 4 тут уже проц 25% в среднем https://pastebin.com/FrR9LBwH
Здравствуйте Я тут посмотрел параметры проца вашего, посмотрел своего, да конечно в турбобусте у Вас в 1.5 раза быстрей, но по тесту выходит, что у меня CPU жрет раза в три больше чем у вас. Поэтому я думаю, что возможно есть проблема в каких-то настройках или версиях ПО у меня. Если не сложно пришлите ваши настройки zfs get all /dev/zvol/Data/vm-1000000-disk-0 Делали ли Вы какие-то дополнительные настройки пула? И какая версия zfs и ядра у вас?
Fedor
Ничего не меняется. Я не должен понимать всех дебрей. С точки зрения использования ФС - я пользователь. Точно такой же, как и пользователь браузера. Потому что это не моя зона ответственности.
Хм, обратную связь в разработку можно отдать через issue в официальном репо. Рекомендуется перед использованием продукта прочитать лицензию, под которой зфс распространяется. Игры, наподобие "я пользователь оно должно само работать бай дефолт во всех кейсах а я ни о чем не должен думать" не применимы к опенсорсу.
Fedor
Такое можно заявлять только при наличии контракта на поддержку с SLA и подобным имхо
Alexey
В любой непонятной ситуации переходить на lvm :))
Ivan
В любой непонятной ситуации переходить на lvm :))
на тонком lvm тоже проблем можно словить с подходом: оно всё само должно как-то работать.
Aleks
Да. Я помню и все я читал. В прошлый раз я указал баг и причем тут чтение документации? Решения найдено не было.
ну как не было, советовали же временный диск подкинуть и в будущем не создавать снепшоты быстрее, чем они могут создаваться
Pavel
Pavel
Vladislav
Ну наконец-то
Vladislav
Не прошло и месяца
Pavel
Не прошло и месяца
Ну Вы же не сказали, что можете посмотреть, сам я их и так видел :)
Vladislav
Fio с глубиной 128 или с количеством потоков 128?
Pavel
fio -name=test -ioengine=libaio -direct=1 -randrepeat=0 -rw=randwrite -bs=4k -numjobs=1 -iodepth=128 -group_reporting -runtime=60 --time_based -filename=/dev/zvol/pnvf/pve/vm-111023-disk-0
Vladislav
https://forum.proxmox.com/threads/z_wr_iss-high-cpu-usage-and-high-cpu-load.94080/
Vladislav
Открываем и читаем
Pavel
https://forum.proxmox.com/threads/z_wr_iss-high-cpu-usage-and-high-cpu-load.94080/
У меня не raidz тут простая комбинация 3 vdev (nvme) без резервирования RAID0 и 1 log (nvme)
Pavel
Я вот тут запустил fio с теми же параметрами напрямую на соседнем NVME видно, что картина другая совсем
Pavel
Я тестировал и на одном nvme картина примерно такая же
Vladislav
Или nmon
Pavel
какой лучше?
Pavel
Или nmon
Открыл nmon я им не пользовался никогда, что где смотреть?
Vladislav
Vladislav
Подсказка, тебя интересует статы процессора
Pavel
Это я понял, мне CPU смотреть или куда?
Vladislav
Ну нажми и посмотри
Pavel
Уже нажал :), с начала 'с' потом 'С' там пусто, щас попробую fio запустить
Pavel
Ну нажми и посмотри
Вы просто скажите , что искать, я сначала с nmon разберусь, а то так долго будет
Pavel
Кстати это статистика пула по вводу выводу
Pavel
Pavel
Это?
Pavel
Vladislav
И CPU?
Pavel
Vladislav
Ебать, CPU не особо
Vladislav
Напомни, что за проц?
Vladislav
И какие nvme
Pavel
Xeon(R) Gold 6142
Vladislav
Vladislav
Блять pastebin
Pavel
Блять pastebin
Так? https://pastebin.com/pZnR7jfi
Vladislav
Так? https://pastebin.com/pZnR7jfi
Для теста выруби mitigations + C states
Vladislav
И модель nvme
Pavel
И модель nvme
970 EVO Plus но похожая картинка у меня и с тмьу получше