Maxim
наверно флаг thin ставил ?
у local-zfs он из коробки стоит
Maxim
в 7 не стояло
в 8 стоит
Autumn
наверно флаг thin ставил ?
нет такого флага в интерфейсе прокса для зфс
Autumn
все по умолчанию прокликал типа далее-далее-готово, и да размер диска по умолчанию в интерфейсе прокса именно 32ГБ
Maxim
все по умолчанию прокликал типа далее-далее-готово, и да размер диска по умолчанию в интерфейсе прокса именно 32ГБ
блин это не созданная с нуля виртуалка ну точнее, виртуалка с нуля создана, а диск импортирован и у него остался изначальный объём в 30
Maxim
мало стрелочек :)
Ivan
в таком случае zvol с флагом -s создается
Autumn
лол, я думал речь про создание виртуалки
Autumn
я то про дефолтные настройки когда сама виртуалка создается, мне интересно откуда у коллеги могло взяться резервирование
Autumn
https://t.me/ru_zfs/63545
сорян, слепой =)
Autumn
опять :) именно эта галочка именно так работает, когда её нет
проверил все четенько размер диска один в один с размер рефрезервации, что логично, никогда на это не обращал внимание
Autumn
то есть, не так, как у меня? я правильно понял?
ну как у вас понятно, у вас же судя по посту выше диск имортирован а в свойствах машины осталась старая запись, я о том что указанный размер диска в веб-морде почти совпадает с тем что выдает зфс и рефпровизионит
Autumn
т.е. по дефолту диск в веб-морде 32ГБ, на зфс 33ГБ и под звол и под рефпровизионинг без расхождений
Autumn
видать метаданные что-то сожрали или еще что 1 гиг сверху накинуло
Maxim
ну как у вас понятно, у вас же судя по посту выше диск имортирован а в свойствах машины осталась старая запись, я о том что указанный размер диска в веб-морде почти совпадает с тем что выдает зфс и рефпровизионит
машина была создана без диска другие машины с дисками других размеров получили все +8% именно от фактических дисков (что не удивительно, ибо это именно свойство самого диска, а не машины)
Maxim
возможно, это спецэффект именно от импортирования
Autumn
не исключено
Autumn
оффтоп, про флажок проверил - датасеты созданные самим проксом при установке имеют его по умолчанию, те которые добавляются после - нет, вот отсюда и котовасия, я тестовые машинки на rpool/data создавал, а там он стоит, никогда не обращал внимания, всегда было побоку че они там ставят из коробки
Maxim
Добрый день! Подскажите, как работает свойства reservation и refreservation Я понимаю, что они резервируют место, только не понимаю, когда это место в расход пойдёт
Я понял :) С zvol свойства reservation и refreservation нужны для резервирования места на случай увеличения размера диска Всем спасибо за участие!
Maksym
Коллеги, у кого-то был необычный опыт с риалтековскими сетевухами?
Александр
Коллеги, у кого-то был необычный опыт с риалтековскими сетевухами?
В смысле использования реалтековских сетевух в качестве дисковых контроллеров?...
Δαρθ
а какое дело ширпотребной бытовой сетевухе что там через нее передается
Autumn
Я понял :) С zvol свойства reservation и refreservation нужны для резервирования места на случай увеличения размера диска Всем спасибо за участие!
а я не понял что-то, как по мне бессмысленно, разве что заранее будет известно что диск гарантированно будет увеличен, иначе почему его не сделать сразу нужного размера, а если увеличение вызвано необходимостью то оно доступно в пределах свободного места в пуле
Autumn
Коллеги, у кого-то был необычный опыт с риалтековскими сетевухами?
был, нормально они работают, я обычно советую как совсем бомж вариант, обычно с ними минимум проблем, но я их не люблю, если есть немного денег всегда говорю - возьмите интел
Denis
Коллеги, у кого-то был необычный опыт с риалтековскими сетевухами?
под FreeBSD 13.1 на гигабите периодически падали. точной модели чипа не помню. поменял на интел.
Maxim
это вот такое вот резервирование "всерьёз и надолго"
Autumn
это вот такое вот резервирование "всерьёз и надолго"
Все равно странная ситуация, ибо получается либо не так изначально расчитан необходимый объем, либо, годами простаивает гигантское дисковое за которое уплачено. Это как купить кучу озу а потом спрашивать какой ДЕ в линухе юзать что бы поменьше озу кушало. И опять же мне кажется резервирование не решает эту проблему. Если и так есть свобоное то увеличить размер zvol без проблем, если его нет потому что оно роздано в резервирование то придется у кого-то резервирование снимать и отдавать кому оно надо сейчас дополнительно сверх того что дано. А как на год и более вперед прогнозировать резервирование? А если его прогнозировать можно не проще исходя из прогноза дать больше места в zvol сразу, например зная усредненный рост БД. И вообще не проще ли просто следить за доступностью свободного места и его юзать. Ну там в заббикс поставить напоминалку или в проксе в статистику смотреть. Мне видится такое переусложнение избыточным. Это надо еще вести документацию на предмет кому сколько резерва дано иначе через год придется шарится по зфс в 100600 zvol в поисках "немо" что не так и куда делось дисковое.
Maxim
Все равно странная ситуация, ибо получается либо не так изначально расчитан необходимый объем, либо, годами простаивает гигантское дисковое за которое уплачено. Это как купить кучу озу а потом спрашивать какой ДЕ в линухе юзать что бы поменьше озу кушало. И опять же мне кажется резервирование не решает эту проблему. Если и так есть свобоное то увеличить размер zvol без проблем, если его нет потому что оно роздано в резервирование то придется у кого-то резервирование снимать и отдавать кому оно надо сейчас дополнительно сверх того что дано. А как на год и более вперед прогнозировать резервирование? А если его прогнозировать можно не проще исходя из прогноза дать больше места в zvol сразу, например зная усредненный рост БД. И вообще не проще ли просто следить за доступностью свободного места и его юзать. Ну там в заббикс поставить напоминалку или в проксе в статистику смотреть. Мне видится такое переусложнение избыточным. Это надо еще вести документацию на предмет кому сколько резерва дано иначе через год придется шарится по зфс в 100600 zvol в поисках "немо" что не так и куда делось дисковое.
это инструмент, его можно использовать по-разному рассчитывать, что дефолт подойдёт всем и каждому - неразумно наивно
Autumn
это инструмент, его можно использовать по-разному рассчитывать, что дефолт подойдёт всем и каждому - неразумно наивно
Ну я как инструмент вижу его в варианте: refreservatiov на zvol если нет thin provisioning, потом сверху вешаем reservation что бы гарантировать возможность снятия снашотов да и все. В остальном планируем и отслеживаем свободное место. Все равно надо следить что бы 20% пула было свободно. Но мне проще планировать + следить за свободным местом.
Roman
/report
Александр
/report
Алексей
чет они задрали последнее время
Ivan
я заметил что протектрон неплохо справляется с такими ботами
Fedor
Давайте не флудить. Спасибо.
Станислав
Привет! Подскажите, кто-то хранил данные для обучения TensorFlow? Есть какие-то предпочтительные (для zfs) варианты? А то читать данные тензор может из файлов, баз данных... не знаю что выбрать, так как не работал пока с ним
Филипп
Привет! Подскажите, кто-то хранил данные для обучения TensorFlow? Есть какие-то предпочтительные (для zfs) варианты? А то читать данные тензор может из файлов, баз данных... не знаю что выбрать, так как не работал пока с ним
Слишком широкий вопрос, данные для tf могут быть таблицами, текстом, картинками или видео. Одно общее: для обучения нужен случайный доступ, для вывода достаточно последовательного
Станислав
Слишком широкий вопрос, данные для tf могут быть таблицами, текстом, картинками или видео. Одно общее: для обучения нужен случайный доступ, для вывода достаточно последовательного
Картинок и видео пока даже не предполагается, только генерация текстовых ответов по товарам с сайта. В том то и дело, что он обширный, может кто опыт имеет и на грабли наступал.
Rufat
Приветствую. Создать RAID10 в аппаратном контроллере и в zfs (Truenas) создать страйп- бредовая идея? ))
Rufat
я то думаю что у меня скорость режется в 50мбайт/с
Rufat
Да)
для скорости (файлопомойка) raidz1 в 5 дисков?
Rufat
или таки 2 наверное
Vladislav
для скорости (файлопомойка) raidz1 в 5 дисков?
R1 на5 дисков это мощная отказоустойчивость
Rufat
R1 на5 дисков это мощная отказоустойчивость
понял, принял, спс. переделаю )
Rufat
ага, ну так и предполагал
Vladislav
Ещё не забудьте перевести контроллер в режим hba
Rufat
) R5 на 4 + HS
а. стоп. старый контроллер, рейд5 нет там. максимум 10Е. я то 4 диска + HS делал.
Rufat
Vladislav
Вам ZFS с какой целью нужен?
Rufat
дома
Vladislav
файлопомойка
Чем просто рейд контроллер + nextcloud или OMV не подходит? Суть просто в том, что TrueNAS нужен прямой доступ до дисков Я конечно держал truenas на рейде и данные не умерли, но это неправильный подход
Rufat
ну пул на рейде10 это второй пул, это так, сдохнет и сдохнет. проблема в скорости его 50мб, по максимуму в гигабит сети хочется. ну я попробую в raidz1 создать и проверю скорость
Mikhail
такого режима нет у него вроде
Можно попробовать поудалять все рэйды и посмотреть - у меня какой-то адаптек сам говорил что лоджик драйвов нет - поэтому перехожу в хба мод
Ivan
нашел инструкцию как перевести в IT -режим чтоб был HBA
hba можно без it режима включить. но желательно в it режим зашить контроллер.
Rufat
hba можно без it режима включить. но желательно в it режим зашить контроллер.
рили? там меню такое скудное, не нашел переключателя или отображения статуса.
Rufat
ну вот поиграюсь заодно) перешью прост
Rufat
ну вот поиграюсь заодно) перешью прост
не получилось перешить в IT режим по инструкции( кучу сложностей возникли на пути, просто массив удалил. на трунасе создал зеркало с хотспаром. хотспар заменил вышедший винт как раз.
Evgenii
Все равно странная ситуация, ибо получается либо не так изначально расчитан необходимый объем, либо, годами простаивает гигантское дисковое за которое уплачено. Это как купить кучу озу а потом спрашивать какой ДЕ в линухе юзать что бы поменьше озу кушало. И опять же мне кажется резервирование не решает эту проблему. Если и так есть свобоное то увеличить размер zvol без проблем, если его нет потому что оно роздано в резервирование то придется у кого-то резервирование снимать и отдавать кому оно надо сейчас дополнительно сверх того что дано. А как на год и более вперед прогнозировать резервирование? А если его прогнозировать можно не проще исходя из прогноза дать больше места в zvol сразу, например зная усредненный рост БД. И вообще не проще ли просто следить за доступностью свободного места и его юзать. Ну там в заббикс поставить напоминалку или в проксе в статистику смотреть. Мне видится такое переусложнение избыточным. Это надо еще вести документацию на предмет кому сколько резерва дано иначе через год придется шарится по зфс в 100600 zvol в поисках "немо" что не так и куда делось дисковое.
Мы с ребятами используем резервирование места в качестве экстренного "торможения" в случае, если мы не успеем отреагировать на алерты исчерпания места в основном пуле. — все наши вм имеют тонкие диски — мы не знаем, что происходит внутри, поэтому риск внезапного исчерпания повышается — основные VM и система лежат в одном пуле, поэтому исчерпание места чревато боком для системы — системный датасет редко растет, поэтому мы используем скрипт, который резервирует для него +5 Gb от текущего размера каждую минуту. — в итоге при аварийной ситуации VM станут на паузу, а система продолжит работать — можно будет освободить место (удалить некоторые снимки), призвать ответственных и возобновить работу VM
Autumn
Мы с ребятами используем резервирование места в качестве экстренного "торможения" в случае, если мы не успеем отреагировать на алерты исчерпания места в основном пуле. — все наши вм имеют тонкие диски — мы не знаем, что происходит внутри, поэтому риск внезапного исчерпания повышается — основные VM и система лежат в одном пуле, поэтому исчерпание места чревато боком для системы — системный датасет редко растет, поэтому мы используем скрипт, который резервирует для него +5 Gb от текущего размера каждую минуту. — в итоге при аварийной ситуации VM станут на паузу, а система продолжит работать — можно будет освободить место (удалить некоторые снимки), призвать ответственных и возобновить работу VM
Спасибо за опыт. Интересная реализация, возьму на заметку. Вопрос, это у вас какая-то форма публичного или приватного облака, что вы не контролируете что там за вм созданы?
Autumn
Мне интересно исходя из кейса применения зфс. Как вы ее под виртуалки раздаете - через абстракцию типа нфс или что-то другое или просто локальный сторадж?
Evgenii
Спасибо за опыт. Интересная реализация, возьму на заметку. Вопрос, это у вас какая-то форма публичного или приватного облака, что вы не контролируете что там за вм созданы?
Да, мы отвечаем только за виртуализацию, 2-way реплики и восстановление (снимки, бэкапы, резервные сервера), Локальный сторадж на nvme.
Autumn
Да, мы отвечаем только за виртуализацию, 2-way реплики и восстановление (снимки, бэкапы, резервные сервера), Локальный сторадж на nvme.
О, Вы коллега как раз и нужны - как на нвме сторадж сделан - просто подисково или raidz/raid10 какой?
Алексей
Ща закидают ссаными тряпками)
Autumn
10, но диски очень хорошие, Hetzner
А сколько дисков в пуле? Тесты производительности против raidz делали? Что за модель хетцнер выдает, а то у них на аукционе только enterprise написано?
Autumn
Алексей
Кто, за что и почему?
Мне кажется тут есть нелюбители хетцнера
Autumn
Мне кажется тут есть нелюбители хетцнера
Ну я когда работал с хетцнером лет 5-6 назад они иногда вытворяли типа диски с износом 99% в серваках продавали. Приходилось с сапортом "взаимодействовать" по замене. Но как меня коллеги заверили, сейчас все стало лучше. Я как раз планирую из другого ЦОДа в хетцнер пару клиентов мувнуть ибо ниже хетцнера цены на дедики по рынку не вижу.