Das замутили ну скажем jbod hgst 60bay

Собрали рейд

Софтовый

Просадки дикие были на 800 потоках ффмпег

Почему Вы считаете, что 1 процесс - 1 иопс?

А сколько один процес может делать записи? 10-20 думаю.

LA 777

Соберите ZFS на всех дисках

и не надо вам софтовый рейд.

Почему Вы считаете, что 1 процесс - 1 иопс?

Там же 24 шпинделя, а число в 300 иопсов было дано из расчета на один

А сколько один процес может делать записи? 10-20 думаю.

Я пробовал писать где-то 250 каналов архив - это где-то 2100 иопс, по-моему, если не больше

Соберите ZFS на всех дисках

У меня щас lvm

Там же 24 шпинделя, а число в 300 иопсов было дано из расчета на один

Это какой шпиндель даст 300 иопс? Обычные 7200 сата - это 120, а в реале бы больше 85 не закладывал

Просто куча дисков

Один диск вылетает

Вылетают 500ТБ

У меня щас lvm

Откажитесь от него.

У рэйд 5 недостаток - это пенальти при записи и деградация по чтению при выходе из строя одного из накопителей

вам надо только зеркалировать и включить компресиию.

вам надо только зеркалировать и включить компресиию.

Видео сжимать не имеет смысла

Видео сжимать не имеет смысла

ТОгда не включать компресию.

Такс это я понял соберу протестирую

Дам сравнение

Я бы лучше распределенное хранилище строил :) ceph с cephfs :)

Я бы лучше распределенное хранилище строил :) ceph с cephfs :)

Блин это круто

Но когда нету опыта

И это проект бг

Это очень опасно

Я бы лучше распределенное хранилище строил :) ceph с cephfs :)

Оно будет медленее чем просто винты подключить напрямую и собрать в ZFS

Так сказать можно уехать далеко и надолго

Оно будет медленее чем просто винты подключить напрямую и собрать в ZFS

Диск вылетит что будет ?

+ снапшоты можно спойоно отправлять в бекап.

Диск вылетит что будет ?

Если без зеркала то часть файлов которие были на том винте будут недоступны

файловая не посыпиться

Оно будет медленее чем просто винты подключить напрямую и собрать в ZFS

Для многопоточной записи - нормально как раз

Для многопоточной записи - нормально как раз

CEPH хорош только если через InfinityBand и минимум 5 нод

а если CEPH то почему не Lustre ?

CEPH хорош только если через InfinityBand и минимум 5 нод

Юзаю snr 10gb ))

Диск вылетит что будет ?

Вопше ZFS спроектирована с расчетом на то что винты всегда вылетают.

Вопше ZFS спроектирована с расчетом на то что винты всегда вылетают.

Спасибо за так сказать правильное направление

Спасибо за так сказать правильное направление

Вам жить будет проще с ней

Вам жить будет проще с ней

Я согласен чем проще тем лучше

+ хранилище которое построеное на ZFS перенести на CEPH, Lustre, или любое другую файловую будет не трудно.

Человеку с логотипом FreeBSD на аватарке странно рассказывать про ZFS:))

)))

Человеку с логотипом FreeBSD на аватарке странно рассказывать про ZFS:))

ТОж так думаю, но бывает.

FreeBSD юзаю и очень люблю

Но юзаю в других целях

Но юзаю в других целях

А в каких целях лутше высего FreeBSD использовать? Сразу такой вопрос напрашиватьеся.

Щас накидаю много воды

Потом расскажу

Думаю что тут дело вкуса, кто на чем хочет на том и варит.

Начал юзать в 14 лет когда строили домовую сеть , юзали как маршрутизатор изначально , нашли бекдор на сервере РТ и написали небольшой модуль для апача Аля прокси сервер инет был через adsl , юзали mmx 166 с помощью тюнинга ядра гнали через него 100мегабит с участием других пирингов кроме РТ

В будущем начали разрабатывать систему иптв бесплатную для людей в городе

Юзали его как маршрутизатор

Ну понятно, много уже от того времени изменилось.

Для забора с тарелок иптв юзали генту

Ну понятно, много уже от того времени изменилось.

Не спорю видел что и виртуализация появилась тестил

Не то слово, появилось их столко что голова кругом.

Но так как все мы растем и развиваемся приходит время когда нужно делать выбор

Либо ты специалист либо уже руководитель

(

Либо спецалист руководитель.

Либо спецалист руководитель.

Плохая связачка

Тупым людям проще живётся

Это факт

Да нет, норм, если твои сотруднийи это сервера, маршрутизаторы и дисковые полки.

Но не понимая технической части нельзя сделать адекватный выбор

ERROR: S client not available

Тупым людям проще живётся

Да, но не так весело.

Вот и пришел к вам ))

Понимаю все но бля ссу

))))

Ну чтоб полностю понять что вам надо надо много всего учесть

а потом уже думать, но веравно не видел задач где б ZFS не справилась, для хранения даных.

Хотя долго использовал reiserfs но она уж давно отжила себя.

Мы щас юзаем xfs

У админов не получилось создать раздел на 500тб

такое себе решение.

На ext4

Честно не вникал почему задач других много

Мы щас юзаем xfs

У xfs плохо с удалением файлов

У xfs плохо с удалением файлов

Заметили

Написали костыль на питоне

В нашем кейсе писалось и удалялось постоянно много файлов, так при удалении iowait был дикий

В нашем кейсе писалось и удалялось постоянно много файлов, так при удалении iowait был дикий

Часто раз в какой период ?

Каждую секунду ?

Каждые минуты 2 по 15-20 тысяч файлов

Через что iptv гоняли?

Hls?

Через что iptv гоняли?

M3u

Влц отдавал хттп

разве?

Угу

VLC умеет ts файлики резать и ts фрагменты создавать?

не знал

VLC умеет ts файлики резать и ts фрагменты создавать?

Зачем

Он отдавал поток

M3u плейлист

так HTTP ты же сказал, какой поток

это не поток