Y
Ну я понял, что ты в х1 слот втыкал
странно ты понял написанное
Artem
Ну как понял. Я обычно такие платки-переходники с x4 встречал, ибо странный переходник получается
Y
надо будет попробовать в процевый слот воткнуть.... хотя я на НАСе пробовал через переходник х4 - но там уже система которая умеет в nVME
Artem
Да мне больше интересно, зачем такое в мануалах материнок пишут, например только M2_2 и M2_3 поддерживают оптаны
Artem
Смешное ))
Y
Да мне больше интересно, зачем такое в мануалах материнок пишут, например только M2_2 и M2_3 поддерживают оптаны
а что бы не тыкали... вообще есть стандарты - но не все их придерживаются - так то pci-e должны быть полностью совместимы от х1 до х16
Y
Смешное ))
удобное - я через такие счас как раз собираюсь тройное зеркало под спешл воткнуть на nVME - скорости сильно гиганские не нужны - по любасу упрется или в сетку или в рандом (а для рандома и х1 хватит 3й версии) - зато никаких лишних кабелей и на старую мать где не разгуляешься с м2, пойдет
Artem
а что бы не тыкали... вообще есть стандарты - но не все их придерживаются - так то pci-e должны быть полностью совместимы от х1 до х16
Оно много чего умеет, на самом деле. Если например линию/другую перебить - оно должно продолжить работать, но медленнее
Y
Смешное ))
есть такие же чуть дороже с кондером и паралельные типа таких
Y
А что ждешь оо спешла? Мелкие файлы ?
мету - но это долгий процесс - так как большая часть пула уже записана
Y
Тут нет защиты питания если что
ну значит кондер для красоты - есть без кондера
Georg🎞️🎥
мету - но это долгий процесс - так как большая часть пула уже записана
Это мета должна или нет ускорить доступ к данным ?🤔и как ее расчитывал ?объем ?
Y
Тут нет защиты питания если что
там вроде не про защиту, а то что на сам накопитель еще подает электричка из кондера когда комп уже обесточен, что теоретически дает время сбросить внтуренний кеш на флеш
Y
это ионистр кажется - разницы в принципе никакой - кроме того что он быстрее
Y
а на х1 такие есть ?
Georg🎞️🎥
а на х1 такие есть ?
Эммм… так все же обратно совместимо ))) втыкай и работай по 1 линии ))
Artem
Мне такие больше зашли, если на скорость пофиг, оно два диска в один x4 пихает.
Y
Эммм… так все же обратно совместимо ))) втыкай и работай по 1 линии ))
физически слоты х1 - надо проил делать - по электрике да заработает
Sergey
Georg🎞️🎥
Али 16гб по 400-500р
Аааа … видел да Не мало ? Есть клеевые по 118 гиг , но на ебее, по 75 долларов уже (( 800p
Artem
Я по 3круб с Али брал
Georg🎞️🎥
чего то на них ценник конский - 100$ ?
Из за чипа .. можно в матери , которые без буферизации
Sergey
Аааа … видел да Не мало ? Есть клеевые по 118 гиг , но на ебее, по 75 долларов уже (( 800p
А у меня мелкий пул. Диски по 500-1000гб в общем со всего хлама. Главное это ж начать. Да и объём спешила рассчитывается от скорости сетки
Y
Али 16гб по 400-500р
не хватит же под мету (надо 0.3 % от размера пула примерно) - то есть я для себе считал 100 гига на 30 тера (ну я поставлю 256 или 500 - там разница в цене никакая, но обычные nVME)
Sergey
ты это с LOG попутал
А тьфу-тьфу . Точно они же под лог....
Georg🎞️🎥
А тьфу-тьфу . Точно они же под лог....
Да ) под дог типа так и есть )) даже этого много ))
Y
0,3 - это левая какая то инфа 🤔
так на бусурманских форумах пишут - не помню чем мативируют
Georg🎞️🎥
так на бусурманских форумах пишут - не помню чем мативируют
Вот а надо )) читаю пока сам .. От типа данных тоже зависть и от объема … Как я понял 🤷🏻‍♂️
Sergey
Спешл Я кстати толком не разобрался зачем) типа у меня проксы пишут на iscsi блоками по 32кб например. (Хотя наверное надо было больше сделать, скорость была бы выше). И как итог толком в спешл сувать нечего. Другие блоки особо не пишутся
Sergey
Ну вот если бы у меня кто-то писал бы блоки 4к я мог бы сказать чтобы блоки 4к писались в мету а 32к мимо меты, я так понял. Т.е. тупое добавление спешла не даёт ничего от слова совсем
Y
Да ) под дог типа так и есть )) даже этого много ))
я себе решил такой конфиг: два optane 16gb в x4 каждый (один m2, второй через переходник х4) система в зеркале на оптанах, хвосты (примерно 6 гига) под SLOG пул (10+2) на 12 дисках (4 порта от матери, и 8 от SAS) 3 nVME в PCI-E x1 через переходники - тройное зеркало для SPECIAL VDEV - 256 гига (на 500 гиговых диска) - хвосты на l2arc и может под торренты активные и сетка 10 гига в х4
Y
Ну вот если бы у меня кто-то писал бы блоки 4к я мог бы сказать чтобы блоки 4к писались в мету а 32к мимо меты, я так понял. Т.е. тупое добавление спешла не даёт ничего от слова совсем
ну как я понимаю вся метадата, а это рандом мелкими блоками, будет на nVME/SSD - что как бы не помешает, да не поможет при чтении самого файла, но весь сопутсвующий ущерб будет не на одном по скорости iops диске механическом а на 3 дисках ssd (причем чтение будет как я понимаю х3 , а запись х1 по йопсам)
Станислав
это ионистр кажется - разницы в принципе никакой - кроме того что он быстрее
Да, это ионистор, он почти вечный, а аккумуляторы очень ограничены сроком службы
Art
Я читал пол ночи пол спешл - не вкуриваю пока , он только для меты или мета и мелкие файлы 🤷🏻‍♂️
Второе🙌 У спешл девайса есть параметр special_small_blocks Если его выставить в скажем 64К, то все меньшие или равные файлы будут писаться не в сам пул, а на спешл девай
Art
Я читал пол ночи пол спешл - не вкуриваю пока , он только для меты или мета и мелкие файлы 🤷🏻‍♂️
Но при этом предельный размер этого параметра ограничение размером рекордсайза То есть special_small_blocks не может быть больше recordsize И ещё эта фича работает только на датасетах, а на зволах нет
Georg🎞️🎥
Но при этом предельный размер этого параметра ограничение размером рекордсайза То есть special_small_blocks не может быть больше recordsize И ещё эта фича работает только на датасетах, а на зволах нет
Спасибо … это как раз не нужно, интересует только метаданные … и насколько это улучшит чтение ))) и как рассчитать параметр )))
Art
Спасибо … это как раз не нужно, интересует только метаданные … и насколько это улучшит чтение ))) и как рассчитать параметр )))
Думаю, начать надо с подсчёта количества меты) Выполни zdb -Lbbb poolname, и кинь сюда вывод, посчитаем) Только сделай моноширинное форматирование текста, а ещё лучше кидай не прямо сюда, а на пастебин или pastes.io
Art
А долго будет считать он ?
С ключом L должен быстрее обычного, но тоже наверное долго
Y
Да, это ионистор, он почти вечный, а аккумуляторы очень ограничены сроком службы
Ну прямо уж таки очень... В досках живут по 20+ лет и ничего... Мне не нужна вечная игла для примуса(с)
Georg🎞️🎥
С ключом L должен быстрее обычного, но тоже наверное долго
Мета на файл зависит учловно от размера файла ? Или на файл 100гиг и 100метров мета будет одинакового примерно размера ? Может как то так прикинуть … на нагружая систему , если долго
Art
Мета на файл зависит учловно от размера файла ? Или на файл 100гиг и 100метров мета будет одинакового примерно размера ? Может как то так прикинуть … на нагружая систему , если долго
Не знаю точно, но по идее да, у каждого файла примерно одинаковая мета, соответственно много файлов = много меты Но гадание не продуктивно, запусти zdb на ночь штоли) В результатах будет много интересного)
Art
Там 170-180 тер 😱
Мощь) Ну п омоему zdb не сильно грузит систему - другое дело, что очень долго, и на таком объёме да на HDD, я боюсь даже представить сколько времени это займёт... Файлы конечно быстрее посчитать: ls -fR | wc -l /poolname
Art
Там 170-180 тер 😱
у меня на стареньком слабеньком сервере насчиталось в каталоге полтора ляма файлов за 10 мин
Georg🎞️🎥
у меня на стареньком слабеньком сервере насчиталось в каталоге полтора ляма файлов за 10 мин
Ну тут видео … Они жирные , не смотря на оюъем, думаю ляма не будет
Art
Нижняя команда - это файлы посчитать ? А умножаем примерно на какой объем ? Мета одного файла ?
Да вот вопрос в том как интрепретировать. Честно не знаю. Разве что если файлов будет относительно мало, то смысла в спешле нет, получается. Только так.
Georg🎞️🎥
Да вот вопрос в том как интрепретировать. Честно не знаю. Разве что если файлов будет относительно мало, то смысла в спешле нет, получается. Только так.
Я думаю, так как не понимаю, что ssd под мету типа должен ускорить доступ к чтению … не так ? Если на большие файлы это не работает, то смысла не особо .. сколько весят мелкие я и так знаю , тогда надо спешл чисто под них рассчитать, а это ну оч жирно выйдет, тер под 8
Georg🎞️🎥
есть мета на каждый файл, а есть мета на каждый блок, т.е. зависимость от обоих
Стало еще не понятнее :)))) Если понимает, поможет ли спешл быстрее читать видео файлы , подскажите , пожалуйста 🙏 То, что читаю на трунус комьюнити - мелкие файлы (((
Georg🎞️🎥
уменьшит латенси на холодное чтение, насколько - надо тестить
… Ага, ну вот это уже польза , остаётся рассчитать объем этого спешла))) если вопрос двух ssd по полтора тера , то это норм - есть две свободные u2
Georg🎞️🎥
сначала потестите, поделитесь потом плиз итогами как на задержках отразилось
Ну надо обновится с 11 на 13 тру для начала )))) все еще переживаю , что что-то пойдет не так 😱😱😱
Art
Ну надо обновится с 11 на 13 тру для начала )))) все еще переживаю , что что-то пойдет не так 😱😱😱
я бы поднял тестовый стенд) Там тестировать и обновления, и настройки ЗФС Можно туда скопировать часть данных, и потестить вволю
Georg🎞️🎥
я бы поднял тестовый стенд) Там тестировать и обновления, и настройки ЗФС Можно туда скопировать часть данных, и потестить вволю
Это самое очевидное , но свободный сервер ушел для работы со звуком , там как раз много arc оч хорошо себя показывает
Станислав
Ну надо обновится с 11 на 13 тру для начала )))) все еще переживаю , что что-то пойдет не так 😱😱😱
Не стоит переживать. Я с 11й обновил как-то на 12й, довольно быстро установились, потом рестарт сделало. Гляжу, пол минуты и войти можно. Думаю "отлично!". Предложило пулы обновить, согласился. В процессе всё повисло, через час сделал хард ресет, но БСД ни в какую стартовать не захотела, на какую-то фигню ругалось, я так и не разобрался в чём дело. Запустился с установщика 11й версии, пулы уже были обновлены, при импорте ругалось, что zfs в пулах новее и не все функции будут доступны, но с "-f" примонтировало и я скопировал данные. Грохнул TrueNAS и завязал окончательно со всеми WEB-GUI, кроме роутеров. Вечно ловлю баги или раздражает кривизна/недоработанность реализации, хотя в TrueNAS мне очень нравился интерфейс и отзывчивость. Так что нужно не переживать, а ожидать и быть готовым)) Хорошо, что это у меня на тестовой среде произошло
Georg🎞️🎥
Не особо поможет для больших видео, как мне кажется, ну с чего вдруг? Чудес не бывает
Я не понимаю принципа работы метаданных и быстрого к ним доступа 🤷🏻‍♂️
Georg🎞️🎥
Не стоит переживать. Я с 11й обновил как-то на 12й, довольно быстро установились, потом рестарт сделало. Гляжу, пол минуты и войти можно. Думаю "отлично!". Предложило пулы обновить, согласился. В процессе всё повисло, через час сделал хард ресет, но БСД ни в какую стартовать не захотела, на какую-то фигню ругалось, я так и не разобрался в чём дело. Запустился с установщика 11й версии, пулы уже были обновлены, при импорте ругалось, что zfs в пулах новее и не все функции будут доступны, но с "-f" примонтировало и я скопировал данные. Грохнул TrueNAS и завязал окончательно со всеми WEB-GUI, кроме роутеров. Вечно ловлю баги или раздражает кривизна/недоработанность реализации, хотя в TrueNAS мне очень нравился интерфейс и отзывчивость. Так что нужно не переживать, а ожидать и быть готовым)) Хорошо, что это у меня на тестовой среде произошло
Вот поэтому и нах на рабочем варианте обновы
Artem
Я не понимаю принципа работы метаданных и быстрого к ним доступа 🤷🏻‍♂️
Это когда у тебя охулиард мелких (10-100кб-1мб файлов), и тебе их надо много читать - вот там должно помочь. А гигабайтные видео, там один фиг проблема с чтением данных, а не метаданных
Artem
Но проще тогда уже все на ssd
На ссд завсегда лучше, чем на хдд 😎
Georg🎞️🎥
На ссд завсегда лучше, чем на хдд 😎
Цена 🤷🏻‍♂️видосы на hdd увы 🤷🏻‍♂️
Artem
Цена 🤷🏻‍♂️видосы на hdd увы 🤷🏻‍♂️
А все данные горячие что-ли?
Georg🎞️🎥
А все данные горячие что-ли?
Да.. Как проект сдан - все удаляется
Georg🎞️🎥
Короче Макс ОЗУ 👌